тема: Администрација

„Хадоп. ZooKeeper“ од Mail.Ru Group Technostream серијата „Методи за дистрибуирана обработка на големи количини на податоци во Hadoop“

Ви предлагам да го прочитате транскриптот од предавањето „Hadoop. ZooKeeper“ од серијата „Методи на дистрибуирана обработка на големи количини на податоци во Hadoop“ Што е ZooKeeper, неговото место во екосистемот Hadoop. Лаги за дистрибуираното пресметување. Дијаграм на стандарден дистрибуиран систем. Сложеноста на координирање на дистрибуирани системи. Типични проблеми со координацијата. Принципи на кои се темели дизајнот на ZooKeeper. Модел на податоци на ZooKeeper. Znode знамиња. Сесии. Client API. Примитиви (конфигурација, […]

Повторна обработка на настани добиени од Кафка

Здраво, Хабр. Неодамна го споделив моето искуство за тоа кои параметри ние како тим најчесто ги користиме за производителот и потрошувачот на Кафка да се доближат до загарантирана испорака. Во оваа статија сакам да ви кажам како организиравме повторна обработка на настан добиен од Кафка како резултат на привремена недостапност на надворешниот систем. Современите апликации работат во многу сложена средина. Деловната логика обвиткана […]

Премин на OpenVPN на WireGuard да се комбинираат мрежи во една L2 мрежа

Би сакал да го споделам моето искуство за комбинирање мрежи во три географски оддалечени станови, од кои секој користи рутери OpenWRT како порта, во една заедничка мрежа. При изборот на метод за комбинирање на мрежи помеѓу L3 со рутирање на подмрежа и L2 со премостување, кога сите мрежни јазли ќе бидат на иста подмрежа, предност беше дадена на вториот метод, повеќе […]

SSD-дискови за гејмери ​​и складирање на иднината: Seagate на CES 2020

CES е секогаш најочекуваната изложба на почетокот на годината, најголемиот настан во технолошкиот свет. Таму прво се појавуваат гаџети и концепти кои од иднината веднаш зачекоруваат во реалниот свет и го менуваат. Изложбите од овој размер имаат само еден недостаток: било да е CES, IFA или MWC, протокот на информации за време на вакви настани е толку голем што може да […]

Бекап на податоци користејќи FreeFileSync и 7-zip

Анамнеза, така да се каже: Fujitsu rx300 s6 сервер, RAID6 од 6 дискови од 1TB, инсталиран XenServer 6.2, неколку сервери се вртат, меѓу нив Ubuntu со неколку топки, 3,5 милиони датотеки, 1,5 TB податоци, сето тоа постепено расте и отекува. Задача: поставете резервна копија на податоци од сервер за датотеки, делумно дневно, делумно неделно. Имаме машина за резервни копии на Windows со RAID5 […]

HighLoad++, Михаил Макуров, Максим Чернецов (Интерсвјаз): Zabbix, 100kNVPS на еден сервер

Следната конференција HighLoad++ ќе се одржи на 6 и 7 април 2020 година во Санкт Петербург. Детали и билети следете ја врската. HighLoad++ Москва 2018. Сала „Москва“. 9 ноември, 15:00 часот. Апстракти и презентација. * Мониторинг - онлајн и аналитика. * Основни ограничувања на платформата ZABBIX. * Решение за скалирање на складирање на аналитика. * Оптимизација на серверот ZABBIX. * Оптимизација на UI. * Оперативно искуство […]

Неизбежноста на пенетрацијата на FPGA во центрите за податоци

Не треба да сте дизајнер на чипови за да програмирате за FPGA, исто како што не треба да сте програмер C++ за да пишувате код во Java. Сепак, во двата случаи веројатно ќе биде корисно. Целта на комерцијализацијата на Java и FPGA технологиите е да се побие последното тврдење. Добри вести за FPGA - користејќи соодветни слоеви за апстракција и збир на […]

Основи за следење на PostgreSQL. Алексеј Лесовски

Ве поканувам да го прочитате транскриптот од предавањето на Алексеј Лесовски, „Основи на мониторинг на PostgreSQL“, од Data Egret. Во ова предавање, Алексеј Лесовски ќе ги дискутира клучните точки на статистиката на PostgreSQL, што тие значат и зошто треба да бидат вклучени во мониторингот. Тој исто така ќе дискутира кои графикони треба да бидат вклучени во мониторингот, како да се додадат и како да се толкуваат. Ова предавање ќе биде корисно за администратори на бази на податоци, системски […]

Docker Compose: Поедноставување на вашата работа со помош на Makefiles

На секои неколку години, индустријата за развој на софтвер претрпува промена на парадигмата. Еден од овие феномени може да се препознае како зголемениот интерес за концептот на микроуслуги. Иако микросервисите не се најновата технологија, дури неодамна нејзината популарност буквално вртоглаво порасна. Големите монолитни услуги сега се заменуваат со независни, автономни микросервиси. Микросервис може да се смета како апликација која […]

SQL HowTo: напишете додека-јамка директно во барањето, или „Основно тринасочно“

Периодично, задачата за пребарување на поврзани податоци со помош на множество клучеви се појавува додека не го собереме потребниот вкупен број на записи. Најмногу „реален“ пример е прикажувањето на 20-те најстари задачи на списокот на вработени (на пример, во еден оддел). За различни управувачки „табли“ со кратки резимеа на работни области, често се бара слична тема. Во оваа статија ќе ја разгледаме имплементацијата во PostgreSQL […]

Во јадрото Linux VPN овозможен со 5.6 WireGuard

Денес Линус ја пресели нет-следната гранка со VPN интерфејси кај себе WireGuardОвој настан беше најавен на мејлинг листата. WireGuardСобирањето код за новото јадро е во тек. Linux 5.6. WireGuard — брза VPN од следната генерација која користи модерна криптографија. Првично беше развиена како поедноставна и попогодна алтернатива на постојните VPN мрежи. Авторот е канадски специјалист за […]

Поставување едноставна VPN мрежа со WireGuard и Raspberry Pi како сервер

Од WireGuard ќе стане дел од идното јадро Linux 5.6, решив да видам како најдобро да го интегрирам овој VPN со мојот LTE рутер/пристапна точка базиран на Raspberry Pi. Хардверот е Raspberry Pi 3 со LTE модул и јавна IP адреса. Ова ќе биде VPN серверот (во текстот се нарекува edgewalker). Телефонот ќе биде вклучен. Android, кој мора да користи VPN за сите комуникации Лаптоп Linux, [...]

Купете доверлив хостинг за сајтови со DDoS заштита, VPS VDS сервери 🔥 Купете сигурен веб-хостинг со DDoS заштита, VPS VDS сервери | ProHoster