Категория: Администриране

Apache Kafka и потокова обработка на данни с помощта на Spark Streaming

Здравейте, Хабр! Днес ще изградим система, която с помощта на Spark Streaming ще обработва потоци съобщения от Apache Kafka и ще записва резултатите в облачна база данни AWS RDS. Нека предположим, че някаква кредитна организация поставя пред нас задачата да обработваме входящи транзакции „в движение“ за всички свои клонове. Това може да бъде направено с цел бързо изчисление на откритата валута […]

Какви ще бъдат новите хранилища за ИИ и МО

MAX Data ще се обедини с Optane DC за ефективна работа със системи за изкуствен интелект и машинно обучение. Снимка — Hitesh Choudhary — Unsplash Според изследване на MIT Sloan Management Review и The Boston Consulting Group, 85% от трите хиляди анкетирани управители считат, че системите за изкуствен интелект ще помогнат на техните компании да получат конкурентно предимство на пазара. Въпреки това, подобни опити за реализация […]

Създавай, споделяй, сътрудничество

Контейнерите представляват улеснена версия на потребителското пространство на операционната система Linux – всъщност, това е "голият" минимум. Въпреки това, това все пак е напълно функционална операционна система, и затова качеството на този контейнер е толкова важно, колкото и на пълноценната операционна система. В именно тази причина от дълго време предлагаме образи Red Hat Enterprise Linux (RHEL), за да могат потребителите да имат сертифицирани, съвременни […]

Основи на проектирането на бази данни – сравнение на PostgreSQL, Cassandra и MongoDB

Здравейте, приятели. Преди да започнем втората част от майските празници, споделяме с вас материал, който преведохме в подготвителния период за новия поток по курса "Реляционни СУБД". Разработчиците на приложения прекарват много време в сравнение на различни оперативни бази данни, за да изберат тази, която най-добре ще отговори на предвидената работна натовареност. Нуждите могат да включват опростено моделирание на данни, […]

Създаване на мултиплейър уеб игра в жанра .io

Играта Agar.io, излязла през 2015 година, стана основоположник на нов жанр игри .io, чиято популярност оттогава значително нарасна. Лично преживях растежа на популярността на игрите .io: през последните три години създадох и продадох две игри от този жанр. За всеки случай, ако никога преди не сте чували за такива игри: това са безплатни многопотребителски уеб игри, в които […]

Как данните центрове спасяват празниците

През годината българите редовно се отправят на празници – новогодишни ваканции, майски и други по-кратки уикенди. И това е традиционно време за сценарни маратони, спонтанни покупки и разпродажби в Steam. В предпразничния период търговията и логистичните компании изпитват повишено натоварване: хората поръчват подаръци от интернет магазини, плащат за доставка, купуват билети за пътувания и комуникират. Календарните пикове […]

10. Check Point Започване R80.20. Осведоменост за идентичността

Добре дошли на юбилейния — 10-ти урок. Днес ще говорим за още едно решение на Check Point — Identity Awareness. Още в началото, при описанието на NGFW, определихме, че е необходимо регулиране на достъпа на базата на акаунти, а не IP адреси. Това е свързано най-вече с увеличената мобилност на потребителите и широко разпространение […]

Принципи на работа на протокола BGP

Днес ще разгледаме протокола BGP. Няма да говорим долго защо е нужен и защо се използва като единствен протокол. Има доста информация по тази тема, например тук. И така, какво е BGP? BGP е протокол за динамично маршрутизиране, който е единственият EGP (External Gateway Protocol) протокол. Този протокол се използва за изграждане на маршрутизация в интернет. Нека разгледаме как се изгражда […]

Скоростта на хранилището подхожда ли за etcd? Нека питаме fio

Кратка история за fio и etcd Производителността на кластерa etcd в голяма степен зависи от производителността на неговото хранилище. etcd експортира някои метрики в Prometheus, за да предостави необходимата информация за производителността на хранилището. Например, метриката wal_fsync_duration_seconds. В документацията към etcd е посочено, че за да се смята, че хранилището е достатъчно бързо, 99-ият процентил на тази метрика трябва да бъде по-малък от 10 мс. Ако планирате да стартирате […

Лабораторна работа: конфигуриране на lvm, raid в linux

Небольшо отклонение: този лабораторен отчёт е синтетичен. Някои от задачите, описани тук, могат да бъдат изпълнени много по-просто, но тъй като целта на лабораторната работа е да се запознаем с функционалността на RAID и LVM, някои операции са изкуствено усложнени. Изисквания към инструментите за изпълнение на лабораторната работа: Средства за виртуализация, например Virtualbox Инсталационен образ на Linux, например Debian9 Наличие на интернет за сваляне на няколко пакета Свързване по SSH към […]

Удивителни новини от Microsoft: ядро Linux в Windows 10 и IE двигателят в Chromium Edge

На годишната си конференция за разработчици компанията Microsoft направи няколко важни презентации. Избрахме две от тях. Първата: в лятната версия 19H2 Windows 10 ще бъде доставяно с пълноценное ядро на Linux, базирано на версия 4.19 от 22 октомври 2018 година за собствената подсистема 'Linux за Windows' (WSL - Windows Subsystem for Linux). Втората: в бъдещите ентерпрайз версии на Chromium-реинкарнацията […]

Когато променливата среда ускорява процеса 40 пъти

Днес искаме да ви разкажем за някои от последните ъпдейти на системата Sherlock [това е високопроизводителен кластер на Станфордския университет - бел. прев.], които значително ускоряват списъка с файлове в директории с голямо количество записи. В отличие от обикновените статии, това е по-скоро инсайдерски отчет за редовната работа по Sherlock, за да го поддържаме в най-добро състояние за нашите потребители. Надяваме се […]

Купете надежден хостинг за сайтове със защита от DDoS, VPS и VDS сървъри 🔥 Купете надежден хостинг за сайтове със защита от DDoS, VPS и VDS сървъри | ProHoster