#big-data
Откройте для себя мир Big Data. В наших статьях вы найдете лучшие open-source инструменты и фреймворки для обработки, анализа и управления большими данными. Изучите Apache Spark, Kafka, Presto и другие технологии для создания масштабируемых, высокопроизводительных систем и аналитики в реальном времени.
ClickBench — как честно сравнить 60 баз данных и не сойти с ума
Разбираем ClickBench от команды ClickHouse — открытый бенчмарк для аналитических баз данных, где 43 реальных SQL-запроса прогоняют по 100 млн записей...
Как обрабатывать миллиарды событий в секунду и не обвалить задержки
Разбираемся, как Hazelcast объединяет распределенную оперативную память и движок потоковой обработки данных для создания быстрых реактивных систем.
Зачем АНБ создало собственную HBase и как работает Apache Accumulo
Разбираем распределённое хранилище Apache Accumulo. Выясняем, зачем его создало АНБ США, в чём его фишка с правами доступа до каждой ячейки и когда он...
Быстрый парсинг JSON в Java с новыми правилами безопасности в Fastjson2
Обзор библиотеки Fastjson2 от Alibaba: ускорение парсинга JSON в Java, бинарный формат JSONB, поддержка Kotlin и исправление проблем с безопасностью.
Как Feast наводит порядок в хаосе данных для машинного обучения
Разбираемся, как Feast помогает дата-инженерам и ML-специалистам избавиться от дублирования кода и утечек данных при подготовке признаков для моделей.
Как ускорить Spark в четыре раза без переписывания кода
Обзор Sail — современного Rust-native движка, который заменяет Apache Spark, ускоряет обработку данных в 4 раза и радикально снижает расходы на облачн...
Как Apache IoTDB справляется с миллиардами точек данных на обычном железе
Разбираем Apache IoTDB — специализированную базу данных для временных рядов, которая эффективно сжимает данные с датчиков и тянет миллионы записей в с...
Как приручить зоопарк моделей и не сойти с ума от Big Data
Обзор H2O-3 — мощной open-source платформы для распределенного машинного обучения. Узнайте, как масштабировать ML-модели, использовать AutoML и внедря...
SQL для всего: Как Apache Calcite превращает любые данные в базу данных
Устали от зоопарка баз данных и разных языков запросов? Apache Calcite — это мощный фреймворк, который позволяет говорить на SQL с любыми источниками...
Что, если поиск — это не просто поиск? Знакомьтесь, Vespa!
Vespa — это мощная платформа для поиска, рекомендаций и обработки данных в реальном времени, способная работать с векторами, тензорами и текстом на лю...
Quickwit — Когда логи и трассировка летают в облаках, а бюджет не плачет
Quickwit — облачно-ориентированный поисковый движок для систем мониторинга, предлагающий быструю и экономичную альтернативу Elasticsearch, Loki и Temp...
Apache Zeppelin - Ваш Интерактивный Блокнот для Big Data
Apache Zeppelin — это интерактивный веб-блокнот для анализа данных, который позволяет объединить код, визуализации и текст в одном коллаборативном док...
Apache Beam — Пишите код для данных один раз, запускайте где угодно
Apache Beam: единая модель для пакетной и потоковой обработки данных. Пишите код один раз на Java, Python или Go, а запускайте на Spark, Flink или Goo...
Kafka UI — Когда управление Apache Kafka становится удовольствием
Устали от командной строки при работе с Apache Kafka? Kafka UI – бесплатный и легкий веб-интерфейс, который превратит рутину управления кластерами в у...
Apache Hive: Как SQL открывает двери в мир Больших Данных на Hadoop
Устали от сложности работы с Big Data? Apache Hive позволяет анализировать огромные массивы данных в Hadoop с помощью привычного SQL. Откройте для себ...
StarRocks: Как ускорить аналитику данных до субсекундных результатов и забыть о боли Data Lakehouse
Устали ждать, пока аналитические запросы выполнятся? StarRocks — это молниеносный движок для аналитики данных в реальном времени, который ускоряет зап...
Apache DataFusion Когда Rust и SQL ускоряют аналитику до небес
Устали от медленной обработки данных? Apache DataFusion — это высокопроизводительный, расширяемый движок запросов на Rust, который поможет вам строить...
Apache Ozone - Когда стандартное хранилище не справляется с миллиардами объектов
Масштабируемое, надежное и распределенное объектное хранилище, оптимизированное для аналитики больших данных и облачных сред. Узнайте, как Apache Ozon...
Apache Paimon — Когда ваш Data Lake оживает в реальном времени
Apache Paimon — это формат озера данных, который позволяет строить Realtime Lakehouse архитектуру с Flink и Spark, объединяя стриминг и батч. Он иннов...
Apache Fluss — Когда данные текут как река к вашему Lakehouse
Apache Fluss — это новое хранилище данных для аналитики в реальном времени, которое элегантно объединяет стриминг и Lakehouse архитектуры. Откройте дл...
Хватит гонять данные - как Trino запрашивает Big Data прямо на месте
Устали от зоопарка баз данных и ETL-процессов? Обзор Trino — распределенного SQL-движка, который позволяет запрашивать данные там, где они лежат, от S...
Apache Flink когда batch-обработка и стриминг живут дружно
Устали от костылей при объединении потоковой и пакетной обработки данных? Apache Flink предлагает элегантное решение. Разбираемся, как этот фреймворк...