DevTrends Logo

#data-pipeline

Проекты и инструменты для построения data pipeline. Узнайте, как автоматизировать сбор, обработку и управление потоками данных для аналитики, подготовки данных для ML-моделей и работы с клиентской информацией. Лучшие open-source решения и практики в наших статьях.

Сортировать по:
Go
4 дня назад

RudderStack — ваш собственный хаб для клиентских данных

RudderStack — открытая альтернатива Segment для управления клиентскими данными с акцентом на приватность и интеграцию с хранилищами данных. Рассказыва...

4435 48
Java
1 неделю назад

Debezium — Когда ваша база данных начинает говорить в реальном времени

Debezium – это open-source платформа для Change Data Capture, которая позволяет в реальном времени отслеживать и стримить изменения данных из ваших ба...

12795 2950
Go
1 неделю назад

Как переливать данные между базами одной командой без кода и боли

Обзор ingestr — мощного CLI-инструмента для копирования данных между любыми базами и сервисами без написания кода. Поддерживает Postgres, ClickHouse,...

3611 125
Java
1 неделю назад

Apache ShardingSphere Когда одна база данных — это уже несерьезно

Apache ShardingSphere — это мощная платформа Database Plus, которая превращает обычные базы данных в распределенные, обеспечивая масштабирование, шард...

20729 6894
Java
1 неделю назад

Flink CDC — Поймать каждое изменение и построить мощные потоки данных

Flink CDC — это мощный инструмент для потоковой интеграции данных, который позволяет в реальном времени захватывать изменения из баз данных и строить...

6432 2170
Python
1 неделю назад

Data-Juicer — Ваш швейцарский нож для подготовки данных под foundation models

Data-Juicer — мощный инструмент для обработки данных под задачи обучения foundation models (включая мультимедийные). Узнайте, как этот проект от Aliba...

6469 374
Python
1 месяц назад

Airbyte — Как перестать писать код для каждого API и полюбить ELT

Устали писать бесконечные скрипты для переноса данных? Знакомьтесь с Airbyte — open-source платформой, которая с помощью 600+ готовых коннекторов прев...

21248 5176