8 Feb 2026, 17:26 UTC≈2,280 views29 reactionsread 7 August 2026 ✨ Станислав Лысиков — StarRocks как ядро современной платформы данных
Станислав Лысиков рассказал о внедрении StarRocks в продуктовом финтехе с данными до петабайта. Доклад — это честный разбор опыта перехода на новую аналитическую СУБД.
Дисклеймер: Рекомендую не читать этот пост, а посмотреть доклад самим) Смотрится легко и очень интересно)
YouTube: https://www.youtube.com/watch?v=oiPXIbX-cTw
VK Видео: https://vkv…
👍10❤8🔥8👌2👎1
22 Nov 2025, 11:47 UTC≈2,650 views17 reactionsread 7 August 2026 Продолжение предыдущего поста. Выводы и ответы на вопросы не влезли)
📝 Чего избегать:
1️⃣ С осторожностью соединять процессоры
2️⃣ Не усложнять процессор в погоне за оптимизацией
❔Ответы на вопросы:
Q: Где брать готовые процессоры для NiFi
A: Ожидать сервис от коммьюнити, сейчас никак
Q: Можно ли отладить процессор в IDE?
A: в NiFi есть эмуляция процессов, можно написать тест там. Возможно открыть PortDebug, помож…
❤7👍6🔥4
22 Nov 2025, 11:47 UTC≈2,340 views22 reactionsread 7 August 2026 Бронислав Житников — NiFi. Пишем код для codeless-системы
Сложность: 2/3 (Если NiFi не
трогали - пропускайте данный доклад. Это отличное подспорье для углубленного знакомства с NiFi)
📺: https://youtu.be/Lnta1yPIMrY?si=cuGJLbmET3cQvadf
📺 :VK
🔍 Условия:
1️⃣ В NiFi может не хватать встроенных процессоров
2️⃣ Иногда нужно избежать приземления данных на диск и для этого несколько процессоров собрать в один
3️⃣ Встроен…
👍12❤6🔥4
15 Nov 2025, 13:37 UTC≈1,710 views17 reactionsread 7 August 2026 Николай Ижиков — One More Way to Make Backup in Ignite
Сложность: 3/3 (Обязательно к прослушиванию, если вам интересна работа с OLTP-нагрузкой и технические подробности снятия бэкапов)
Николай Ижиков, Platform V DataGrid Tech Lead, а также контрибьютор в Apache Kafka и участник PMC Apache ignite, рассказывает нам, как реализованы бэкапы в Platform V DataGrid, а главное — про cache dumps.
YouTube: https://www.yout…
❤8🔥5🏆2👍2
1 Nov 2025, 12:17 UTC≈1,960 views35 reactionsread 7 August 2026 ✨ Татьяна Дидова — Как мы тестировали 5 способов загрузки данных в Greenplum и что из этого вышло
Сложность: 1/3 (Желателен минимальный опыт работы с Greenplum. Тем, кто в GP погружен максимально, вряд ли будет интересно, разве что про то, что sparkом тоже можно писать в GP, не через мастер)
YouTube:
https://www.youtube.com/watch?v=7EcieM3XoXE
VK Video:
https://vkvideo.ru/video-147464741_456239454
Татьяна Дидова,…
👍22❤7🔥6
10 Jul 2025, 14:07 UTC≈3,000 views25 reactionsread 7 August 2026 ✨ Валентин Пановский — Миграция на Iceberg: как кролик съел зеленую сливу и не умер
Сложность: 1/3 (Интересная историческая справка в начале , нет сложного кода, в который необходимо вникнуть. Докладчик рассказывает понятным и доступным языком)
https://www.youtube.com/watch?v=YWD7WcfFfk8
Валентин Пановский поделился опытом миграции с монолитного Greenplum на разделенную Lakehouse-архитектуру с Iceberg в страховой …
🔥13👍8❤4
27 Apr 2025, 10:53 UTC≈3,930 views33 reactionsread 7 August 2026 Отдельного поста заслуживают ответы на вопросы по выступлению команды Лемана Тех про LakeHouse. Я, пользуясь случаем, выражу благодарность комании querify labs (cedrus data) за организацию митапа. И, конечно, ребятам из Лемана Тех за то, что поделились своим опытом и готовы ответить на Ваши вопросы в комментариях к этому посту.
---
Как разделили ресурсы?
Ресурсные группы не настраивали, нагрузку разделили по разн…
🔥19👍7❤6🆒1
27 Apr 2025, 10:53 UTC≈3,640 views25 reactionsread 7 August 2026 ✨ Пётр Гуринов и Сергей Куприков: Опыт внедрения Lakehouse в компании Лемана Тех.
Ссылка на выступление: https://www.youtube.com/watch?v=r70FGQWdEvc&t=950s
Сложность: 2/3 (Сложного кода в докладе нет, но требуется понимание архитектуры DWH/DLH)
Кому будет интересно:
- Вообще всем, кто как-то связан с построением хранилищ данных. DLH это новая реальность, в которую обязательно нужно погрузиться.
---
Компания с ма…
🔥16👍4❤3🫡2
22 Apr 2025, 16:52 UTC≈2,020 views18 reactionsread 7 August 2026 И приятный бонус. Александра любезно согласилась ответить на Ваши вопросы по докладу про airbyte в комментариях к этому посту)
❤7👍6🔥5
22 Apr 2025, 16:43 UTC≈2,200 views23 reactionsread 7 August 2026 ✨ Александра Попова — Airbyte: 2 года в продакшене
Ссылка на выступление: https://youtu.be/fgaBGc3VWWQ?si=jvH4kmqF8lyjc70-
или
Ссылка на выступление: https://youtu.be/fgaBGc3VWWQ?si=jvH4kmqF8lyjc70-
Сложность: 2/3 (Практико-ориентированный доклад, требует базового понимания ETL-процессов)
Кому будет интересно:
- Архитекторам и простым инженерам, которые понимают, как дотащить данные от источника в хранилище.
---
…
👍11❤4💅4🔥4
8 Apr 2025, 17:42 UTC≈2,410 views17 reactionsread 7 August 2026 Следующий Digest доклада будет в выходные про шикарный EL инструмент - airbyte.
Пока рекомендую фоном посмотреть дискуссию про будущее Greenpum на T-Meetup: https://www.youtube.com/watch?v=EXRLqI9mx54&list=PLLrf_044z4Jp8l6GauGEmbZXIwABfrbRQ
👍9🔥5❤3
30 Mar 2025, 16:44 UTC≈3,410 views23 reactionsread 7 August 2026 Photo
Самые интересные слайды из доклада про каталог данных)
🔥13👍8💯2
Showing the 12 most recent of 14 posts we hold for @DataEngineeringDigest. View and reaction counts are the latest single reading for each post, not a live figure, and a recent post is still accumulating both. A view count marked ≈ was rounded by Telegram before we ever saw it — t.me prints views in full below 1,000 and to three significant figures above, so ≈1,200,000 means somewhere between 1,150,000 and 1,249,999. Unmarked counts are exact. Text is reproduced from the public post preview and truncated for length.