7 Aug 2026, 15:50 UTC192 views2 reactionsread 7 August 2026 🆕 PySpark нейролекции
Возможно кому-то поможет в освоении PySpark. С одной стороны нейрослоп и повторы между лекциями, с другой стороны некоторые концепции хорошо прописаны.
Раздел с подготовкой к интервью собирался с разных сайтов и материалов.
https://datatalks.ru/pyspark/
❤1👍1
26 Jul 2026, 07:05 UTC≈1,350 views44 reactionsread 7 August 2026 Photo
🚀 Перевод книги «Architecting an Apache Iceberg Lakehouse» на русский язык.
Если вы хотите разобраться, что такое Lakehouse, эта книга — отличная отправная точка. В ней последовательно разбираются:
• чем Lakehouse отличается от Data Lake и Data Warehouse;
• почему появились открытые табличные форматы (Iceberg, Delta Lake, Hudi);
• ACID-транзакции, schema evolution, time travel и другие ключевые возможности современ…
👍44
28 May 2026, 05:22 UTC≈2,020 views8 reactionsread 7 August 2026 Photo
Тестовый пример реализации MCP Server на Go для OpenCode
▫️Есть набор specs для написания через агентов с нуля MCP Server (теоретически можно реализовать mcp для взаимодействия с любым ПО)
▫️Сгенерирована документация по разработке MCP Server (GitHub Pages)
Сам бинарник возвращает из Яндекс метрики список счётчиков (был под рукой api). Основная цель - понять как реализовать свой mcp для взаимодействия с opencode, к…
🔥3👍2👏2❤1
18 May 2026, 15:01 UTC≈2,670 views23 reactionsread 7 August 2026 Photo
Data Engineering AI Agent Skills - экспериментальный набор скиллов для агентной разработки и построения Agentic Data Platform.
https://datatalks.ru/de-ai-agent-skills/
Скиллы все в открытом доступе https://github.com/ivanshamaev/de-agent-skills
🔥13👍6👏2❤1🗿1
27 Apr 2026, 07:05 UTC≈2,860 views44 reactionsread 7 August 2026 Photo
По Trino 479 документации https://datatalks.ru/trino-docs/ переведены все разделы + добавлена информация по dbt
🔥30👍8❤3👏2😁1
15 Apr 2026, 06:03 UTC≈2,990 views14 reactionsread 7 August 2026 Volga: движок обработки real-time данных для AI/ML — аналог Spark и Flink на Rust (Arrow + DataFusion) / Хабр
В статье описаны базовые сценарии работы, архитектурные особенности и переход движка на rust.
https://habr.com/ru/articles/1021290/
👀6👏5⚡1❤1👍1
11 Apr 2026, 07:31 UTC≈2,710 views20 reactionsread 7 August 2026 Готов проект по 2 модулю AI Agents — research-agent
Репозиторий: https://github.com/ivanshamaev/research-agent
Изначальная цель заключалась в том, чтобы на простом примере пройти весь цикл взаимодействия: как оркестратор общается с LLM, как агент выбирает инструменты, как возвращаются результаты вызовов, где хранится состояние и в какой момент всё это собирается в итоговый отчёт.
В процессе реализации исходный опи…
👍15👏3🤝2
9 Apr 2026, 16:04 UTC≈2,020 views27 reactionsread 7 August 2026 Photo
Какая же жиза)
😁14🤣10👍1👏1🤨1
9 Apr 2026, 06:00 UTC≈2,360 views38 reactionsread 7 August 2026 Photo
Trino Перевод DeepWiki
https://datatalks.ru/trino-deepwiki/
🔥25👍7❤5👏1
4 Apr 2026, 15:06 UTC≈2,520 views22 reactionsread 7 August 2026 🤖 opencode: Учимся создавать виртуальные команды из агентов для Data-проектов 🚀
Делюсь небольшой инструкцией по OpenCode — инструменту, который можно использовать не просто как CLI, а как полноценный слой настройки проекта для работы с агентами, ролями, правилами и workflow 👇
За основу я взял демо-пример, где OpenCode + ChatGPT использовались для создания проекта с аналитическим стеком.
Сразу оговорюсь: в самом про…
👍11🔥6🤝4❤1
26 Mar 2026, 07:01 UTC≈2,510 views22 reactionsread 7 August 2026 Photo
AI Agent Engineer Roadmap
Некоторое время назад начал накидывать через claude импровизационный roadmap по разработке ai agents. Исходная цель: быстро вникнуть в особенности и архитектуру решений для применения в работе. В целом уже что-то можно почитать и изучить.
По проектам пока не уверен, что именно будет (и будет ли).
https://datatalks.ru/ai-agents/
❤12🔥9👏1
19 Mar 2026, 06:03 UTC≈2,670 views26 reactionsread 7 August 2026 Photo
Привет 👋🏻
Документация airflow с github pages переехала на новый адрес https://datatalks.ru/airflow-docs/.
А по Trino тоже появилась заготовка https://datatalks.ru/trino-docs/ (пока висит английская версия, чтобы без vpn смотреть)
🔥19👍6👏1
Showing the 12 most recent of 21 posts we hold for @data_engineer_path. View and reaction counts are the latest single reading for each post, not a live figure, and a recent post is still accumulating both. A view count marked ≈ was rounded by Telegram before we ever saw it — t.me prints views in full below 1,000 and to three significant figures above, so ≈1,200,000 means somewhere between 1,150,000 and 1,249,999. Unmarked counts are exact. Text is reproduced from the public post preview and truncated for length.