5 Aug 2026, 06:40 UTC168 views4 reactionsread 6 August 2026 Каждый запуск пайплайна стоит денег
API Anthropic не блокирует доступ мгновенно, как только баланс достигает нуля. В итоге одна незамеченная за ночь ошибка может привести к тому, что баланс AI-токенов не просто обнулится, а уйдет в глубокий минус. Когда тестовый скрипт начинает вести себя как оставленный без присмотра банкомат, реактивного мониторинга уже недостаточно. Нам нужна архитектурная дисциплина.
Вот страте…
🔥3👍1
29 Jul 2026, 06:50 UTC264 viewsread 6 August 2026 Почему ваш LLM-as-a-Judge "слишком вежливый" (и как с этим бороться)
Я часто вижу, как команды внедряют LLM-as-a-Judge и радуются стабильным метрикам 1.0. На деле это не показатель качества системы, а показатель того, что «судья» слишком добрый и апрувит всё подряд, включая грубые нарушения бизнес-логики.
Простой пример: клиент требует возврат за кроссовки не того цвета (ошибка комплектации), а бот вежливо отказыва…
22 Jul 2026, 05:00 UTC433 views4 reactionsread 6 August 2026 Почему мне нравится работать ML Evaluation инженером после 20 лет опыта в QA
Многие спрашивают, как мне живется в моей новой роли. Этот пост - ответ на вопрос.
ПОЧЕМУ МНЕ НРАВИТСЯ В ML EVALUATION:
• Сложная архитектура вместо стандартной автоматизации. Когда "вспомогательные таски" включают кастомные методы клонирования удаленных репозиториев с датасетами в зависимости от условий и содержимого или работу с системн…
👍3❤1
15 Jul 2026, 11:24 UTC474 views3 reactionsread 6 August 2026 Photo
⚡️Mentorpiece Vacy Index июль 2026: IT-найм продолжает падать, но сокращение Automation замедлилось
🟠 Появились признаки улучшения ситуации по Automation QA и Senior QA – число нанимающих компаний по этим ролям за месяц уменьшилось всего на 0.2%.
Это минимальное падение за последние три месяца, и оно в рамках погрешности измерений.
По сравнению с Manual QA, где меньше чем за полгода процент нанимающих компаний упа…
❤3
9 Jul 2026, 08:58 UTC431 views4 reactionsread 6 August 2026 Пройдет ли AI код-ревью?
ИИ может за час сделать то, на что раньше уходили недели. Но готовы ли вы выкатить этот результат в прод без код-ревью от сеньора? 🚩 Скорее всего, нет.
«Работающий код» больше не критерий качества. Критерий - поддерживаемый код. По мере того как мы перекладываем задачи на ИИ-агентов, главный инженерный вопрос смещается с «Как мне это написать?» на «Насколько чисто это написано?»
Почему код…
👍3✍1
30 Jun 2026, 06:00 UTC482 views10 reactionsread 6 August 2026 Как короткое слово может превратить ваш AI-продукт в юридический кошмар
В сфере ML Evaluation, особенно при использовании подхода LLM-судьи, мы часто попадаемся в ловушку «гало-эффекта» (Halo Effect). Если ответ тестируемой AI-модели звучит авторитетно и профессионально, LLM-судья автоматически ставит высокий балл, напрочь упуская из виду смысл.
ЛОВУШКА «ЛЕНИВОГО СУДЬИ»
Представьте инструмент для краткого изложени…
🔥9✍1
Становимся продвинутым QA pinned a photo
22 Jun 2026, 06:35 UTC516 viewsread 6 August 2026 https://habr.com/ru/articles/1049862/
22 Jun 2026, 06:35 UTC496 viewsread 6 August 2026 Теперь ежемесячно публикуем такую инфографику по индексу IT-найма:
22 Jun 2026, 06:35 UTC550 views4 reactionsread 6 August 2026 Photo
⚡️Mentorpiece Vacy Index июнь 2026: IT-найм продолжает падать
🟠 Процент нанимающих IT-компаний по ролям Automation QA и Senior QA за месяц снизился, продолжая небольшое, но постоянное падение последние месяцы.
• Что в июне с наймом по другим IT-ролям/странам (спойлер: автоматизация плохо себя чувствует и в 🇺🇸, а AI-роли растут, но пока слабо)
• Вакансии AutomationQA/SeniorQA и AI QA/ML Evaluation - превью ежедневно…
😢4
18 Jun 2026, 10:34 UTC631 views10 reactionsread 6 August 2026 🔻 Российское IT падает уже семь месяцев
С декабря получаю многочисленные сообщения о сокращениях во всё большем и большем числе российских IT-компаний.
Но любой кризис не вечен. Вопрос состоит только в том, как определить наступление этого самого момента.
Обычно ориентируются на число открытых сейчас IT-вакансий. Но это относительный параметр (1000 открытых вакансий для конкретной IT-роли – это много или мало?), к…
❤9✍1
16 Jun 2026, 07:01 UTC457 views9 reactionsread 6 August 2026 Почему поздно учить автоматизацию
Идея этого поста пришла мне в голову, когда неделю назад мы с менторами, SDET крупных международных компаний, на регулярной встрече обсуждали перспективы рынка автоматизаторов и пришли к довольно интересным выводам.
Ещё несколько лет назад путь из manual QA в автоматизацию был очевидным апгрейдом: более сложные задачи, соотношение вакансий 70/30 в пользу автоматизаторов, выше зарпл…
❤7👍2
Showing the 12 most recent of 20 posts we hold for @be_pro_qa. View and reaction counts are the latest single reading for each post, not a live figure, and a recent post is still accumulating both. A view count marked ≈ was rounded by Telegram before we ever saw it — t.me prints views in full below 1,000 and to three significant figures above, so ≈1,200,000 means somewhere between 1,150,000 and 1,249,999. Unmarked counts are exact. Text is reproduced from the public post preview and truncated for length.