Как я сходил вчера на конференцию для аналитиков от Яндекса(это не реклама, я сходил в оффлайне)🙊 Самое главное, что нравится в этом — это нетворкинг с ребятами из разных компаний и разных сфер (аналитика, DS, DE). Можно поговорить про жизнь, карьеру и отстраненные темы. Я периодически посматривал на бейджи, которые нам выдавали при регистрации. Было прям очень много компаний (в том числе WB, Яндекс, Авито, Т-Банк, VK, Сбер, Ozon и др.).
👀 Что касается докладов (я ходил по треку Data to insights)💜 Про замеры качества Алисы доклад, в котором говорится, про то, что они перешли от разметки при помощи обученных асессоров к гибридной разметке (LLM + асессор, что обеспечивает стабильное качество разметки) + научились оценивать диалог с точки зрения пользовательской задачи.
🗺 Про то, как Карты перешли к единой метрике для оценки качества и эффективности. Про различные проблемы интерпретации разных метрик топам, про онлайн и оффлайн метрики, самое интересное, как вывели метрику (на основе произведения условных вероятностей), по которой можно быстро принимать решения.
❤️ Про аналитику международного поиска. Рассказали, про проблему качества поиска, интерпретацию волатильных метрик. Решение: еженедельный синк по ключевым метрикам с заинтересованными лицами и анализ прогноза.
Кроме того, поговорили про формирование команды и об отношении к людям.
Как понятно из докладов, самая главная боль — это метрики качества подобных продуктов, так как просто нельзя оценить
👍 На воркшоп я не успел сходить, но попросил скинуть мне ноутбучек (там про создание агента с RAG и MCP.
🍴 Затем было афтерпати, где я пообщался с интересными ребятами, поел, да и поехал я домой.
Ну и выдали мерч, куда же без него Трансляции сохранились, кому интересно, можете глянутьПланирую в ближайшее время ходить по конференциям, у кого будут на примете определенные, присылайте, посмотрю.
Понравился пост? Ставь 🐳, пиши комментарии, а я выложу, что за мерч подарили 🥳