Как внедрить GenAI не роняя прод
Тезисы
Три года я внедряю AI и собрал целую коллекцию LLM-ных багов.
В докладе разберем:
• Почему агенты, MCP и другие модные подходы не прижились в проде.
• Можно ли писать автотесты для промптов и RAG (спойлер - да).
• Обсудим, как надежно затягивать LLM в прод, наши отборные фейлы и неочевидные приемы, которые сэкономят недели.
А еще я покажу, как устроены ревью, тесты и релизы AI-фич в Точка Банке - будет применимо и в бигтехе, и в стартапе.
Три года я внедряю AI и собрал целую коллекцию LLM-ных багов.
В докладе разберем:
• Почему агенты, MCP и другие модные подходы не прижились в проде.
• Можно ли писать автотесты для промптов и RAG (спойлер - да).
• Обсудим, как надежно затягивать LLM в прод, наши отборные фейлы и неочевидные приемы, которые сэкономят недели.
А еще я покажу, как устроены ревью, тесты и релизы AI-фич в Точка Банке - будет применимо и в бигтехе, и в стартапе.
Информация о спикере
Семён Копытов
Старший AI инженер, Точка Банк
Старший AI инженер в Точка Банке, ex-Контур.
Шестой год в backend разработке. Сейчас решаю смежные задачи промпт-инженера и бэкендера.
  • Автоматизировал контроль качества центрального ассистента Точка банка
  • Довел до прода более 10 AI сервисов и фич
  • Исследую методы самоулучшения промптов и датасетов
  • Поднимал с нуля бэкенды в AI стартапах. Во многих мои LLM интеграции живут до сих пор.
  • Семён Копытов
    Старший AI инженер, Точка Банк
    Старший AI инженер в Точка Банке, ex-Контур.
    Шестой год в backend разработке. Сейчас решаю смежные задачи промпт-инженера и бэкендера.
    • Автоматизировал контроль качества центрального ассистента Точка банка
    • Довел до прода более 10 AI сервисов и фич
    • Исследую методы самоулучшения промптов и датасетов
    • Поднимал с нуля бэкенды в AI стартапах. Во многих мои LLM интеграции живут до сих пор.
Все доклады секции