ML/LLM/EVAL разработчик
Описание
Обязанности: Разработка, проектирование и описание RAG-архитектуры (Retrieval-Augmented Generation) Разработка и внедрение решений на базе ML/LLM для поиска, обработки и анализа документов Реализация и оптимизация механизмов поиска информации, работы с embeddings и векторными базами данных Разработка backend-сервисов на Python, работа с SQL и интеграция языковых моделей в существующую архитектуру программных продуктов Разработка систем оценки качества AI-решений (Evaluation): формирование тестовых наборов, измерение точности поиска и ответов, выявление ошибок и проведение сравнительного тестирования моделей и версий системы Анализ причин ошибок и оптимизация качества, производительности и стабильности ML/LLM-решени Разработка механизмов контроля качества и предотвращения регрессий при изменении моделей, промптов и компонентов RAG-системы. Требования: ML/LLM: практический опыт работы с большими языковыми моделями, RAG-архитектурой, поиском и обработкой документов, embeddings и векторными базами данных Разработка: уверенное владение Python и SQL, опыт разработки backend-сервисов, интеграции моделей и работы с существующей архитектурой программных продуктов Evaluation: опыт построения систем оценки качества AI, формирования тестовых наборов, измерения точности поиска и генерации ответов, выявления ошибок и сравнительного тестирования моделей Оптимизация: опыт повышения точности, производительности и стабильности ML/LLM-решений, анализа причин ошибок и предотвращения регрессий Знание английского языка, (опыт кодингf на английском) b1- b2, фокус на письменную речь Условия: Официальное трудоустройство с соблюдением всех требований ТК РФ Фиксированная окладная часть +годовой бонус по результатам работы График 5/2, пн-чт: c 9.00-18.00, пт: с 9.00 до 16.45 (гибридный формат) Офис в шаговой доступности от ст. м Павелецкая/Новокузнецкая/Третьяковская (Озерковская наб.,30) Полис Добровольного медицинского страхования со стоматологией после полугода работы - медицинское обслуживание в лучших клиниках города Корпоративные скидки на страхование для сотрудников Активная корпоративная жизнь: конкурсы, тимбилдинги, участие в социальных мероприятиях