Product Analyst AI Middle/Senior Remote

#вакансия #vacancy #analyst #AI #data #remote #удаленка Вакансия: Product Analyst (AI направление) Компания: MEDvidi Грейд: Middle/Senior Формат работы: удалённый из любой точки мира Локация: не РФ Оформление: B2B О КОМПАНИИ: 🏢 MEDvidi — продуктовая medtech-компания, которая трансформирует сферу психиатрической помощи, делая её более доступной и недорогой на всей территории США. Мы масштабируем AI-powered системы на критически важные части продукта — и чем более автономными они становятся, тем важнее понимать, как они ведут себя в продакшене. Ищем Product Analyst, который поможет нам оценивать, мониторить и улучшать AI-агентов и LLM-powered воркфлоу, работающих в масштабе. ОСНОВНЫЕ ЗАДАЧИ: 💻 Анализировать поведение AI-агентов, систем автоматизации и LLM-воркфлоу в продакшене; 💻 Работать с логами, диалогами, сырыми выходами системы и операционными датасетами для поиска паттернов и инсайтов; 💻 Разрабатывать подходы к оценке и аналитические фреймворки для измерения качества и надёжности AI-систем; 💻 Строить системы мониторинга и дашборды для отслеживания производительности AI; 💻 Выявлять операционные и продуктовые риски, привносимые автоматизацией; 💻 Тесно взаимодействовать с командами Product, Engineering, QA и Operations. ЧТО МЫ ОТ ВАС ОЖИДАЕМ: 📌 3+ лет опыта в аналитических ролях, связанных с AI-системами, ML-продуктами или сложными production-системами; 📌 Уверенное владение Python для глубоких аналитических расследований и работы с большими текстовыми данными; 📌 Продвинутое знание SQL; 📌 Понимание ограничений LLM: галлюцинации, evaluation challenges, prompt sensitivity, model trade-offs и режимы сбоев; 📌 Опыт построения систем мониторинга, аналитических фреймворков или операционных дашбордов для production-систем; 📌 Свободное владение русским языком; английский B2+. БУДЕТ ПЛЮСОМ: ➕ Опыт работы с conversational AI или AI-агентами; ➕ Опыт оценки выходов LLM или качества аннотаций; ➕ Знакомство с AI quality metrics и evaluation-методологиями; ➕ Опыт работы с Langchain-инфраструктурой; ➕ Опыт работы с ML data pipelines или генерацией синтетических данных; ➕ Понимание anomaly detection. ЧТО МЫ ГОТОВЫ ПРЕДЛОЖИТЬ: ✅ Полностью удалённая работа, долгосрочное B2B-сотрудничество; ✅ Страховка после испытательного срока; ✅ Компенсация занятий спортом; ✅ 19 рабочих дней отпуска + 3 дополнительных дня велнес в год; ✅ Оплачиваемый больничный (первые 5 рабочих дней); ✅ Подарки сотрудникам по важным событиям; ✅ Карьерный рост; ✅ Индивидуальные уроки английского; ✅ Реальное влияние на продукт и инженерные практики. Для отклика пишите 👉🏼 @SmartIt_recruiter