Обязанности:
Мы международная IT-компания, интегратор и разработчик программных решений. Реализуем уникальные по сложности, составу и нагрузкам проекты с использованием ИИ для рынка недвижимости. Наша команда это профессионалы, готовые делиться знаниями и опытом с начинающими талантливыми специалистами. В нашей команде открыта позиция AI Prompt Engineer. Мы предлагаем работу в развивающемся проекте, где ты сможешь применить свои знания и продолжить развиваться как специалист работая в команде сильных разработчиков. Чем нужно будет заниматься: Разработка и оптимизация промптов для голосовых AI-ассистентов; Тестирование и улучшение качества ответов ботов: точность, релевантность, тон, воспроизводимость результатов; Подбор оптимальных параметров моделей под конкретные сценарии; Анализ логов и трейсов в Langfuse: отслеживание метрик качества, выявление паттернов ошибок, обнаружение регрессий; Проектирование и проведение A/B-тестов промптов: формулирование гипотез, определение критериев успеха, анализ результатов; Написание и поддержка тестовых сценариев для голосовых ботов, добавление их в Git; Взаимодействие с технической поддержкой Elevenlabs; Мониторинг обновлений API Elevenlabs и OpenAI, оценка влияния на продукт, планирование миграций; Документирование промптов, подходов и best practices, формирование внутренней базы знаний; Построение дашбордов качества и подготовка регулярных отчетов для продуктовой команды; Взаимодействие с продуктовой, технической и бизнес-командами для перевода требований клиентов в эффективные промпты и сценарии ботов. Что мы ожидаем от вас: Опыт работы с LLM от 2 лет: prompt engineering, evaluation, оптимизация; Практический опыт с OpenAI API (Chat Completions, function calling, structured outputs); Опыт работы с Elevenlabs или аналогичными voice AI платформами (Play.ht, Deepgram, Cartesia); Понимание принципов работы LLM и их ограничений: контекстное окно, токены, temperature, system/user prompt, chain-of-thought, галлюцинации; Понимание методологии A/B-тестирования: статистическая значимость, p-value, размер эффекта; Уверенная работа с Git; Опыт работы с инструментами observability для LLM (Langfuse, LangSmith, Helicone или аналоги); Английский B2+ для коммуникации с вендорами и работы с технической документацией; Сильные коммуникативные навыки: умение работать с техническими и нетехническими командами. . Будет плюсом: Опыт систематической оценки качества AI-продуктов или чат-ботов; Знакомство с архитектурой speech-to-text / text-to-speech решений; Опыт с CI/CD (GitHub Actions, GitLab CI); Опыт построения LLM evaluation pipelines; Понимание conversational design и UX голосовых интерфейсов; Опыт интеграции LLM в продукты или бизнес-процессы. Что мы предлагаем: Полный рабочий день, гибкий график; Удаленный формат работы; Карьерный рост и профессиональное развитие; Обучение за счёт компании; Передовые технологии, творческий и слаженный коллектив; Эффективный менеджмент, отсутствие бюрократии; оптимальные процессы.Похожие вакансии