Шеф-редактор — лид ИИ-тренеров по русскому языку в Яндекс Образование

О вакансии

Удалённая работа Яндекс Образование занимается разработкой и предоставлением образовательных ресурсов и программ и активно внедряет ИИ в свои продукты. Нейросеть объясняет темы, подбирает задания, проверяет ответы, помогает увидеть пробелы и выстраивает дальнейшую подготовку. Чтобы эта работа была корректной и действительно полезной, её качество проверяет команда разметки. Ищем шеф-редактора — лида ИИ-тренеров по русскому языку. Вы будете отвечать за ИИ-контент для школьников 5–11-х классов. Это не про уроки, а про предметную экспертизу. Большая часть задач связана с контролем качества ИИ-контента и работы команды. Нужно уметь посмотреть на спорное задание, принять решение, объяснить его разметчику и понять, единичная это проблема, или правило в инструкции нужно уточнить для всей команды. Проведение ревью разметки ИИ-контента по русскому языку и поиск системных ошибок Вы будете проверять задания, объяснения, ответы модели и обратную связь, которую она даёт ученику. Надо принимать решения в спорных случаях, когда задание выглядит нормальным, но на самом деле неоднозначно, не проверяет заявленный навык или допускает несколько ответов. Также нужно будет выявлять повторяющиеся проблемы и передавать их команде продукта и ML. Предстоит улучшать критерии оценки, когда на реальных примерах оказывается, что существующего правила недостаточно. Отслеживание соответствия материалов школьной программе и экзаменационным форматам Одна из ваших задач — проверять, что материалы корректно готовят ученика к ОГЭ и ЕГЭ: условие, правильный ответ, критерии, объяснение и соответствие проверяемому умению. Нужно работать с заданиями в экзаменационном формате, тренировочными заданиями по темам, объяснениями правил, разборами ошибок ученика и проверкой рукописных работ по фото. Проведение калибровки разметчиков и разбор расхождений Вы будете помогать команде одинаково применять критерии оценки: разбирать расхождения между разметчиками и ревьюерами, собирать сложные и пограничные случаи и превращать их в понятные правила и примеры для инструкции. Управление командой Нужно будет распределять нагрузку, следить за соответствием компетенции исполнителей назначаемым заданиям, а также мониторить качество и скорость разметки, работать над её улучшением. Экспертиза и ревью Вам предстоит смотреть на материал сразу с двух сторон: корректен ли русский язык и помогает ли это конкретной учебной задаче ребёнка. Вы будете принимать решения, объяснять их разметчикам и влиять на качество продукта в целом.

• Работали методистом, преподавателем или редактором образовательного контента
• Отлично знаете русский язык и школьную программу 5–11-го классов
• Понимаете формат ОГЭ и ЕГЭ по русскому языку
• Имеете опыт разметки данных, ревью разметки или контроля качества
• Умеете замечать неоднозначное в заданиях и формулировках
• Готовы принимать решения в спорных случаях и аргументировать их
• Способны объяснять свои решения разметчикам понятно и без конфликтов
• Умеете видеть системные проблемы и превращать их в правила и инструкции
• Внимательны к деталям, но при этом не теряете общую картину
• Готовы работать с большим объёмом контента и соблюдать сроки
• Работали с ИИ-контентом
• Готовили школьников к экзаменам по русскому языку
• Составляли или проверяли экзаменационные задания
• Официальное трудоустройство по ТК РФ
• Полностью удалённая работа из любого региона РФ, график 5/2 с 10 до 19 часов (мск) с перерывом на обед
• Реальная возможность влиять на продукт: вы будете не просто выполнять задачи, а участвовать в развитии образовательных ИИ-продуктов для десятков тысяч школьников
• Команда, с которой интересно, — мы не про формальности, а про результат. Если у вас есть идея, как улучшить процесс, — её услышат и обсудят

Обязанности

Проведение ревью разметки ИИ-контента по русскому языку и поиск системных ошибок Вы будете проверять задания, объяснения, ответы модели и обратную связь, которую она даёт ученику. Надо принимать решения в спорных случаях, когда задание выглядит нормальным, но на самом деле неоднозначно, не проверяет заявленный навык или допускает несколько ответов. Также нужно будет выявлять повторяющиеся проблемы и передавать их команде продукта и ML. Предстоит улучшать критерии оценки, когда на реальных примерах оказывается, что существующего правила недостаточно. Отслеживание соответствия материалов школьной программе и экзаменационным форматам Одна из ваших задач — проверять, что материалы корректно готовят ученика к ОГЭ и ЕГЭ: условие, правильный ответ, критерии, объяснение и соответствие проверяемому умению. Нужно работать с заданиями в экзаменационном формате, тренировочными заданиями по темам, объяснениями правил, разборами ошибок ученика и проверкой рукописных работ по фото. Проведение калибровки разметчиков и разбор расхождений Вы будете помогать команде одинаково применять критерии оценки: разбирать расхождения между разметчиками и ревьюерами, собирать сложные и пограничные случаи и превращать их в понятные правила и примеры для инструкции. Управление командой Нужно будет распределять нагрузку, следить за соответствием компетенции исполнителей назначаемым заданиям, а также мониторить качество и скорость разметки, работать над её улучшением. Экспертиза и ревью Вам предстоит смотреть на материал сразу с двух сторон: корректен ли русский язык и помогает ли это конкретной учебной задаче ребёнка. Вы будете принимать решения, объяснять их разметчикам и влиять на качество продукта в целом.

Требования

• Работали методистом, преподавателем или редактором образовательного контента
• Отлично знаете русский язык и школьную программу 5–11-го классов
• Понимаете формат ОГЭ и ЕГЭ по русскому языку
• Имеете опыт разметки данных, ревью разметки или контроля качества
• Умеете замечать неоднозначное в заданиях и формулировках
• Готовы принимать решения в спорных случаях и аргументировать их
• Способны объяснять свои решения разметчикам понятно и без конфликтов
• Умеете видеть системные проблемы и превращать их в правила и инструкции
• Внимательны к деталям, но при этом не теряете общую картину
• Готовы работать с большим объёмом контента и соблюдать сроки
• Работали с ИИ-контентом
• Готовили школьников к экзаменам по русскому языку
• Составляли или проверяли экзаменационные задания