Результаты и материалы · Цикл обучения

Одна итерация: от ответа ассистента до новой версии инструкции

↻

одна итерация
500+ ответов

01

Ответ ассистента

02

Автоматическая проверка формальных требований

делает цикл дешёвым

03

Экспертная оценка содержания

04

Пересборка инструкции

05

Повторная оценка

06

Новая итерация

01Ответ ассистента

02Автоматическая проверка формальных требованийделает цикл дешёвым

03Экспертная оценка содержания

04Пересборка инструкции

05Повторная оценка

06Новая итерация

↻ к шагу 01

Почему шаг 02 важен

Формальные требования проверяются автоматически: длина, разметка, наличие проверяемого факта, сверка контактов и норм. Эксперты тратят время только на содержание, поэтому итерацию на 500+ ответов можно провести быстро и недорого.

вывод по всем итерациям

Итоговый балл почти полностью определялся двумя признаками: есть ли формальный недочёт и есть ли содержательная ценность.

Версии инструкции ассистента

3.0 → 3.7

3.0

3.1

3.2

3.3

3.4

3.5

3.6

3.7

3.1 Жёсткие правила поставлены выше остальных: источники законов, конфиденциальность, без повторных вопросов.

3.3 При переспросах ассистент держится одной версии ответа.

3.5 Отказ от разметки: на площадке она превращалась в лишние символы.

3.6 Короткий ответ по умолчанию, уточняющий вопрос перед длинным.

3.7 Лимит около 400 знаков, длинные разборы — на веб-сервис, помощь и вне экологии.