Письменная проверка

Некоторые работы проверяют без приёмки: бриф, глоссарий, отчёт — то, что можно оценить по тексту. Как проверяется работа, задаёт автор курса в её описании: «Приёмка» или «Письменно». В очереди у такой работы вместо «Начать приёмку» — «Проверить письменно».

Посмотреть на вымышленном курсе можно в демо: войдите как проверяющий, в очереди — «Бот приёмной комиссии».

Бриф агент оценить не смог — строка сверху и ждёт вас; глоссарий и стек он решил сам.

Критерии

Строки разложены по людям: у каждого его критерии с вердиктом агента — «закрыто», «не закрыто», «агент не уверен» или «только человек» — и почему агент так решил. Сверху стоят строки, которые агент сам не решил: с них и начинайте. Под строкой — на что агент опирался: строки файла, коммит, абзац или таблица документа, ячейка, вывод команды, проверка списка литературы по базам, картинка, обещание с прошлой приёмки, комментарий в PR; стрелка слева раскрывает цитаты. Строки файла платформа сама сверила с PR на коммите проверки: чего там нет, в улики не попало. Есть ли источник из списка литературы, решает код по базам Crossref, doi.org и arXiv, а не модель: «не найдено» у записи — повод спросить, где студент её взял, а «идентификатор не существует» — признак ссылки, собранной без чтения источника.

Справа у строки две кнопки: «Закрыто» и «Не закрыто». Повторное нажатие снимает отметку. Если агент приложил снимки экрана, они под строкой рядом с цитатами — по нажатию увеличиваются.

«Согласен с агентом» ставит отметки во всех строках, где агент уверен, одним нажатием. Уже отмеченное не трогает. Любую отметку потом можно перевернуть в строке: тогда у неё «закрыто вами, агент ошибся», и это уходит автору курса как ошибка агента.

У человека в шапке два счёта по весам критериев: сколько закрыл агент и сколько закрыли вы.

Изменения в PR

Вкладка «Изменения в PR» — файлы PR слева, дифф справа, как на приёмке: синяя полоса — строки, на которые опирался агент, стрелки ‹ › листают коммиты, выделенные строки можно отправить комментарием в PR («Комментарий в PR») или прикрепить к критерию через «Доказательство к критерию…». «В изменениях PR ›» у строки критерия открывает файл, на который опирался агент.

Решение и отправка

Под критериями человека — подсказка решения по отметкам и три кнопки: «Принять», «С долгом», «Не принять». У «С долгом» и «Не принять» — поле долга: по умолчанию туда подставляются незакрытые критерии, текст можно поправить, срок «до» — через неделю, его тоже можно сменить. Кто не сдал работу, в проверке без решения: работа ждёт в очереди.

Когда все критерии отмечены и решения поставлены, внизу появляется «Поставить решение и отправить в PR». Комментарий каждому собирается из его отметок: что закрыто и что нет, у каждого пункта — ссылка на место в работе. Его можно поправить до отправки («Собрать заново» вернёт собранный). Уходит в PR ревью — без одобрения и без запроса правок; незакрытое, у которого агент нашёл строки, ещё и комментарием у самих строк. Долг со сроком дописывается в конец. Решения, баллы и долги дальше идут так же, как после приёмки.

Ошиблись после отправки — «Исправить решение» внизу, как у приёмки: проверка снова открыта, при новой отправке ревью в PR поправится.