ЛР4 · Последний вопрос: у кого мы учимся?

Самый главный вопрос · 0.5 балла

Последний вопрос: у кого мы учимся?

Метки OpenAlex уже предсказаны другой моделью. Наша оценка показывает согласие с ней.

Автоматическая разметка: Метки поставлены программой, а не экспертом каждой статье.
Псевдометка: Метка, полученная из предсказания другой модели.
Feedback loop: Предсказания возвращаются как обучающие данные, закрепляя ошибки.

На пальцах. Первый библиотекарь разложил книги и иногда ошибся. Второй учится по его полкам. Если он повторяет первого на 95%, это не значит, что оба правы на 95%.

По документации на 05.11.2026 OpenAlex присваивает topic автоматически. Domain наследуется от primary_topic. В октябре 2026 описана смена классификатора: новая модель опирается на заголовок и аннотацию, прежняя также использовала журнал и цитирования.

Обучение на фиксированных псевдометках само по себе ещё не замкнутый цикл. Он возникнет, если мы будем возвращать предсказания в данные и повторно обучаться на них.

Для независимой проверки нужна отдельная ручная разметка экспертами, желательно на новых источниках или периодах.

Источники: Topics, Domains, смена классификатора.

Ловушка. Не называй это обычной train/test-утечкой: метки могут быть модельными даже при идеально правильном split. Это другой источник ограничений оценки.

Вопросы защиты

Высокая точность значит научную истину?

Нет. Здесь это согласие с автоматическими метками OpenAlex.

Как убрать feedback loop?

Не использовать собственные предсказания как бесконтрольную истину; добавить независимую ручную проверку.

Домен назначается отдельным человеком?

В этой схеме он наследуется от автоматически выбранной основной темы.

Одна фразаПроверяю воспроизведение автоматической разметки и учитываю возможность наследования её ошибок.