Новости науки

Новости “ChatGPT лучше человека заваривает чай” уже поднадоели, но эта пробила мой панцирь.

В Гарварде есть сервис в помощь своим преподавателям. Перед публикацией научной статьи во внешнем журнале они могут получить независимый разбор у себя. Университет платит независимому рецензенту, тот проверяет работу, подчеркивает слабые и сильные места, помогает сделать её ещё лучше. Старая стабильная система. 88% положительных отзывов от рецензируемых, им действительно полезно.

И Opus может её заменить в один запрос. Экспериментаторы взяли старые реальные рецензии, сравнили их с теми, что генерирует AI. И люди, и другая нейросеть вслепую оценили творчество ИИ выше. Счет разгромный, в каких-то разрезах 100/0, в каких-то 90/10. Исследователи старались найти исключения – нет, ничего близкого к равенству не было ни в каком варианте. Они даже доступ в интернет у AI отнимали – все равно он лучше.

Вот так и живем.

#статьядня