Так начинается выпуск
Ощущение и секундомер
Про языковые модели написано слишком много и слишком быстро. Почти всё написанное опирается на впечатление: попробовал — понравилось, попробовал — разочаровался. Этот выпуск опирается на секундомер, и там, где эти две опоры расходятся, выпуск показывает расхождение, а не выбирает ту, которая приятнее.
Двенадцать работ, из них шесть — эксперименты на людях с контрольной группой и случайным распределением, больше двух тысяч участников. Здесь нет опросов о том, что люди думают об искусственном интеллекте, — только замеры того, что происходило с их работой, когда доступ к модели давали и отбирали.
Из двенадцати результатов складывается одна мысль, и она неудобна обеим сторонам спора. Выигрыш от модели реален и измерен. Но он достаётся не тем, кому обещан, проявляется не там, где его ощущают, и приходит не бесплатно.