
Открываем твой цифровой клуб…
Технологии и ИИ
Учёные из Университета Ватерлоо зафиксировали систематическую склонность крупных языковых моделей держаться варианта, который описывают как сохранение существующего положения дел, даже когда второй вариант по содержанию идентичен. Исследование опубликовано в Environmental Research Communications и оперирует данными 11 моделей, которым дали 7548 запросов на климатическую тематику, а также смежные примеры по рецептам, бытовым вопросам и политическим компромиссам. Каждый запрос проходил через цепочку из шести моделей, что в сумме дало 54 888 ответов и позволило сравнить реакции на формулировку задачи.
Эксперимент строился так, чтобы менять только рамку задачи: один и тот же вопрос показывался либо как сохранение текущего курса, либо как переход к новым мерам. В контролируемых условиях шансы, что модель порекомендует статус-кво, оказались выше в 7,5 раза. В одном политическом сценарии доля согласия с существующим планом составила 70%, тогда как поддержка нового варианта — 34%. В рамках потребительских запросов рекомендации по электромобилю чаще давались владельцам и отражали региональную статистику распространения техники без попытки её превзойти.
Авторы подчёркивают: речь идёт именно о реакции моделей на формулировку запроса, а не о реальных покупках, голосованиях или политических решениях. Соответствующая консервативная рекомендация не всегда вредна — осторожность в отдельных контекстах допустима. Но в климатической сфере, где снижение выбросов требует отхода от привычек, весьма значительным представляется получившийся перекос. Для команд, применяющих языковые модели в рекомендательных и плановых системах, вывод таков: способ подачи вопроса влияет на ответ, и без явных альтернатив модель будет по умолчанию придерживаться знакомого варианта.
Авторы добавляют: выводы относятся к реакциям моделей на формулировку задачи и не свидетельствуют о фактических покупках, голосованиях или политических решениях. В климатическом контексте это сигнал для разработчиков и пользователей не предлагать альтернативы явно — риск сохранять старый курс возрастает.