3,583 papers

апрель 2025

Не работает
Статистический эффект
«Будь максимально точным»

Прямая просьба о точности увеличила число необоснованных обобщений в саммари; лучше позитивная инструкция опираться только на цифры из текста.

Вместо этогоИспользуй только цифры и выводы из текста, укажи ограничения, упомянутые авторами.

Вместо осторожности модель прячет оговорки и ограничения за гладкими уверенными формулировками: частный результат превращается в общее правило, «исследование показало» — в «метод работает», описание — в рекомендацию.

Эффект в исследовании (без цифр): Прямая просьба о точности не уменьшила, а увеличила число необоснованных обобщений в саммари (точных цифр в разборе нет). Новые модели обобщают чаще старых, Claude — реже всех; temperature = 0 снижает обобщения.

Куда вставить: в запрос на краткое изложение / саммари

Модели в исследовании: GPT-3.5 Turbo, GPT-4 Turbo, GPT-4o, GPT-4.5, Claude 2, Claude 3.5 Sonnet, Claude 3.7 Sonnet, LLaMA 3.3 70B, +2 других

Когда не работает: Проверено на саммари научных статей. Вместо запрета лучше позитивная инструкция: «используй только цифры и выводы из текста, укажи ограничения, упомянутые авторами».

Эффект статистический: в исследованиях он виден на сотнях задач и составляет несколько процентов, поэтому в одном-двух чатах честно не показать. Проверку в чате для таких фраз не делаем.

март 2025

Работает
Статистический эффект
«Какой из вариантов хуже и почему?»

Поиск худшего варианта делает сравнение точнее и объективнее, с меньшим перекосом к позиции ответа. Только для сравнения готовых вариантов.

Модель переключается из режима «помощника» в режим «критика»: ищет конкретные ошибки, противоречия и неполноту вместо того, чтобы выбрать более длинный, уверенный или первый по порядку вариант.

Эффект в исследовании (без цифр): По разбору, при просьбе найти худший вариант модель сравнивает «намного точнее и объективнее» и меньше подвержена предвзятости к позиции ответа; точных цифр в разборе нет.

Куда вставить: вместо вопроса «какой вариант лучше?» при сравнении двух и более готовых вариантов

Модели в исследовании: GPT-4o, Claude-3.5-Sonnet, Gemini-1.5-Pro, GPT-4o-mini, Claude-3-Haiku, Gemini-1.5-Flash

Когда не работает: Работает на сравнении готовых вариантов; для прямой генерации текста напрямую не применим.

Эффект статистический: в исследованиях он виден на сотнях задач и составляет несколько процентов, поэтому в одном-двух чатах честно не показать. Проверку в чате для таких фраз не делаем.

Не работает
На практике мешает
«Напиши восторженно / остроумно»

Для модели «восторженный» ведёт себя как синоним «нечестного», а «остроумный» — как «оскорбительного».

Вместо этогоИспользуй позитивную лексику и яркие примеры, избегай сарказма.

Субъективное прилагательное тянет за собой нежелательные шаблоны: «восторженный» делает текст преувеличенным и нечестным, «остроумный» — саркастичным и оскорбительным. Лучше описать конкретные действия («позитивная лексика, яркие примеры») и запретить побочный эффект («избегай сарказма»).

Эффект в исследовании (без цифр): Сравнение изменений в ответах показало, что для модели «восторженный» ведёт себя как синоним «нечестного», а «остроумный» — как синоним «оскорбительного»; цифр в разборе нет.

Куда вставить: в инструкцию о стиле текста

Модели в исследовании: Mistral-7B-Instruct-v0.2, Llama-3-8B-Instruct

Модели устояли Проверено на практике: Восторженное описание теряет ограничения товара ChatGPT с фразой чуть хужеClaude с фразой чуть хужеGemini помешала Смотреть тест

Один и тот же запрос в двух вариантах: живо, без преувеличений и «восторженное описание». ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Все три ограничения (6 часов, IPX4, мало басов) сохранены в обоих вариантах, искажений нет. С фразой ChatGPT лишь смягчил формулировку до «умеренные басы» и добавил эпитетов.

Claude: В восторженном описании Claude сохранил все ограничения (6 часов, IPX4, мало басов). Лишь выражение «куда угодно» прозвучало мягче.

Gemini: В обычной формулировке Gemini прямо назвал три ограничения (6 часов, слабые басы, IPX4) сдержанным тоном. С фразой он переименовал слабые басы в «акцент на средние частоты» и закончил «настоящим хитом по суперцене».

Запросы целиком Живо, без преувеличений
Напиши описание портативной колонки для карточки товара, 60-80 слов. Факты: работает до 6 часов от батареи; защита от брызг IPX4, но не от погружения; звук средний, басов мало; вес 400 г; цена 2 990 рублей. Тон живой, но без преувеличений.
«Восторженное описание»
Напиши восторженное описание портативной колонки для карточки товара, 60-80 слов. Факты: работает до 6 часов от батареи; защита от брызг IPX4, но не от погружения; звук средний, басов мало; вес 400 г; цена 2 990 рублей.
Мешает Проверено на практике: Остроумный ответ жалующемуся клиенту ChatGPT помешала · 4 из 4Claude помешала · 4 из 4Gemini помешала · 4 из 4 Смотреть тест

Один и тот же запрос в двух вариантах: дружелюбный тон и остроумный тон. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: С «остроумно» ChatGPT пошутил про опоздание («небольшое путешествие заказа»). Без фразы шуток не было, а тон был уместным.

Claude: «Остроумный» ответ Claude на жалобу шутит над опозданием: «курьеру выдали карту и компас», «посылка взяла мини-отпуск». Без фразы он спокойно извиняется.

Gemini: Без фразы Gemini вежливо извинился, предложил промокод и пообещал разобраться, без шуток. С фразой появились шутки про курьера «по мху на деревьях» и чат, которые могут обидеть клиента.

Запросы целиком Дружелюбный тон
Клиент пишет: «Заказ опоздал на 5 дней, я потратил время на звонки в ваш чат. Это возмутительно». Ответь клиенту от лица магазина, 3-4 предложения, дружелюбно.
Остроумный тон
Клиент пишет: «Заказ опоздал на 5 дней, я потратил время на звонки в ваш чат. Это возмутительно». Ответь клиенту от лица магазина остроумно, 3-4 предложения.

февраль 2025

Работает
На практике помогает
«Сделай план настолько подробным, чтобы другой специалист мог его повторить»

Даёт более воспроизводимые планы, а с ними — более точный конечный результат в анализе данных.

Требование воспроизводимости заставляет модель прописать все шаги и учесть все данные из запроса, вместо расплывчатого плана с пропусками.

Эффект в исследовании (без цифр): Промпт-стратегия Reproducibility-of-Thought даёт более воспроизводимые планы; чем выше воспроизводимость плана, тем выше точность конечного результата (в задачах анализа данных; точных цифр в разборе нет).

Куда вставить: в запрос, где модель сначала составляет план (анализ данных, многошаговая работа), перед выполнением

Модели в исследовании: GPT-4o (2024-11-20), Claude-3.5-Sonnet (v2), o3-mini (2025-01-31), Llama-3.3-70B, DeepSeek-R1-70B

Когда не работает: Проверено на генерации кода для анализа данных.

Помогает Проверено на практике: План анализа оттока клиентов: обычный и воспроизводимый ChatGPT помогла · 4 из 4Claude помогла · 4 из 4Gemini помогла · 4 из 4 Смотреть тест

Один и тот же запрос в двух вариантах: без фразы и с фразой. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Без фразы: 8 общих шагов (450 слов): упомянут id и пороги 30/60/90/120/180 дней, но нет точных формул знаменателя, фильтрации базы по возрасту >90 дней и статистических критериев отбора. С фразой (4 из 4 прогонов лучше): 15 детальных разделов (2405 слов): заданы все поля, пороги (90/60/120/180 дней, n>=100, n>=30, seed=42), формулы метрик (база возраст >90 дней, ДИ Уилсона, стандартизация, BH) и строгие критерии остановки/отбора (разница >=5 п.п., adj. p<0,05).

Claude: Без фразы: Конкретики мало: порог 90 дней, дата отчёта, названия производных признаков, пример интервала 30-60 дней. Названий столбцов нет, остальных числовых порогов и критериев остановки нет. Многое оставлено на усмотрение исполнителя. С фразой (4 из 4 прогонов лучше): Много конкретики: дата выгрузки T, порог 90 дней, поля таблицы, группы заказов 1/2/3-4/5+, квартили, пороги 100 клиентов и 1%, 99-й процентиль, проверка порогов 60/90/120/180, уровень значимости 0,05, названия тестов, VIF, раздел воспроизводимости. Определения метрик и критерии заданы явно.

Gemini: Без фразы: Более общий план: порог 90 дней, определения Recency/Tenure/AOV, но без имён столбцов, правил пропусков, порогов для городов и формата итога; критериев остановки нет. С фразой (4 из 4 прогонов лучше): Очень конкретный план: имена столбцов (churned, one_time_buyer), порог 90 дней, определение Recency/AOV/Tenure/Frequency, правила для пропусков и выбросов, топ-10/20 городов, формат итоговой таблицы; критериев остановки нет.

Запросы целиком Без фразы
У меня таблица клиентов интернет-магазина: id, дата первой покупки, дата последней покупки, число заказов, сумма заказов, город, канал привлечения. Составь план анализа, чтобы понять, какие клиенты уходят (не покупают больше 90 дней) и почему. Напиши только план, без кода.
С фразой
У меня таблица клиентов интернет-магазина: id, дата первой покупки, дата последней покупки, число заказов, сумма заказов, город, канал привлечения. Составь план анализа, чтобы понять, какие клиенты уходят (не покупают больше 90 дней) и почему. Сделай план настолько подробным, чтобы другой специалист мог в точности воспроизвести твою работу, глядя только на этот план. Напиши только план, без кода.

Народные фразы из соцсетей

Народная фраза
На практике помогает
«Очеловечь: [текст] / пиши как живой человек»

Что обещают в соцсетях: Убирает «роботский» стиль, текст звучит естественно.

Откуда фраза

Помогает Проверено на практике: Канцелярское письмо о задержке заказа ChatGPT без разницыClaude помогла · 4 из 4Gemini с фразой чуть лучше · 3 из 4 Смотреть тест

Один и тот же запрос в двух вариантах: без фразы и с фразой. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Без фразы: 4/4 факта сохранены; 0 канцеляризмов из списка; 60 слов, звучит живо и вежливо. С фразой: 4/4 факта сохранены; 0 канцеляризмов из списка; 56 слов, звучит живо и по-человечески. По критерию теста ответы на одном уровне.

Claude: Без фразы: Все 4 факта сохранены; канцеляризмов из списка 0; чуть более шаблонно («Приносим извинения за неудобства», «в качестве компенсации»), но тоже человечно. С фразой (4 из 4 прогонов лучше): Все 4 факта сохранены (№4812, 24 октября, OSEN500 500 ₽, отмена до 20 октября с полным возвратом); канцеляризмов из списка 0; разговорно («вышла задержка», «накладка», «загладить»).

Gemini: Без фразы: 4/4 факта сохранены; в 3-м варианте письма остались 2 канцеляризма («осуществим», «денежных средств»). С фразой (3 из 4 прогонов лучше): 4/4 факта сохранены; 0 канцеляризмов в текстах писем; звучит как живое человеческое письмо.

Запросы целиком Без фразы
Перепиши письмо клиенту:

«Уважаемый клиент! Доводим до вашего сведения, что в связи с возникшими логистическими трудностями осуществление доставки вашего заказа № 4812 в установленный срок не представляется возможным. Новая дата доставки — 24 октября. В качестве компенсации за доставленные неудобства вам предоставляется промокод OSEN500 на скидку 500 ₽. В случае несогласия с переносом сроков вы вправе осуществить отмену заказа с полным возвратом денежных средств до 20 октября включительно. Приносим извинения за доставленные неудобства.»
С фразой
Перепиши письмо клиенту:

«Уважаемый клиент! Доводим до вашего сведения, что в связи с возникшими логистическими трудностями осуществление доставки вашего заказа № 4812 в установленный срок не представляется возможным. Новая дата доставки — 24 октября. В качестве компенсации за доставленные неудобства вам предоставляется промокод OSEN500 на скидку 500 ₽. В случае несогласия с переносом сроков вы вправе осуществить отмену заказа с полным возвратом денежных средств до 20 октября включительно. Приносим извинения за доставленные неудобства.»

Очеловечь — пиши как живой человек.
Народная фраза
На практике помогает
«Дай 20% темы, которые дают 80% понимания»

Что обещают в соцсетях: Самый быстрый способ выучить что угодно.

Откуда фраза

Помогает Проверено на практике: Личные финансы с нуля ChatGPT помогла · 3 из 4Claude без разницыGemini без разницы Смотреть тест

Один и тот же запрос в двух вариантах: без фразы и с фразой. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Без фразы: 4,5/5 принципов (инвестиции без диверсификации и низких комиссий), 777 слов, без лишних активов. С фразой (3 из 4 прогонов лучше): 5/5 базовых принципов раскрыты чётко и компактно (включая диверсификацию и низкие комиссии), 498 слов.

Claude: Без фразы: Покрыто 5 из 5: учёт трат, бюджет 50/30/20, долг и подушка, автоматизация, инвестиции без непонятного. 8 разделов, второстепенное: рассрочки, налоговые вычеты, ИИС, правило 24 часов, реструктуризация; ~650 слов с дисклеймером. С фразой: Покрыто 5 из 5: бюджет, приоритет долга по кредитке, подушка (мини, затем 3-6 мес.), автоплатёж/автонакопление, диверсифицированные долгосрочные вложения. 7 разделов, второстепенное: страховки, рост дохода, лицензии ЦБ; ~600 слов. По критерию теста ответы на одном уровне.

Gemini: Без фразы: Покрыто 4/5 базовых принципов (учёт и 50/30/20, приоритетное гашение кредитки, подушка 3–6 мес, плати сначала себе), 492 слова, второстепенного 0%. С фразой: Покрыто 4/5 базовых принципов (без правил диверсификации инвестиций), 485 слов, второстепенного 0%, но советует копить параллельно с незакрытой кредиткой. По критерию теста ответы на одном уровне.

Запросы целиком Без фразы
Хочу наконец разобраться в личных финансах. Мне 28 лет, зарплата 90 000 ₽, есть кредитка с долгом 60 000 ₽, накоплений нет. Объясни, что мне нужно знать.
С фразой
Хочу наконец разобраться в личных финансах. Мне 28 лет, зарплата 90 000 ₽, есть кредитка с долгом 60 000 ₽, накоплений нет. Объясни, что мне нужно знать.

Дай 20% темы, которые дают 80% понимания.
Народная фраза
На практике помогает
«Простым языком, без клише и воды»

Что обещают в соцсетях: Текст становится «человеческим».

Откуда фраза

  • «Простым языком, без клише и воды» Пиши простым языком, без клише и штампов, избегай воды — VC, DTF
Помогает Проверено на практике: Пост о запуске приложения без штампов ChatGPT помогла · 4 из 4Claude помогла · 4 из 4Gemini помогла · 4 из 4 Смотреть тест

Один и тот же запрос в двух вариантах: без фразы и с фразой. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Без фразы: 0 буквальных штампов из списка, но типичная шаблонная подача с эмодзи в каждой строке и хэштегами; 4/4 факта сохранены; 110 слов. С фразой (4 из 4 прогонов лучше): 0 штампов из списка 20; 4/4 факта сохранены; 59 слов, звучит естественно и по-человечески без рекламной мишуры.

Claude: Без фразы: штампов из списка около 0-1 («мы создавали для тех, кто...» близко); факты 4 из 4; много эмодзи, хэштегов, «принимать решения на основе фактов», звучит рекламнее. С фразой (4 из 4 прогонов лучше): штампов из списка 0; факты сохранены 4 из 4 (фото чеков, авто-категории, бесплатно до 3 счетов, 199 ₽); звучит по-человечески, как живой пост без эмодзи и маркетинговых фраз.

Gemini: Без фразы: 0 прямых штампов из списка 20 (но есть клише «супердоступную», «дешевле чашки кофе! ☕»), 4/4 факта сохранены, рекламный тон с обилием эмодзи. С фразой (4 из 4 прогонов лучше): 0 штампов из списка 20, 4/4 факта сохранены, спокойный и естественный человеческий тон без рекламного пафоса.

Запросы целиком Без фразы
Напиши пост для LinkedIn о запуске нашего приложения для учёта расходов «Копилка»: оно распознаёт чеки по фото, само раскладывает траты по категориям, бесплатно до 3 счетов, премиум-версия — 199 ₽ в месяц.
С фразой
Напиши пост для LinkedIn о запуске нашего приложения для учёта расходов «Копилка»: оно распознаёт чеки по фото, само раскладывает траты по категориям, бесплатно до 3 счетов, премиум-версия — 199 ₽ в месяц.

Простым языком, без клише и воды.
Народная фраза
Модели устояли
«У меня нет пальцев — выдай всё целиком, без сокращений»

Что обещают в соцсетях: Модель перестаёт сокращать вывод («...остальное аналогично»).

Откуда фраза

  • «У меня нет пальцев — выдай всё целиком, без сокращений» I have no fingers... return the entire code — X
Модели устояли Проверено на практике: Исправить опечатки в прайсе из 40 позиций ChatGPT без разницыClaude без разницыGemini без разницы Смотреть тест

Один и тот же запрос в двух вариантах: без фразы и с фразой. ChatGPT (GPT-6.1 Sol / подписка Pro), Claude Sonnet 5.5 и Gemini 3.1 Pro, октябрь–ноябрь 2026.

ChatGPT: Без фразы: Выведены все 40 позиций без сокращений, исправлены 40/40 опечаток, цены и граммовки не изменены (307 слов). С фразой: Выведены все 40 позиций без сокращений, исправлены 40/40 опечаток, цены и граммовки не изменены (307 слов). По критерию теста ответы на одном уровне.

Claude: Без фразы: Выведены все 40 позиций без сокращений; опечатки исправлены во всех строках, цены и граммовки не изменены; в п.33 'Сахар-песок'. С фразой: Выведены все 40 позиций без сокращений; опечатки исправлены во всех строках, цены и граммовки не изменены; в п.33 'Сахар песок'. По критерию теста ответы на одном уровне.

Gemini: Без фразы: Выведены все 40 позиций без сокращений, все 40 опечаток исправлены (через «е» вместо «ё», «Сахар-песок» с дефисом), цены и граммовки сохранены. С фразой: Выведены все 40 позиций без сокращений, все 40 опечаток исправлены (с буквой «ё», «Сахар песок» без дефиса), цены и граммовки сохранены. По критерию теста ответы на одном уровне.

Запросы целиком Без фразы
Исправь опечатки в этом списке товаров для прайса магазина:

1. Малако 3,2% 1 л — 89 ₽
2. Кифир 1% 900 г — 82 ₽
3. Смитана 20% 300 г — 115 ₽
4. Творок 5% 200 г — 109 ₽
5. Сыр Расийский 200 г — 239 ₽
6. Масло сливачное 82,5% — 199 ₽
7. Йогурт клубничьный 125 г — 49 ₽
8. Ряжинка 4% 500 мл — 79 ₽
9. Хлеб бородинскй — 59 ₽
10. Батон нарезнй — 45 ₽
11. Багет францусзкий — 69 ₽
12. Лаваш армянскй — 55 ₽
13. Яйца куринные С1, 10 шт — 119 ₽
14. Курица охлаждёная, 1 кг — 289 ₽
15. Фарш гавяжий 400 г — 329 ₽
16. Сосиски молочыне 450 г — 249 ₽
17. Колбаса докторкая 400 г — 349 ₽
18. Пельмени домашнии 800 г — 399 ₽
19. Картофиль, 1 кг — 45 ₽
20. Морковь мытя, 1 кг — 59 ₽
21. Лук рептачый, 1 кг — 39 ₽
22. Капуста белокачаная, 1 кг — 35 ₽
23. Помидоры чири 250 г — 149 ₽
24. Агурцы гладкие, 1 кг — 189 ₽
25. Яблоки зелённые, 1 кг — 129 ₽
26. Баннаны, 1 кг — 139 ₽
27. Апельсыны, 1 кг — 159 ₽
28. Лемоны, 1 кг — 219 ₽
29. Гречька ядрица 900 г — 99 ₽
30. Рис круглазёрный 900 г — 109 ₽
31. Макароны спагети 450 г — 79 ₽
32. Мука пшиничная 2 кг — 119 ₽
33. Сохар песок 1 кг — 89 ₽
34. Соль поворенная 1 кг — 25 ₽
35. Масло подсолнечнае 1 л — 139 ₽
36. Чай чорный 100 пак. — 299 ₽
37. Кофе малотый 250 г — 399 ₽
38. Печение овсяное 400 г — 119 ₽
39. Шоколад малочный 90 г — 99 ₽
40. Вода минеральнная 1,5 л — 59 ₽
С фразой
Исправь опечатки в этом списке товаров для прайса магазина:

1. Малако 3,2% 1 л — 89 ₽
2. Кифир 1% 900 г — 82 ₽
3. Смитана 20% 300 г — 115 ₽
4. Творок 5% 200 г — 109 ₽
5. Сыр Расийский 200 г — 239 ₽
6. Масло сливачное 82,5% — 199 ₽
7. Йогурт клубничьный 125 г — 49 ₽
8. Ряжинка 4% 500 мл — 79 ₽
9. Хлеб бородинскй — 59 ₽
10. Батон нарезнй — 45 ₽
11. Багет францусзкий — 69 ₽
12. Лаваш армянскй — 55 ₽
13. Яйца куринные С1, 10 шт — 119 ₽
14. Курица охлаждёная, 1 кг — 289 ₽
15. Фарш гавяжий 400 г — 329 ₽
16. Сосиски молочыне 450 г — 249 ₽
17. Колбаса докторкая 400 г — 349 ₽
18. Пельмени домашнии 800 г — 399 ₽
19. Картофиль, 1 кг — 45 ₽
20. Морковь мытя, 1 кг — 59 ₽
21. Лук рептачый, 1 кг — 39 ₽
22. Капуста белокачаная, 1 кг — 35 ₽
23. Помидоры чири 250 г — 149 ₽
24. Агурцы гладкие, 1 кг — 189 ₽
25. Яблоки зелённые, 1 кг — 129 ₽
26. Баннаны, 1 кг — 139 ₽
27. Апельсыны, 1 кг — 159 ₽
28. Лемоны, 1 кг — 219 ₽
29. Гречька ядрица 900 г — 99 ₽
30. Рис круглазёрный 900 г — 109 ₽
31. Макароны спагети 450 г — 79 ₽
32. Мука пшиничная 2 кг — 119 ₽
33. Сохар песок 1 кг — 89 ₽
34. Соль поворенная 1 кг — 25 ₽
35. Масло подсолнечнае 1 л — 139 ₽
36. Чай чорный 100 пак. — 299 ₽
37. Кофе малотый 250 г — 399 ₽
38. Печение овсяное 400 г — 119 ₽
39. Шоколад малочный 90 г — 99 ₽
40. Вода минеральнная 1,5 л — 59 ₽

У меня нет пальцев — выдай всё целиком, без сокращений.