ChatGPT не стал глупее. Ваши ожидания выросли, а ваши промпты остались прежними. Размытый однострочный промпт, который впечатлял вас в 2024 году, теперь выдает стандартный результат, потому что вы видели, как выглядят по-настоящему хорошие ответы от ИИ — и разрыв между тем, что вы просите, и тем, что вы на самом деле хотите, увеличился.
Есть реальные случаи, когда качество модели меняется (OpenAI маршрутизирует запросы между вариантами модели, ограниченные по частоте пользователи получают более легкие модели, и изменения системного промпта влияют на поведение). Но для 90% пользователей, жалующихся на Reddit, решение — это лучший промпт, а не другая модель.
Почему все думают, что ChatGPT стал хуже?
Поищите "ChatGPT nerfed" на Reddit, и вы найдете тысячи постов. Разочарование реальное. Но в игре задействана психологическая закономерность: эффект новизны прошел.
Когда вы впервые использовали ChatGPT, его результаты вас поражали. Посредственное стихотворение казалось волшебством, потому что его написал компьютер. Базовый фрагмент кода казался чудом. Ваш критерий был "может ли машина это вообще сделать?"
Теперь ваш критерий: "может ли машина это сделать достаточно хорошо, чтобы заменить работу, которую я бы сделал сам?" Это намного более высокий стандарт, и ваши однострочные промпты не эволюционировали, чтобы ему соответствовать.
Модель не деградировала — ваши ожидания развились. Промпт, который работал в 2024 году, выдает то же качество, что и всегда. Вам просто нужно больше.
Как выглядит плохой промпт?
Вот одна и та же просьба, сформулированная двумя способами:
Размытый промпт: "Напиши мне маркетинговое письмо."
Структурированный промпт: "Действуй как специалист по email-маркетингу. Напиши промо-письмо из 150 слов для расширения Chrome, которое помогает организовать AI-диалоги. Целевая аудитория: knowledge workers, которые ежедневно используют ChatGPT. Тон: casual и прямой, не продажный. Включи subject line. Заверши четким CTA для установки из Chrome Web Store."
Первый промпт дает ChatGPT почти ничего. Ему нужно угадать вашу аудиторию, тон, длину, продукт и цель. Он выдаст что-то стандартное, потому что сам запрос стандартный. Второй промпт ограничивает результат ровно так, как это важно.
Прежде чем винить модель, добавьте три вещи в свой промпт: кем вы хотите, чтобы ИИ выступал (роль), для кого предназначен результат (аудитория) и какой формат вы хотите (ограничения). Это одно уже исправляет большинство "глупых" ответов.
Когда ChatGPT на самом деле стал хуже?
Честно говоря, есть законные технические причины для колебаний качества:
Маршрутизация модели: OpenAI иногда маршрутизирует запросы к более легким вариантам модели во время пиковой нагрузки. Ваш ответ "GPT-4o" может фактически поступить из более компактной и быстрой модели.
Изменения системного промпта: OpenAI регулярно обновляет скрытый системный промпт, который формирует поведение ChatGPT. Эти изменения могут влиять на тон, подробность и готовность помогать с определенными задачами.
Ограничение частоты: Пользователи бесплатного уровня более активно ограничиваются. Если ваши ответы внезапно стали хуже, вы могли достичь лимита использования без предупреждения.
Реальная регрессия: Это случалось. Математическая производительность GPT-4 заметно снизилась между мартом и июнем 2023 года. OpenAI позже признала и исправила некоторые из этих проблем. Но такие случаи редкие и специфичные, а не всеобщее "все стало хуже", как предлагает Reddit.
Как вы действительно исправляете плохие результаты?
Суть
Попробуйте прямо сейчас: Возьмите ваш самый последний промпт для ChatGPT, который вас разочаровал. Добавьте роль, ограничение по формату и один пример того, что вы хотите. Запустите его снова. Разница будет очевидна.
Попробуйте сами: Вставьте любой промпт в наш бесплатный оптимизатор промптов и посмотрите, как выглядит структурированное промптирование на самом деле.