Модель перестала читать в определённую дату, и сама она этой даты не знает
Языковая модель учится на фиксированном массиве текста, собранном до начала обучения. Что такое LLM рассказывает про два этапа обучения; здесь важно, что оба используют данные с конечной датой. Всё опубликованное после неё в модели отсутствует. Ни выборы, ни изменение цены, ни новости о самой модели.
Вендоры публикуют эту дату в карточке модели, и всё чаще указывают сразу две. Anthropic перечисляет "training data cutoff", последнюю дату, когда данные ещё включались, и "reliable knowledge cutoff", более раннюю дату, до которой охват достаточно плотный, чтобы ему доверять. Разрыв между ними существует потому, что интернету нужны месяцы, чтобы написать о событии: релиз в марте имеет горстку страниц в апреле и тысячи к сентябрю. Модель, обученная в июле, хорошо знает март и почти не знает июль.
Сама модель не может назвать ни ту, ни другую дату. У неё нет календаря и записи о собственном обучении; на вопрос "какая у тебя дата отсечки знаний" она выдаёт наиболее вероятный ответ на такой вопрос из своих обучающих данных, обычно это дата, о которой она читала применительно к более ранней модели. Опубликованные системные подсказки Anthropic прямым текстом сообщают Claude его собственную дату отсечки, что само по себе признание: иначе модель бы её не знала. Берите дату из карточки, никогда из чата.
Насколько устарела модель в день выхода, в цифрах
Обучение занимает месяцы, а оценка и работа над безопасностью, ещё больше, так что модель выходит уже отставшей. График читает восемь карточек моделей: надёжная или заявленная дата отсечки знаний против даты публичного релиза, в целых месяцах.
Здесь видны две картины. Флагманы OpenAI выходили с наибольшим отставанием, по десять месяцев у GPT-4.1 и GPT-5, тогда как у Anthropic и Google этот показатель держался на уровне от двух до четырёх. И разрыв только растёт по мере эксплуатации: GPT-4o оставалась моделью ChatGPT по умолчанию ещё год после запуска, и к этому моменту её знания заканчивались уже на 19 месяцев раньше. Модель в повседневном использовании обычно отстаёт на год и более к тому дню, когда вы что-то у неё спрашиваете.
Даты выше взяты у самих вендоров из карточек моделей, ссылки на которые даны в конце страницы. Хронология моделей ИИ содержит даты релиза для каждой модели, которую отслеживает сайт.
Что делает модель, если спросить её о времени после черты
Она отвечает. В этом и проблема. У модели нет шага поиска в базе, который вернул бы "не найдено"; она генерирует наиболее правдоподобное продолжение, а для вопроса о прошлом месяце это продолжение строится из шаблонов похожих вопросов в обучающих данных. Спросите про продукт, вышедший после отсечки, и модель опишет, каким такой продукт мог бы правдоподобно быть. Спросите текущую цену, и она назовёт цену на момент отсечки, но в настоящем времени.
Что такое AI-галлюцинация объясняет, почему модель уверена в себе, а не сомневается, но у версии с отсечкой есть свой признак: ответ связный и слегка устаревший. Название модели на версию назад, цена прошлогодняя, "последняя" функция, это та, что была на момент обучающего окна. Устаревший ответ выглядит не ошибочным, он выглядит как прошлое.
| Тип вопроса | Безопасно ли спрашивать голую модель? | Почему |
|---|---|---|
| Как что-то устроено, устоявшиеся факты, история до отсечки | Да | Плотно представлено в обучающих данных, вряд ли изменилось |
| Цены, тарифы, лимиты, номера версий | Нет | Меняются ежемесячно; модель отвечает данными на момент отсечки, но в настоящем времени |
| Свежие релизы, новости, результаты, законы | Нет | Отсутствуют или представлены скудно; модель заполняет пробел правдоподобными деталями |
| Что угодно о самой модели, включая её отсечку | Нет | У модели нет записи о собственном обучении |
| Ваши собственные документы, ваши данные | Нет | Никогда не входили в обучающую выборку; загрузите их |
Решение, это поиск, и он работает даже с моделями, у которых его нет
Отсечку сдвинуть нельзя, поэтому решение в том, чтобы дать модели актуальный текст прямо в момент ответа. Для этого есть два механизма. Загрузка документа помещает ваш текст в промпт, и модель отвечает исходя из него. Веб-поиск находит страницы и делает то же самое с открытым интернетом. Оба варианта, это грунтирование (grounding), и оба используют механизм, который описывает что такое RAG: модель по-прежнему предсказывает, но опираясь на материал, появившийся позже её обучения.
В Whizi веб-поиск включён по умолчанию, находится в поле ввода рядом с кнопкой прикрепления файла и применяется к любой выбранной модели. И это как раз самое полезное. Claude или модель Llama: с включённым переключателем каждая из них отвечает на вопрос про эту неделю, опираясь на живые источники. Переключатель, это разрешение, а не команда, поэтому запрос на стихотворение поиск не запускает, а вопрос с датой внутри запускает. Поиск не стоит кредитов; сообщение стоит столько же кредитов, сколько модель, которая на него ответила, столько же, сколько и без поиска.
Стоит честно назвать одно ограничение. Поиск устраняет устаревание, но не решает вопрос достоверности. Устаревший пост в блоге находится так же легко, как страница вендора, поэтому для цены или спецификации открывайте указанную ссылку перед тем, как действовать на её основе, а для всего важного спрашивайте вторую модель с включённым поиском и сравнивайте.
Считайте, что отставание не менее полугода, а дальше сортируйте вопрос
Считайте, что любая модель отстаёт минимум на полгода, а модель, которой вы пользуетесь давно, отстаёт на год и более. Затем отсортируйте вопрос. Если ответ зависит от фактов о мире после этой черты, включите поиск или загрузите источник. Если ответ зависит от рассуждения о том, что уже есть в разговоре, отсечка не важна, и поиск можно оставить выключенным.
Проверяйте дату по карточке модели, а не по самой модели. И когда модель сама сообщает "по состоянию на последнее обновление", читайте это как цитату из обучающих данных, а не как факт о себе, и относитесь ко всему после этой фразы с той же осторожностью.
- Берите дату отсечки из карточки модели у вендора, никогда не спрашивайте саму модель
- Считайте, что при запуске отставание минимум полгода, а у модели, которая давно в строю, год и более
- Включайте веб-поиск для всего, где есть цена, номер версии, дата или недавнее название
- Загружайте документ, когда ответ зависит от вашего собственного текста: его никогда не было в обучающих данных
- Открывайте указанную ссылку перед тем, как действовать на основе найденной цены или спецификации, или спрашивайте вторую модель с включённым поиском
Частые вопросы
Что такое дата knowledge cutoff?
Дата, после которой ни один текст уже не входил в обучающие данные модели. Всё, что модель знает без посторонней помощи, относится ко времени до этой даты. Вендоры публикуют её в карточке модели, а некоторые публикуют сразу две: training data cutoff и более раннюю reliable knowledge cutoff, потому что последние месяцы на момент обучения освещены интернетом скудно.
Какой knowledge cutoff у ChatGPT?
Это зависит от модели, которая стоит за чатом, и OpenAI публикует его для каждой на странице модели. У GPT-4o отсечка в октябре 2023, у GPT-4.1 в июне 2024, у GPT-5 в сентябре 2024, и каждая вышла спустя 7 до 10 месяцев после этого. При включённом browsing ChatGPT отвечает по живым страницам вне зависимости от базовой отсечки.
Почему модель не может назвать свою собственную дату отсечки?
Потому что у неё нет записи о собственном обучении. Получив такой вопрос, она генерирует наиболее вероятный ответ из своих обучающих данных, который часто описывает более раннюю модель. Опубликованные системные подсказки Anthropic прямым текстом сообщают Claude его дату отсечки, потому что иначе модель бы её не знала. Карточка модели, это единственный надёжный источник.
Как получить от модели ИИ актуальную информацию?
Дайте ей актуальный текст. Веб-поиск подтягивает живые страницы прямо в промпт; загрузка документа помещает туда ваш собственный текст. В обоих случаях модель отвечает исходя из того, что ей передали, а не из обучающих данных. Whizi включает веб-поиск по умолчанию для любой модели бесплатно, так что даже модель без собственного поиска отвечает по сегодняшним источникам.
Решает ли более новая модель проблему отсечки?
Она сдвигает черту, и эта черта всё равно отстаёт на месяцы в день релиза: GPT-5 вышла спустя десять месяцев после своей отсечки, Claude 3.7 Sonnet спустя четыре. Дальше любая модель стареет уже в эксплуатации. Поиск или загрузка документа, это решение проблемы устаревания; более новая модель, это решение проблемы возможностей.