Яндекс Алиса публикует результаты событий, которые ещё не произошли.
__Такой проблеме несколько месяцев__
Яндекс заявляет, что Алиса AI сама формирует каскад запросов к Поиску и собирает итоговый ответ из найденных в интернете материалов. Однако в этой схеме, судя по ответам самой Алисы, ломается временная привязка: анонс будущего события, прогноз или материал о похожем событии превращается в уже состоявшийся результат. Скорее всего, система не смогла связать воедино текущую дату, дату проведения события, дату публикации источника и модальность текста — «пройдёт», «ожидается», «может победить». В итоге генератор получает формально релевантные документы и уверенно переписывает предположение в прошедшем времени. Яндекс при этом обещает, что поиск Алисы опирается на найденные источники, но наличие источника само по себе не гарантирует правильность ответа: документ может быть настоящим, а вывод из него — ложны
Исправлять здесь нужно не языковую модель. Сначала из запроса и каждого документа необходимо отдельно извлекать дату публикации, дату самого события, его временной интервал и статус: запланировано, идёт сейчас, завершено, отменено или неизвестно. Затем эти признаки должны участвовать в переранжировании источников: если пользователь спрашивает результат, документы о будущем событии и тексты с прогнозами нельзя использовать как подтверждение результата. После генерации нужен отдельный верификатор, который разбивает ответ на утверждения и проверяет, действительно ли источник подтверждает не только имя или число, но также время и статус события. Если дата окончания ещё не наступила либо подтверждённых итогов нет, система обязана ответить: «Событие ещё не состоялось» или «Результаты пока не опубликованы». Подобные time-aware RAG-схемы уже существуют в исследованиях: они выделяют временные ограничения в запросе, извлекают документы одновременно по смысловой и временной релевантности, а затем проверяют согласованность ответа
Уважаемые разработчики, нашел для вас статьи, почитайте:
Исследование TimeR⁴ · исследование Time-Aware RAG
