🌍
Как правильно промптить LLM для планирования путешествий: что говорит наука
Пока путешествую по Мадагаскару, задался вопросом: а как вообще правильно просить LLM спланировать поездку и составить маршрут?
TL;DR: пишите как удобно, вставляйте местные названия, прямо просите искать на языке страны и требуйте ссылки на источники — особенно для дат, цен и расписаний ✈️
1️⃣
Язык промпта — гибрид
Инструкции модель лучше выполняет на английском, но факты о стране точнее «вспоминает» на её языке — перевод смывает культурный контекст (в
бенчмарке CulturALL нативные промпты дали +8% точности).
Промптинг на языке культуры также снижает галлюцинации о ней.
👉
Рецепт: запрос — на удобном языке, а топонимы, районы и блюда — на языке страны.
2️⃣
Явно просите искать на местном языке
У LLM есть скрытый bias: на каком языке спросили — на таком и ищет, а без локальных источников тянется к высокоресурсным языкам (
Faux Polyglot). Запрос на английском = «туристический интернет», а не то, куда ходят местные.
👉
Пишите прямо: «ищи и на малагасийском, и на французском, и на английском, для ресторанов и транспорта приоритет — локальные сайты».
3️⃣
Зависит ли от страны? Да, и тут парадокс 🤯
▫️ Франция/Япония: многое дублируется на английском, локальный поиск даёт бонус в «длинном хвосте» — события, нетуристические места.
▫️ Низкоресурсные языки (тот же малагасийский): самое ценное есть только локально, но модель хуже понимает язык. Оптимум — двуязычный поиск + синтез (
paper).
▫️ Важна ещё и «оцифрованность» страны: про регионы с бедным интернетом модель знает мало на любом языке.
⚠️
Нюансы, о которых забывают:
🔸 Когда источники на одном языке, а ответ на другом, модель хуже рассуждает и путает язык ответа (
бенчмарк XRAG, EMNLP 2025).
Фиксируйте: «отвечай по-русски, укажи источник каждого факта».
🔸
Разные модели ≠ одинаковое поведение: одной лучше английский, другой — нативный язык. Универсального правила нет.
🔸
Неанглийский текст «дороже» по токенам — чисто инженерный аргумент 💸
🔸
Цены, визы, расписания — только через поиск, по памяти модель уверенно выдаст устаревшее.
📊 Оценка завышена (
XBCP и
X-WebAgentBench) для travel-planning нет хорошего ground truth так как текущие исследования агентных систем в основном англо-центричны.
@mashkka_ds
За вдохновение спасибо @travel4_you & @runoutofthetown
#llm #Claude #agent