Search Engine Journal 测试:同一问题换语言,AI 推荐的品牌会变吗
Lost In Translation: How Language Changes Which Brand AI Recommends
Search Engine Journal 作者 Reza Moaiandin 用 DataForSEO 的 LLM Responses API,就酒店、机票、耳机、扫地机器人、CRM、项目管理软件六个场景,在英语、阿拉伯语、俄语、简体中文、波斯语五种语言下向 Claude Sonnet 5 提问,共收集1650条回答。
来源类别:国际媒体或研究机构。来源类别与声明证据等级分别判断。请核对原文的适用范围和统计口径。
情报解读
AI分析基于本篇材料,解释与原始声明分开展示。
- 发生了什么
- 作者以六个购物/预订场景、五种语言向 Claude Sonnet 5 提问,并对比 ChatGPT(gpt-5.6-sol)与 Gemini(gemini-3.5-flash),共分析1650条回答,发现机票与酒店推荐随语言显著变化,其余类目较稳定。
- 为什么重要
- 品牌若只用英语检测 AI 可见性,可能误判其在其他语言市场的推荐情况;开启联网搜索后结果变化更大,说明营销内容或可影响 AI 推荐。
- 行业影响
- 对依赖多语言客源的旅游与酒店品牌,AI 推荐的语言差异意味着单一语言监测不足,需按目标市场语言分别评估 AI 可见性。
- 值得学习什么
- 作者建议品牌用客户购买前的典型问题,在多个 AI 模型和每个目标市场语言中重复测试,观察模式随时间的变化,而非一次性检测。
声明与证据
- E · 未验证
作者用六个场景、五种语言向 Claude Sonnet 5 提问,共收集1650条回答,发现机票和酒店推荐随语言显著变化。
方法:DataForSEO LLM Responses API,六场景×五语言×40次运行,另加联网搜索与 ChatGPT、Gemini 对比测试 · 未经独立交叉核验 - E · 未验证
伦敦至特内里费航线中,Claude 在俄语下72.5%推荐 easyJet,在波斯语下52.5%推荐英国航空,且俄语下未推荐英国航空。
· 未经独立交叉核验 - E · 未验证
Anthropic 2026年7月报告称,Claude 在近31万条真实对话中表现出的价值取向随语言变化,如印地语和阿拉伯语更偏温暖、英语和俄语更偏严谨。
方法:抽样近31万条真实对话,覆盖20种最常用语言,平均分配于 Sonnet 4.6、Opus 4.6、Opus 4.7 三个模型 · 未经独立交叉核验 - E · 未验证
开启联网搜索后,酒店类目五种语言的获胜品牌全部改变,JOIA by Iberostar 在三种语言中获最多推荐。
· 未经独立交叉核验 - E · 未验证
作者称同一场景下 ChatGPT 与 Claude 的推荐差异较大,ChatGPT 在四种语言中推荐 Wrike 最多,而 Claude 五种语言均推荐 Monday.com。
· 未经独立交叉核验 - E · 未验证
作者强调该研究样本小、部分回答被截断,结果仅为提示性,建议品牌自行多语言重复测试。
· 未经独立交叉核验
- · 样本为2026年9月7日单日下午收集的1650条回答,作者自认样本小、部分数字可能落在误差范围内
- · 开启联网搜索时42.7%的回答在完成前触及输出上限,波斯语83%、阿拉伯语63%,数字可能偏软
- · 作者明确表示结果仅为提示性,不能代表多语言 AI 全景,也未验证语言差异的成因
- · 证据为自动标注,未完成人工或独立交叉核验。
存在值得继续研究的问题。 · 可作为营销打法候选。
研究空间
团队成员登录后可保存;个人笔记仅本人可见,研究记录可主动选择团队共享。
来源:Search Engine Journal · searchenginejournal.com