研究评测20家LLM API中转:行为差异与多报tokens
热点事件持续更新
研究评测20家LLM API中转:行为差异与多报tokens
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
Xiaodong Wu 等在 arXiv 发布研究,对 20 家提供 GPT-6 Astra 与 Claude Opus 5 的第三方 API 中转服务进行回答行为、工具权限与计费测量。首轮测试中,7/10 低价中转和 2/10 同价或更高价中转被发现回答行为差异;四家中转在指令禁用工具调用的情况下仍返回工具调用;五家对相同请求比官方 API 多报 4,200 至 60,000 个 input tokens。 计费方面,在有余额可查的六家服务中,实际扣费按报告用量和标价执行,其中一家包含多报的 input tokens。研究称仅看宣传的模型和价格不足以判断中转服务可靠性,需多次重复测量。
AI 根据报道生成 · 2 小时前更新
报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- arXiv cs.AI研究评测 20 家 LLM API 中转服务:GPT-6 Astra 与 Claude Opus 5 的回答行为、工具权限与计费问题
一项研究测试了 20 家提供 GPT-6 Astra 和 Claude Opus 5 的第三方 API 中转服务。首轮样本中有 7/10 低价中转和 2/10 同价或更高价中转被发现回答行为差异;四家中转在指令禁用工具调用的情况下仍返回工具调用;五家对相同请求多报 4,200 至 60,000 个 input tokens。研究表明仅看宣传的模型和价格不足以判断中转服务可靠性,需多次重复测量。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。