跳到正文
热点事件历史事件

Parallel开源搜索评测框架parallel-search-evals

1 篇报道1 个报道来源4 天前更新

先了解这件事

AI 综述

Parallel 开源了搜索评测框架 parallel-search-evals,用于衡量模型在开启与关闭搜索工具条件下的回答差异及成本。 该框架允许同一模型分别在不使用工具和允许搜索的情况下答题,通过对比答案质量与资源消耗来评估搜索的价值。模型可调用 Search(最多返回10条附正文摘录的结果)和 Extract(从最多20个网址提取内容),每题限制最多20次工具调用和25轮研究。

AI 根据报道生成 · 4 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月18日
  1. meng shao精选
    Parallel 开源 parallel-search-evals 搜索评测框架

    Parallel 开源搜索评测框架 parallel-search-evals,让同一模型分别在关闭工具和允许搜索的条件下答题,再比较答案与成本。模型可调用 Search(最多返回 10 条附正文摘录的结果)和 Extract(从最多 20 个网址提取内容),每题最多 20 次工具调用、25 轮研究。

本事件热度走势

可比范围当前
3
可比范围峰值
1011月18日 12:00
近 24 小时变化
-51%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。