WebSailor是什么
WebSailor 是阿里通义实验室开源的网络智能体，专注于复杂信息检索与推理任务。通过创新的数据合成方法（如 SailorFog-QA）和训练技术（如拒绝采样微调和 DUPO 算法），在高难度任务中表现出色，在 BrowseComp 等评测中超越多个知名模型，登顶开源网络智能体榜单。WebSailor 的推理重构技术能高效处理复杂任务，生成简洁且精准的推理链。在复杂场景中表现出色，在简单任务中展现出强大的泛化能力。
WebSailor的主要功能
- 复杂任务数据合成：WebSailor 使用 SailorFog-QA 方法生成高不确定性的复杂任务数据，模拟真实世界中信息搜索的复杂场景。
- 多轮工具调用与推理重构：借助开源推理模型，WebSailor 能进行多轮工具调用，重构推理过程，高效处理复杂问题。
- 强化学习算法：采用 DUPO 算法，通过动态采样策略优化训练效率，显著提升模型的决策能力。
- 信息检索与分析：WebSailor 能主动搜索、访问多个网页，分析信息之间的关联，提供完整准确的答案。
WebSailor的技术原理
- 数据合成（SailorFog-QA）：WebSailor 首先通过 SailorFog-QA 方法生成高不确定性的复杂任务数据。采用“知识图谱随机游走”技术，从维基数据等知识库中选取冷门实体作为起点，随机扩展知识图谱，构建复杂的非线性关系网络。通过模糊化问题描述（如将具体年份改为时间段、隐去部分信息等），进一步增加任务的初始不确定性。
- 模型训练（RFT 冷启动）：在训练阶段，WebSailor 使用拒绝采样微调（RFT）进行冷启动。RFT 通过挑选高质量的解题轨迹对模型进行初步对齐，帮助模型掌握基本的推理和工具调用习惯。
- 强化学习（DUPO 算法）：完成冷启动后，WebSailor 进入强化学习阶段，采用 DUPO（重复采样策略优化）算法。DUPO 的核心在于动态采样策略：训练前过滤掉过于简单的样本，训练中重复采样具有挑战性的轨迹。大幅提高了训练效率，使模型在复杂任务中快速迭代。
WebSailor的项目地址
- Github仓库：https://github.com/Alibaba-NLP/WebAgent
WebSailor的应用场景
- 复杂信息检索：WebSailor 能处理模糊和复杂的查询问题，通过多步推理和交叉验证，在海量信息中快速定位并验证答案。
- 多跳问答任务：在多跳问答场景中，WebSailor 能通过多轮工具调用和推理，逐步拆解复杂问题并找到答案。
- 科研与数据分析：WebSailor 可以帮助科研人员和分析师快速梳理复杂的信息网络，从多个来源综合信息，提供完整且准确的结论。
- 高难度任务训练与优化：WebSailor 的训练数据集 SailorFog-QA 模拟了复杂的现实世界信息搜索场景，通过高不确定性和复杂关系网络的构建，能应对没有预设解决路径的复杂任务。