ToolACE:赢得LLM函数调用的分数
阎荟
2024-09-04 00:00:00
299
ToolACE代表了在大型语言模型(LLMs)领域的重大进展,特别是在函数调用方面。
ToolACE代表了在大型语言模型(LLMs)领域的重大进展,特别是在函数调用方面。由刘伟文和黄旭领导的团队撰写,本文介绍了一种创新的自动化流水线,用于为LLMs生成高质量、多样化的训练数据,以拓展其应用范围。ToolACE的独特之处在于其自我演化合成过程,策划了一个包含超过26,000个多样化API的广泛API池。本文还详细介绍了一种独特的对话生成方法,涉及多个代理和一个双层验证系统,以确保数据准确性。值得注意的是,基于ToolACE合成数据训练的模型在伯克利函数调用排行榜上展现出了最先进的性能,展示了它们与最新的GPT-4模型竞争的能力。对于对LLMs和函数调用感兴趣的研究人员和开发人员来说,该模型和部分数据的公开可用性使本文尤为有价值。- ToolACE是一种自动代理管道,用于生成准确、复杂和多样化的工具学习数据。
- ToolACE利用自我演化合成过程来创建一个包含26,507个多样化API的API池。
- 对话是通过多个代理之间的相互作用和一个形式化的思考过程生成的。
- 数据的准确性得到了基于规则和基于模型检查的双层验证系统的保证。
- 使用80亿参数的模型在合并大学功能调用排行榜上训练,达到了最先进的性能,与最新的GPT-4模型相媲美。
- 模型和部分数据可以在https://huggingface.co/Team-ACE上公开获取。
版权声明:
创新中心创新赋能平台中,除来源为“创新中心”的文章外,其余转载文章均来自所标注的来源方,版权归原作者或来源方所有,且已获得相关授权,若作者版权声明的或文章从其它站转载而附带有原所有站的版权声明者,其版权归属以附带声明为准。其他任何单位或个人转载本网站发表及转载的文章,均需经原作者同意。如果您发现本平台中有涉嫌侵权的内容,可填写
「投诉表单」进行举报,一经查实,本平台将立刻删除涉嫌侵权内容。
评论