Indico Data发布业界首个用于文档理解任务的大型语言模型基准

新的季度基准测试使用经过验证的行业评估方法计算主要LLM提供商的准确性和成本

波士顿，2024年5月13日/PRNewswire/-Indico Data是行业领先的保险、金融服务和医疗保健关键录取工作流程自动化解决方案，它宣布发布行业首个基准网站，评估用于文档理解任务的大型语言模型（LLM）。这一里程碑式的分析是同类分析中第一个对主要LLM在包括数据提取、文档分类和摘要在内的重要任务中的表现进行客观、公正的审查。该网站专为IT高管、数据科学家和战略决策者设计，对于任何依赖具体、数据驱动的技术实施见解的人来说，它都是一笔至关重要的资产。

Indico Data自成立以来一直是人工智能行业的指导力量，在经常被过度类型所笼罩的环境中，始终强调实用的人工智能应用程序和真实的客户结果。Indico是业界第一个在企业内部部署基于语言的大型应用程序的公司，也是第一个将可解释性和可审计性直接集成到其产品中的公司，为透明度和信任度树立了标准。

虽然绝大多数LLM基准测试都集中在聊天机器人相关的任务上，但Indico认识到需要了解大型语言模型在提取和分类等更具确定性的任务中的性能，并进一步了解基于与上下文长度和任务复杂性相关的假设的性能和成本。

Indico Data首席执行官Tom Wilde表示：“自我们成立以来，Indico一直致力于促进人工智能行业的透明度和信任。”。“我们的最新举措LLM基准网站通过提供真实、公正的信息填补了市场上的一个关键缺口。该平台对企业至关重要，为他们提供所需的可靠数据，以选择最符合其运营要求的解决方案”

该网站的主要功能包括深入评估每种模式在各种运营条件下的表现，让企业清楚地了解哪些模式提供了最佳的效率和价值。通过比较相对运行时间、提取准确度排名和分类准确度排名等指标，LLM基准网站允许用户评估并选择最适合他们需求的模型。该网站还包括基准测试方法的完整细节，供同行评审和评论。Indico将按季度运行基准。您可以在此处访问基准网站-https://indicodata.ai/llm/

关于Indico Data

Indico Data自动化了文档密集型行业（包括保险、金融服务和医疗保健）企业的关键工作流程。有了Indico Intelligent Intake™解决方案，组织可以将专家从繁琐的手动任务中解放出来，使他们能够用更好的数据做出更好的决策。参观https://indicodata.ai了解更多信息。

SOURCE标记数据