Vectara发布基于升级版Hughes幻觉评估模型的事实一致性评分,以提高生成式人工智能响应的透明度

2024年04月01日 22:37:44

打印 放大 缩小

Vectara在其无服务器RAGaaS平台上推出了由其广受欢迎的开源Hughes幻觉评估模型提供支持的事实一致性评分,这一业内首创通过提供详细的准确性和幻觉评估,提高了人工智能响应的透明度和用户控制能力。

加州帕罗奥多--(美国商业资讯)--广受信赖的生成式人工智能产品平台Vectara宣布为所有生成式响应加入基于开创性Hughes幻觉评估模型(HHEM)进化版本的事实一致性评分(FCS),HHEM是Hugging Face上排名第一的幻觉评估模型,自去年11月发布以来已获得超过10万次的下载量。与之相关的大模型幻觉率排行榜现已成为大型语言模型(LLM)衡量其平均事实一致性的行业标准。Vectara的端到端检索增强生成即服务(RAGaaS)平台作为行业首创,通过提供实时端到端RAG可观察性,为生成式人工智能响应透明度设定了新标准。这一创新指标为Vectara RAGaaS平台内汇总响应的事实一致性提供了前所未有的可见性,使用户能够根据详细的准确性评分设置个性化的响应可接受度阈值。

市场上LLM的平均幻觉率从3%至16.2%不等,其响应中存在的未知不准确性风险仍是一个主要问题,阻碍了这一强大技术在企业中的广泛应用。Vectara通过提供事实一致性评分,对生成的响应是否是幻觉的可能性进行评分,从而为企业降低了这种不确定性。只有采用标准化、科学计算的方法对响应进行分级,企业才能负责任地将生成式人工智能引入到关键业务应用中。用户能够根据详细的准确性评分设置响应可接受度阈值,从而使产品团队能够根据自己的偏好灵活处理这些信息。

Vectara的事实一致性评分是生成式人工智能的开创性工具,为实时幻觉检测设定了新基准,并具有卓越的性能、可负担性和速度,标志着在信任方面的重大飞跃。其高效性和有效性使企业能够将生成式人工智能部署到关键产品用例中,而不必担心幻觉响应可能导致的责任风险。

Vectara的事实一致性评分使开发人员有能力完善和增强从内部问答系统到与终端消费者的互动质量等各种应用。该评分的优势在于其校准性,使其可直接解释为概率,例如,0.98分表示事实一致性概率为98%。这与许多当代的机器学习分类器形成了鲜明对比,后者无视校准,从而牺牲了清晰度和直接可解释性。

Yobi应用程序创始人兼首席执行官Ahmed Reza表示:“将Vectara的事实一致性评分整合至Yobi应用程序中,将彻底改变我们处理人工智能透明度和准确性的业务用例。通过保证我们平台所提供答案的可见性和问责制,我们将坚守提供企业可信赖的负责任人工智能的承诺。作为Vectara的联合创新合作伙伴,我们很高兴看到如此先进的技术直接融入Vectara平台。”

先进的HHEM为事实一致性评分提供了比之前发布的开源版本更强的可视性,具有更高的准确性和更广泛的语言支持。该方案是Vectara致力于提高透明度和控制力的一部分,使企业能够自主有效地管理人工智能响应。

Vectara联合创始人兼首席执行官Amr Awadallah表示:“正如我们在早期率先采用RAG来提高生成内容的相关性和质量一样,我们再次站在了负责任人工智能的最前沿,完全公开我们为降低生成式人工智能中的幻觉所做出的努力。通过让客户能够实时访问事实一致性评分,我们不仅建立了信任,而且还移交了控制权,帮助他们在如何利用RAGaaS平台生成的响应这一问题上做出明智的决策。”

关于Vectara

Vectara是一个端到端平台,可将强大的生成式人工智能功能嵌入到应用程序中,从而取得非凡成果。Vectara作为端到端检索增强生成(RAG)平台,能够通过安全可靠的可信入口点,提供通往正确答案/行动的最短路径。Vectara从未利用客户数据训练其模型,因此企业在嵌入生成式人工智能功能时无需担忧数据和隐私侵权风险。如需了解更多信息,请访问vectara.com

免责声明:本公告之原文版本乃官方授权版本。译文仅供方便了解之用,烦请参照原文,原文版本乃唯一具法律效力之版本。

在 businesswire.com 上查看源版本新闻稿: https://www.businesswire.com/news/home/20240326032671/zh-CN/

CONTACT:

Carly Bourne
carly@bulleitgroup.com
423-443-0449 

责任编辑:admin

相关阅读

天涯网友:時間不會等待
评论:“高富帅官二代”这六个字,我想我只做到了第五个字。

腾讯网友:情歌两三首ㄨ
评论:当今社会一瞥:男人女人化;女人小孩化;小孩宠物化;宠物贵族化;贵族痞子化;痞子玩文化;文化商业化。

淘宝网友:怀念旧时光°
评论:赚钱像接露水那么辛苦,花钱却像流水那么迅速

猫扑网友:゛风骚, - /ov3
评论:真正能阻止离婚的婚姻法是:离婚后房子归国家!

其它网友:強顏歡笑ソ
评论:令我感到骄傲和自豪的是,至今为止,地球仍被我踩在脚下。

百度网友:迷°Corrid丶
评论:世界上最遥远的距离,莫过于周一到周五。

搜狐网友:Bus 站台的女孩■
评论:在身材这个问题上,我是坚决不会承认自己是一个粗人的。

网易网友:春暖々花開
评论:现代女生三从四得,三从:从不温柔,从不体贴,从不讲理;四得:惹不得,说不得,骂不得,打不得。

本网网友:为了她放弃她
评论:> 我说:要有上班以外的生活!于是,老婆告诉我这个可以有、于是:我有了加班!

天猫网友:凝固旳悲伤※
评论:当有人装B的时候、哥总是低下头。不是哥感到羞愧、而是哥在找砖头.