Vals AI已公开呼吁法律技术供应商参加其法律AI基准研究，包括即将对美国法律研究工具进行评估。
读者可能还记得，2月，Vals AI发行了首先，基准的基准研究法律AI工具。。 Vals Legal AI报告（VLAIR）是使用AM Law 100公司实现的现实世界任务，是针对律师控制小组独立基准对律师控制集团进行独立基准法律AI工具的首次系统尝试。
该报告不包括法律研究产品，但当时，Vals表示，它将发布一份针对法律研究基准测试的报告。
报告发布时，一些供应商说，他们尚未意识到这项研究，也没有机会参加。
作为回应，Vals现在正在伸出援手，以鼓励具有生成AI法律研究工具的公司以及未来的法律AI基准研究。
我们决定将法律研究与研究的其余部分分开，因为我们想确保我们有代表性的供应商参与，并且有足够多样化的问题，塔拉·沃特斯（Tara Waters），该研究的项目负责人在电子邮件中告诉我。我们正在律师事务所收集200个问答。和以前一样，我们将拥有人类的基准。
如何注册您的利息
想要评估其产品的公司是否在法律研究或未来研究中应完成供应商兴趣表。
Vals还邀请律师事务所，独奏从业人员和内部律师加入其基准联盟。有兴趣参加的律师事务所应填写律师事务所利益表。
沃特斯说，法律研究的基准测试将与以前的弗拉尔任务不同，因为律师集团和AI产品的回答都将由人类分级者评估。
她说，我们有法律图书馆员和独立律师审稿人的混合在一起。”评估将考虑到对回应的准确性，权威性和适当性，并进行了加权。”
水域也是背后的原则之一。 AI采用指数，就像我一样最近在这里报道了，目的是在律师事务所，内部法律部门和个人法律专业人员中开发AI采用的准确，整体和透明指数。
Vals Legal AI研究是与Legaltech Hub和包括Reed Smith，Fisher Phillips，McDermott Will＆Emery和Ogletree Deakins在内的律师事务所合作开发的。