概述
兩者都使用檢索增強生成來根據自己的案例、法規和社論內容提供答案,並附有連結的引文。比較很重要,因為獨立測試發現這兩種工具都可能是錯誤的,因此在它們之間進行選擇取決於每個工具如何根據其答案以及它在您自己的測試問題上的表現如何。
深入探討
LexisNexis 的 Lexis+ AI 和湯森路透 Westlaw 的 AI 功能為美國兩大主要法律研究資料庫添加了生成式 AI。 LexisNexis 於 2023 年底推出了 Lexis+ AI 商業版,隨後添加了名為 Protégé 的個人化助理。湯森路透於 2023 年底在 Westlaw Precision 推出了人工智慧輔助研究。同年,它收購了 Casetext 及其 CoCounsel 助手,然後將其納入其產品線。兩者都依賴檢索增強生成(RAG)。系統不是根據語言模型記憶的內容來回答,而是搜尋供應商自己收集的案例、法規、法規和二手資料。它將找到的段落傳遞給模型,並要求它寫出引用這些段落的答案。每個供應商也利用自己的編輯資產:Westlaw:其摘要、West Key Number System 和 KeyCite,以及《實用法律》中的實踐內容; Lexis:其摘要和 Shepard 的摘要,以及 Lexis 實用指南中的練習內容。引文連結回來源文件,引用者訊號有助於表明權威是否仍然是良好的法律。接地可以減少編造的答案,但不能消除它們。史丹佛大學研究人員在 2024 年進行的一項研究發現,Lexis+ AI 和 Westlaw 的人工智慧輔助研究在大部分有意義的測試問題上都給出了錯誤或錯誤的答案。 Westlaw 的工具在該測試中更容易出錯,供應商對該方法的部分內容提出了爭議。更微妙的失敗是誤解:引用真實案例來支持它不支持的觀點。實際的結論是根據您自己的測試而不是行銷來選擇它們。從您的實踐領域提出一組您已經知道答案的問題。包括:特定管轄區的問題;法律最近的變化;建立在錯誤前提上的問題;以及控制機構模糊的問題。然後比較準確性、每個工具是否找到控制權威、檢查其引用的容易程度以及它如何處理不確定性。
現實世界的實施
一個訴訟小組透過兩個平台運行相同的 30 個特定司法管轄區的研究問題,並給出律師已經知道的答案,並對準確性以及每個工具是否找到控制機構進行評分。
律師向每個工具詢問一個建立在錯誤前提(例如已廢除的法規)基礎上的問題,看看它是否糾正了前提或回答得好像它是正確的一樣。
同事僅將產生的研究備忘錄作為起點。她打開每個被引用的案例,閱讀相關段落並在依賴它之前檢查其引用者標誌。
律師事務所圖書館員比較了每個平台顯示答案背後來源的難易度,這會影響律師檢查輸出的時間。
Lexis+ AI 與 Westlaw AI 的未來
兩家公司都在轉向多步驟、代理式的研究,規劃查詢、閱讀大量文件並起草備忘錄。他們還將研究與文件起草和公司內部知識更緊密地聯繫起來。這些功能使檢查變得更加重要,而不是更少,因為較長的輸出包含更多需要驗證的聲明。法律研究人工智慧的獨立基準仍在開發中,因此公司將繼續依賴自己的測試集。定價和捆綁銷售可能會像品質一樣影響採用率。隨著規模較小的合法人工智慧公司和通用助理增加研究功能,市場也可能發生變化。
付諸實踐
為什麼這很重要
- 供應商策略. 供應商路線圖會影響您的團隊接下來可以建立的功能。
- 成本與預算. 商業條款和部署選項會影響長期成本和風險。
- 風險與安全. 公司激勵措施塑造了產品預設、安全態勢和開放性。
留意
- 發佈公告可能會超過實際生產工作流程的穩定性。
- API 定價或政策轉變可能會在一夜之間打破假設。
- 單一供應商依賴性增加了鎖定和遷移成本。
後續步驟
- 使用您自己的任務和資料集評估提供者。
- 在整合之前查看隱私、安全和法律條款。
- 維護跨模型或供應商的後備計劃。
- 監控發行說明,以便路線圖的變更不會讓團隊感到意外。
不斷探索
常見問題
什麼是 Lexis+ AI 與 Westlaw AI?
LexisNexis 的 Lexis+ AI 和湯森路透 Westlaw 的 AI 功能(包括 AI 輔助研究和 CoCounsel)將生成式 AI 加入到美國兩個最大的法律研究資料庫中。兩者都使用檢索增強生成來根據自己的案例、法規和社論內容提供答案,並附有連結的引文。比較很重要,因為獨立測試發現這兩種工具都可能是錯誤的,因此在它們之間進行選擇取決於每個工具如何根據其答案以及它在您自己的測試問題上的表現如何。
Lexis+ AI 和 Westlaw 的人工智慧研究功能都使用什麼技術來得出答案?
這兩個系統都會搜尋自己的案例、法規和二手資料,然後讓語言模型寫出引用所發現內容的答案。
在法律研究人工智慧中,什麼是誤解?
誤解比編造案件更微妙。權威是真實的,但其附帶的主張是錯誤的。
2024 年史丹佛大學的研究對 Lexis+ AI 和 Westlaw 的人工智慧輔助研究有何發現?
研究發現這兩種產品都存在錯誤,在該測試中,Westlaw 的工具更常見。供應商對該方法的部分內容有爭議。
該指南將哪些編輯資產與 Westlaw 而不是 Lexis 相關聯?
KeyCite 和關鍵號碼系統是湯森路透的資產。 Shepard、Lexis 的摘要和實用指南均屬於 LexisNexis。
為什麼指南建議在測試集中包含錯誤前提問題?
一個好的研究工具應該注意到並糾正錯誤的前提,例如廢除的法規,而不是在此基礎上建構答案。