> 自媒体 > (AI)人工智能 > 北大开源首个中文法律大模型——ChatLaw
北大开源首个中文法律大模型——ChatLaw
来源:AIGC开放社区
2023-07-21 14:29:53
559
管理

随着ChatGPT的火爆出圈,为大语言模型的场景化落地提供了肥沃的土壤。目前,医疗、教育、金融领域已逐渐有了各自的模型,但法律领域相关的产品却不是很多。

因此,北大团队开源了中文法律大模型,并针对大语言模型和知识库的结合问题给出了法律场景下合理的解决方案。

目前,ChatLaw法律大模型提供ChatLaw-13B、ChatLaw-33B和ChatLaw-Text2Vec三个版本,底座为姜子牙-13B、Anima-33B。使用了大量法律新闻、法律论坛、法条、司法解释、法律咨询、法考题、判决文书等原始文本来构造对话数据。

开源地址:https://github.com/PKU-YuanGroup/ChatLaw

在线测试:https://chatlaw.cloud/lawchat/#/

论文:https://arxiv.org/pdf/2306.16092.pdf

得到以下结论:

(1)引入法律相关的问答和法规条文的数据,能在一定程度上提升模型在选择题上的表现。

(2)加入特定类型任务的数据进行训练,模型在该类任务上的表现会明显提升。例如ChatLaw模型之所以能胜过GPT-4,是因为使用了大量选择题作为训练数据;

(3)法律选择题需要进行复杂的逻辑推理,因此,参数量更大的模型通常表现更优。

未来发展计划

提升逻辑推理能力,训练30B以上的中文模型底座:在ChatLaw的迭代过程中,发现和医疗、教育、金融等垂直领域不同的是,法律场景的真实问答通常涉及很复杂的逻辑推理,这要求模型自身有很强的逻辑能力,预计只有模型参数量达到30B以上才可以。

安全可信,减少幻觉:法律是一个严肃的场景,我们在优化模型回复内容的法条、司法解释的准确性上做了很多努力,现在的ChatLaw和向量库结合的方式还可以进一步优化,另外和ChatExcel团队师兄深度结合,在学术领域研究LLM的幻觉问题,预计两个月后会有突破性进展,从而大幅减轻幻觉现象。

私有数据模型:一方面会继续扩大模型的基础法律能力,另一方面会探索B/G端的定制化私有需求。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
AI觉醒前夜的预言:ChatGPT也许是个“坏主意”|共读时刻..
签署这封公开信的,包括三大AI巨头的CEO,即ChatGPT老板、OpenAI的山姆·..
拆解ChatGPT隐私政策:还有哪些合规风险?
《隐私政策》在开篇及第9部分(“International users”)中明确了自己作..
人工智能初创公司 SambaNova 推出专为更高质量 AI 设计的新芯片:可运行比 ..
站长之家(ChinaZ.com) 9月20日消息:人工智能芯片初创公司 SambaNova Syst..
GPT-4被投诉要求禁用:FTC发布人工智能标准,OpenAI一个都不满足..
机器之心报道编辑:陈萍、小舟一场围绕「GPT-4安全性」的论战正在如火如..
从全球爆火到被多国“围堵”,ChatGPT碰了什么红线?
从全球爆火到被多国“围堵”,ChatGPT只用了两个月的时间。据外媒报道,..
ChatGPT 落入大学生之手,6 个月后实现月收入 45 万元,代价:挂科两门!..
整理 | 屠敏出品 | CSDN(ID:CSDNnews)ChatGPT 浪潮来袭,大厂们正在紧..
七条法则,让你学会高情商的聊天方式
一个会说话的人,他们的情商必然不会很低。我们每个人跟别人交往,不外乎..
谷歌推出AI聊天机器人Bard,这是对ChatGPT的挑战还是致敬?..
AI聊天机器人是近年来人工智能领域的热门话题,各大科技公司都在争相推出..
当中国遇上ChatGPT 外行看着很热闹 内行方知复刻难(2)..
■廖木兴/图仅少数几家科技巨头具备大模型训练能力,但从长远看将推动AI..
关于作者
般若鱼(普通会员)
文章
587
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40369 企业收录2981 印章生成216707 电子证书945 电子名片57 自媒体34015

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索