> 自媒体 > (AI)人工智能 > 北大开源首个中文法律大模型——ChatLaw
北大开源首个中文法律大模型——ChatLaw
来源:AIGC开放社区
2023-07-21 14:29:53
382
管理

随着ChatGPT的火爆出圈,为大语言模型的场景化落地提供了肥沃的土壤。目前,医疗、教育、金融领域已逐渐有了各自的模型,但法律领域相关的产品却不是很多。

因此,北大团队开源了中文法律大模型,并针对大语言模型和知识库的结合问题给出了法律场景下合理的解决方案。

目前,ChatLaw法律大模型提供ChatLaw-13B、ChatLaw-33B和ChatLaw-Text2Vec三个版本,底座为姜子牙-13B、Anima-33B。使用了大量法律新闻、法律论坛、法条、司法解释、法律咨询、法考题、判决文书等原始文本来构造对话数据。

开源地址:https://github.com/PKU-YuanGroup/ChatLaw

在线测试:https://chatlaw.cloud/lawchat/#/

论文:https://arxiv.org/pdf/2306.16092.pdf

得到以下结论:

(1)引入法律相关的问答和法规条文的数据,能在一定程度上提升模型在选择题上的表现。

(2)加入特定类型任务的数据进行训练,模型在该类任务上的表现会明显提升。例如ChatLaw模型之所以能胜过GPT-4,是因为使用了大量选择题作为训练数据;

(3)法律选择题需要进行复杂的逻辑推理,因此,参数量更大的模型通常表现更优。

未来发展计划

提升逻辑推理能力,训练30B以上的中文模型底座:在ChatLaw的迭代过程中,发现和医疗、教育、金融等垂直领域不同的是,法律场景的真实问答通常涉及很复杂的逻辑推理,这要求模型自身有很强的逻辑能力,预计只有模型参数量达到30B以上才可以。

安全可信,减少幻觉:法律是一个严肃的场景,我们在优化模型回复内容的法条、司法解释的准确性上做了很多努力,现在的ChatLaw和向量库结合的方式还可以进一步优化,另外和ChatExcel团队师兄深度结合,在学术领域研究LLM的幻觉问题,预计两个月后会有突破性进展,从而大幅减轻幻觉现象。

私有数据模型:一方面会继续扩大模型的基础法律能力,另一方面会探索B/G端的定制化私有需求。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
生信麻瓜的 ChatGPT 4.0 初体验
ChatGPT 4.0 体验感想偷个懒,用ChatGPT 帮我写段生物信息代码代码看不懂..
免费GPT-4聊天机器人惹上麻烦,OpenAI威胁将起诉其开发者..
IT之家 5 月 3 日消息,GPT-4 是 OpenAI 为聊天机器人 ChatGPT 发布的语..
罗永浩退出聊天宝股东,这是一件好事!
据企查查最新数据显示,今年 2 月,罗永浩退出天津云上漫步科技合伙企业..
中大教授直播出轨:10分钟约3个女生出来开房,不雅聊天记录曝光..
中山大学海洋科学学院教师王晓玮因其在线上授课期间直播婚外情的不当行为..
\u0026#34;聊天机器人大比拼:ChatGPT、通义千问和文言一心谁更胜一筹?\u0..
在当前的人工智能领域,聊天机器人技术的发展正变得越来越成熟。目前市场..
OpenAI思路巨变?报道称Altman想让ChatGPT成为“超级助理”,跟微软和其他..
OpenAI和微软间本就“裂痕”初现,而现在两者间竞争正越发激烈,“相爱相..
变身AI浏览器!Opera最新版已集成ChatGPT,快来看看如何使用吧!..
微软在最新版的Edge浏览器中集成了基于 GPT-4 的聊天机器人,而在今天Ope..
OpenAI 暂停测试 Browse with Bing 功能
今天是2023年7月5日,距离全年结束还有179天。1989年7月5日,我国建造的第..
前沿科技:用我与ChatGPT的对话来说明,工业4.0即将到来..
ChatGPT一经推出便迅速火爆全球,仅仅5天注册数量就超过百万,至2023年1..
关于作者
般若鱼(普通会员)
文章
332
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40329 企业收录2981 印章生成185668 电子证书789 电子名片49 自媒体20350

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索