> 自媒体 > (AI)人工智能 > 使用Python在Windows上使用Llama + Vicuna进行本地GPT
使用Python在Windows上使用Llama + Vicuna进行本地GPT
来源:茶桁
2023-05-03 19:18:48
515
管理

只需解压文件,进入您创建的文件夹即可。

HuggingFace

现在,在HuggingFace上,我们直接转到由eachadea提供的Vicuna存储库下载超过8GB的rev1文件。

Hugging Face – The AI community building the future.huggingface.co/eachadea/ggml-vicuna-13b-4bit/tree/main)。下载超过8GB的rev1文件。

这需要等待。去拿杯咖啡或者看会书吧。

准备开始

让我们把文件ggml-vicuna-13b-4bit-rev1.bin放在下载的其他羊驼文件所在的同一个文件夹中。

现在,我们创建一个新文件。创建一个文本文件并将其重命名为您想要的任何名称,例如start.bat。请注意,在创建批处理文件时,我们需要将.txt替换为.bat。

在文件中插入以下代码:

title llama.cpp:startmain -i --interactive-first -r "> Principal:" --temp 0 -c 2048 -n -1 --ignore-eos --repeat_penalty 1.2 --instruct -m ggml-vicuna-13b-4bit-rev1.binpausegoto start

非常重要的是第三行,您必须包括ggml-vicuna-13b-4bit-rev1.bin。 这是我们的应用程序用来更像GPT-3.5的文件。

完成了吗? 好,点击批处理文件。 命令提示符应该打开,您可以在屏幕上看到一些行,然后才能开始使用它。

然后你可以使用它。在我们尝试之前先打个招呼。让它写一个短小而血腥的僵尸恐怖故事。

可以正常工作。优秀。你不能在openAI的GPT上做到这一点。但是有一个问题:该应用程序需要至少10GB RAM,并且与chatGPT一样,它无法获取实时数据。如果您不知道如何将数据传输到模型中,则无法使用它来分析股票数据。

请注意,使用这些模型来作弊或制造和传播虚假言论是不道德的。它还可能损害AI的声誉,并减缓更先进的人工智能的进展。为了人类共同的利益,请善用它。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
AI创造“数字生命”?小伙用人工智能“复活”去世奶奶..
对于每个世人来说,生死都是不可避免的。不论是谁,自己的内心总会有一块..
Bing Chat新特性:格式化聊天内容、支持中文等语言生成图片..
IT之家 5 月 6 日消息,微软必应官方博客今天发布博文,介绍了两项新的功..
女孩聊天怎么打开话题,这样聊,让她非你不可
在生活中,相信很多兄弟都会遇到这样的情况,那就是和女生聊天聊着聊着就..
ChatGPT重大更新:实现双向互动「听、说、看」
从本质上讲,OpenAI正在为其聊天机器人赋予嘴巴和眼睛。据悉,OpenAI正在..
马斯克为什么呼吁暂停AI训练?ChatGPT回答...媒体:他反对的只是OpenAI和GP..
每经编辑:张锦河据生命未来研究所官网,3月22日,生命未来研究所(Futur..
这种“爆料吃瓜群”慎入!
恶意抹黑济南网安部门高度关注,立即会同属地分局开展侦查。经核实,该信..
据悉,苹果正在测试人工智能聊天机器人——关于苹果 GPT 的 5 件事..
虽然苹果在创建人工智能聊天机器人方面一直持谨慎态度,但这并不意味着它..
GPT催生具身智能机器人时代,机器人视觉迎来历史机遇|深度研报..
重点摘要:具身智能的时代已经到来。今年,ChatGPT的问世与持续进化,让..
吊打“绝望的文盲”,ChatGPT能为“流量”做什么?
2022年11月30日,美国人工智能研究实验室OpenAI推出人工智能技术驱动的自..
关于作者
御赐铲屎官..(普通会员)
文章
424
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40334 企业收录2981 印章生成191545 电子证书820 电子名片51 自媒体25086

@2022 All Rights Reserved 浙ICP备19035174号-7
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索