2025-05-04 21:22:29 | 来源: AICG工具箱
我最近,对小尺寸AI大模型比较感兴趣。
之前国内外科技公司在大模型领域,一般是不断增加模型参数来增强模型能力,从7亿、13亿、70亿甚至200亿以上,确实越来越强,但这也会让大家自己家的电脑基本跑不动。
近期,微软发布了只有2.7亿参数的Phi-2大模型;12月初,阿里也发布了只有1.8亿参数的通义千问超迷你大模型。
这些小尺寸的大模型,不但在性能评测上,超过了一些7亿甚至13亿参数的大模型,而且因为尺寸小,基本都可以在3G以下显存甚至CPU模式下快速运行,这样一来,5年前的老电脑也可以玩了。今天分享一个通义千问1.8B超迷你大模型的懒人包,赶快随我去看看吧~
Qwen系列,现在包括Qwen基础语言模型,即Qwen-1.8B,Qwen-7B,Qwen-14B和Qwen-72B。以及Qwen-Chat聊天模型,即Qwen-1.8B -聊天、Qwen-7B-聊天、Qwen-14B-聊天和Qwen-72B-聊天。
Qwen大模型拥有强大的基础语言模型,针对多达 3 万亿个 token 的多语言数据进行了稳定的预训练,覆盖领域、语言(重点是中文和英文)等,能够实现有竞争力的基准数据集上的性能。此外,还有基于SFT和RLHF(尚未发布)的符合人类偏好的聊天模型,能够聊天、创建内容、提取信息、总结、翻译、编码、解决数学问题等,并且能够使用工具,扮演代理,甚至扮演代码解释器等。
而今天介绍的Qwen-1.8B大模型,只需要2.9GB的显存即可运行,换句话说5年前的显卡都可以玩,赶紧下载懒人包,在本地拥有一个AI助手吧~
老规矩,大家自行在本地部署比较麻烦,已经为球友大家制作好了一款离线整合包了,下载到本地解压即用。
大家下载解压到本地。
①双击“一键启动-Qwen_1.8B.exe”。
②双击一键启动程序后,会打开一个命令提示窗口,项目会自动运行。加载成功后,请自行复制以下网址在浏览器打开“ http://127.0.0.1:8000/”。
③打开链接后,可以看到Qwen-1.8B大模型可视化聊天主界面:
界面我已经为大家汉化好了~使用非常简单,可以说是10秒上手:
输入提示词:在“input”区域,直接输入提示词
发送:点击“Submit(发送)”按钮
等待片刻,即可得到通义千问1.8B大模型给你的回复了:
从我自己的体验来看,反应非常迅速,回答也比较靠谱,大家可以自行去尝试一下~
注意事项:
①该项目建议使用英伟达显卡运行,只需要3G显存,CPU也能运行,但偏慢
②请确保安装路径不包含中文,不然可能会引起奇怪的适配问题
今天就聊到这了,我是Glen,感谢你看我的文章,欢迎大家继续支持我,请
点击作者的头像,然后扫码关注我的公众号,并回复【Qwen-1.8B】,免费获得本文资源~
热门榜单
星火绘镜
常用AI万相营造
常用AI摩笔马良
常用AI美图设计室
常用AI秘塔AI搜索
常用AI快影
常用AI旷视 AI 情绪识别
常用AIValideo,亚马逊购物助手
常用AIVisual Electric
常用AI热门资讯
国产最强文生视频模型「可灵」首发:直出2分钟超长视频,生成质量完胜OpenAI Sora丨免费体验
02-25商汤全新AI绘图大模型“秒画Artist”v0.3.5版本上手测评:作画水平比肩Midjourney!划重点——免费
12-31stable diffusion初识_stable diffusion跟其他工具有什么区别]
01-17有什么方式可以运行stable diffusion_怎么用Docker容器运行 SD
01-24ChatGPT Plus会员怎么付费_如何升级ChatGPT Plus会员
01-26MJ怎么批量出图_怎么用MJ批量生图
01-27中文多模态大模型SuperCLUE-V榜单发布丨Stability AI推出Stable Fast 3D模型丨Meta AI向好莱坞明星采买声音授权
02-11微软推出首个AI天气预报系统Aurora,比传统的数值天气预报模型快5000倍
02-25字节跳动发布豆包视频生成模型,这效果让我分不清AI虚拟与现实的边界
12-25WPS AI表格教程丨Excel办公软件函数公式怎么使用_WPS AI表格公式快速生成!
01-15