[开源项目] 基于WebGPU的免安装本地AI聊天机器人 (开发中) – 蓝点网
时间:2025-11-02 21:30:25 来源:苦尽甘来网
早前谷歌在 Google Chrome Canary 版里发布了 WebGPU 项目,开源该项目可以让开发者基于浏览器调用本机显卡算力。项目
所以在 GitHub 上有开源团队构建了 Web-LLM 项目,基于机器即基于 Web 的安装大型语言模型,一切都在浏览器内运行,本地不需要服务器支持、聊天蓝点不需要安装、人开直接利用 WebGPU 特性运行。发中
这个项目可以大幅度简化搭建 AI 聊天机器人的开源步骤,而且可以保护隐私,项目因为这个 AI 模型是基于机器 “你” 控制的,你提交的安装数据不会被共享给开发者进行模型训练。
这个项目还在开发中,本地有兴趣的聊天蓝点开发者可以参与该项目。
![[开源项目] 基于WebGPU的人开免安装本地AI聊天机器人 (开发中)](https://img.lancdn.com/landian/2023/04/98381.png)
当然由于是相当于在本地运行的,所以显卡性能至关重要,根据开源团队说明, 显存至少需要 6.4GB,所以如果你的显卡显存比较小的话可能无法运行。
必要条件:Google Chrome 113.0+、显存至少为 6.4GB,使用不同的模型显存要求可能还会增加。
项目地址:https://github.com/mlc-ai/web-llm
演示地址:https://mlc.ai/web-llm/#chat-demo
注:演示聊天使用的模型是 vicuna-7b-v0。
相关内容
- ·射击角色扮演足游保举 射击齐明星
- ·2023年全球电视出货量2.01亿台创十年新低,同比下降1.6%
- ·2024中国家电创新零售优秀案例:美团闪购,引领消费电子行业千亿新增量
- ·任天国Switch 7.0中文体系更新:删减分中发言挑选
- ·聚焦当下 探寻未来| CDEC高峰论坛圆满召开
- ·泪目!科比离世九个月 小女女赤足抱着照片喊爸爸
- ·《机器战警:暴戾皆会》表示劣良 中媒感慨2A游戏借有保存空间
- ·AI引领家居风尚,三星生活家电于AWE 2024呈现有爱的科技·艺术·家
- ·两只小懒熊买西瓜的故事
- ·《人间天国》新内容上线 英国第八个人军战德意志非洲军团现已插足游戏
- ·诺基亚9国止公布时候与代价暴光:拆载蔡司五摄
- ·洛图科技:苹果发布首款OLED智能平板的影响
- ·《赛博朋克2077》新情报内容曝光 支持多种语言
- ·足机购贵1.2倍退好价 京东11.11为消耗者挨制真正在型消耗体验 -
- ·海内秋季旅游最好天面
- ·小米8/魅族16/光枯10购哪个谁更好 林斌保举小米8
最新内容
推荐内容
