当前位置:首页 >艺术浪潮 > 正文

U的地A点网器人开开发装本中I聊 蓝天机 基源项于W目免安

2026-10-04 07:46:14艺术浪潮
不需要安装 、开源所以如果你的项目显卡显存比较小的话可能无法运行 。

必要条件:Google Chrome 113.0+  、基于机器因为这个 AI 模型是安装 “你” 控制的 ,使用不同的本地模型显存要求可能还会增加 。该项目可以让开发者基于浏览器调用本机显卡算力  。聊天蓝点

项目地址 :https://github.com/mlc-ai/web-llm

演示地址 :https://mlc.ai/web-llm/#chat-demo

注:演示聊天使用的人开模型是 vicuna-7b-v0 。

[开源项目] 基于WebGPU的发中免安装本地AI聊天机器人 (开发中)

当然由于是相当于在本地运行的 ,显存至少为 6.4GB ,开源直接利用 WebGPU 特性运行 。项目

这个项目还在开发中 ,基于机器一切都在浏览器内运行,安装而且可以保护隐私 ,本地即基于 Web 的聊天蓝点大型语言模型 ,

人开 显存至少需要 6.4GB  ,你提交的数据不会被共享给开发者进行模型训练。根据开源团队说明 ,

早前谷歌在 Google Chrome Canary 版里发布了 WebGPU 项目 ,

所以在 GitHub 上有开源团队构建了 Web-LLM 项目,有兴趣的开发者可以参与该项目 。不需要服务器支持、

这个项目可以大幅度简化搭建 AI 聊天机器人的步骤,所以显卡性能至关重要  ,

最近关注

友情链接