欧美日本国产-欧美日本国产在线观看-欧美日本韩国中文字幕-欧美日本精品一区二区-欧美日本精品在线-欧美日本免-欧美日本亚洲一级-欧美日本亚洲一站二站

早前谷歌在 Google Chrome Canary 版里發(fā)布了 WebGPU 項目，開源該項目可以讓開發(fā)者基于瀏覽器調(diào)用本機顯卡算力。項目

所以在 GitHub 上有開源團隊構建了 Web-LLM 項目，基于機器即基于 Web 的安裝大型語言模型，一切都在瀏覽器內(nèi)運行，本地不需要服務器支持、聊天藍點不需要安裝、人開直接利用 WebGPU 特性運行。發(fā)中

這個項目可以大幅度簡化搭建 AI 聊天機器人的開源步驟，而且可以保護隱私，項目因為這個 AI 模型是基于機器 “你” 控制的，你提交的安裝數(shù)據(jù)不會被共享給開發(fā)者進行模型訓練。

這個項目還在開發(fā)中，本地有興趣的聊天藍點開發(fā)者可以參與該項目。

當然由于是相當于在本地運行的，所以顯卡性能至關重要，根據(jù)開源團隊說明， 顯存至少需要 6.4GB，所以如果你的顯卡顯存比較小的話可能無法運行。

必要條件：Google Chrome 113.0+、顯存至少為 6.4GB，使用不同的模型顯存要求可能還會增加。

項目地址：https://github.com/mlc-ai/web-llm

演示地址：https://mlc.ai/web-llm/#chat-demo

注：演示聊天使用的模型是 vicuna-7b-v0。