智能AI眼鏡OpenGlass的核心是基于樂鑫ESP32-S3的 Seeed Studio XIAO 開發(fā)板,集成了Wi-Fi和藍牙功能的高性能芯片。結合EEMB LP502030電池和3D打印的眼鏡架,構建出輕便且持久使用的智能眼鏡框架,硬件成本只需25美元。
OpenGlass的軟件部分則采用了Node.js和Expo開發(fā)的移動端應用,實現(xiàn)了與硬件的無縫交互,為用戶提供直觀易用的界面。后臺調(diào)用DeepSeek和OpenAI用于數(shù)據(jù)處理和智能識別,而Ollama的REST API用于語音轉文本功能。
OpenGlass?功能介紹
OpenGlass 智能眼鏡應用場景廣泛:
?? 生活記錄者: 隨時隨地記錄你的日常生活,重要時刻不再錯過。
?? 社交達人: 記住新朋友的名字,減少尷尬的忘記瞬間。
???戶外探險: 辨識野生動植物,增加旅行的樂趣。
?? 飲食健康:?計算食物卡路里
?? 語言翻譯:實時翻譯文字,跨國交流更無障礙。
???視覺輔助: 對視力受限的人來說,它可以讀取菜單或標簽上的文字。
?? 智能對話:?搭載了多種開源AI大模型( DeepSeek、OpenAI 、通義千問),通過對話角色自定義、海量知識庫、長期記憶、語音聲紋識別等功能,成為了一個真正“懂你”的AI助理。
OpenGlass 智能眼鏡項目優(yōu)勢如下:
低成本: 無需高昂費用,就能擁有智能眼鏡體驗。
可擴展性高: 開源設計允許開發(fā)者和愛好者添加更多功能。
安裝便捷: 易于組裝的硬件和清晰的軟件設置指南,任何人都可以嘗試。
社區(qū)支持: 加入Based Hardware Discord社區(qū),獲取幫助、分享經(jīng)驗,共同進步。
隱私優(yōu)先: 自主選擇是否自托管API服務,尊重并保護個人數(shù)據(jù)。
OpenGlass 硬件和軟件
OpenGlass 智能眼鏡基于?Seeed Studio XIAO (ESP32-S3)?Sense?開發(fā)套件,采用了樂鑫?ESP32-S3?芯片,支持 2.4 GHz Wi-Fi 和低功耗藍牙無線通信,主頻高達 240 MHz,芯片集成了高性能的 Xtensa? 32 位 LX7 雙核處理器、超低功耗協(xié)處理器、Wi-Fi 基帶、藍牙基帶、RF 模塊以及外設。
Seeed Studio XIAO?開發(fā)套件還配備了 OV2640 攝像頭傳感器,數(shù)字麥克風,8MB PSRAM,8MB Flash,支持電池充電,具有豐富接口,適合物聯(lián)網(wǎng),嵌入式機器學習領域。結合嵌入式 ML 計算能力和攝影能力,這款開發(fā)板可以成為您開始使用智能語音和視覺AI的絕佳工具。
供電采用 EEMB LP502030 3.7v 250mAH 電池,搭配上 3D 打印的結構外殼
OpenGlass 智能眼鏡開發(fā)環(huán)境為 Arduino IDE,并使用 Moondream (一個專在邊緣設備運行的小型的視覺語言模型)在 Ollama 平臺上進行圖像流的理解和處理。
1.克隆 OpenGlass 倉庫并安裝依賴項
git clone https://github.com/BasedHardware/openglass.git
cd openglass
npm install
2.在位于 keys.ts 文件中添加 Groq 和 OpenAI 的 API 密鑰
https://github.com/BasedHardware/OpenGlass/blob/main/sources/keys.ts
3.關于 Ollama 的倉庫自托管 REST API 鏈接如下:
https://github.com/ollama/ollama
4.打開終端并輸入以下命令
ollama pull moondream:1.8b-v2-fp16
5.啟動應用程序
npm start
OpenGlass項目源碼?
Github 完整項目資料獲?。篽ttps://github.com/BasedHardware/OpenGlass
如有需求,請加小編微信:? beacon0418