軟體代表作/有聲有伴

有聲有伴

為台灣高齡使用者打造的 AI 語音陪伴 App。

客戶
喜歡音樂
領域
消費性 App・高齡
合作形式
開發委託
角色
iOS 核心工程主導、後端共同主導
期間
2026
狀態
已上架 App Store(台灣)

實際操作

有聲有伴 40 秒示範影片:對嘴聊天、聊天找歌、一鍵收聽、聊天日記與長期記憶

起點

長輩一開口,就要有人回應。

喜歡音樂想為台灣的長輩做一個 24 小時的陪伴:會說話的虛擬人,陪長輩聊天、記下生活、找回以前愛聽的歌。使用者鎖定長者,打字不便,介面要大字、單指就能用,所有操作都要能用說的完成。

範圍

  • iOS 原生 App(SwiftUI)的設計與開發
  • 與合作工程師共同設計後端的雙平面架構
  • 參考實作:對話 (ChatGPT)、語音合成(TTS)與對嘴(LipSync)、長期記憶、推歌
  • 陽明交大腦連結實驗室合作團隊的技術主導與時程
  • 需搭配喜歡音樂的虛擬藝人人格設定與形象

難題

聲音一斷,陪伴就斷了。

  1. A
    不靠打字也能用

    所有功能都要能用說的完成:按住說話、大字、單指,按錯也能回復。

  2. B
    聲音與嘴型要同步,網路差也不能斷

    長回覆播到中後段會卡頓;實機測試找出根因在網路路徑(影像與聲音擠在同一條連線),不在生成速度。

  3. C
    繁體中文發音與冷啟動

    語音模型對繁體字讀音不穩、長句會被截斷,閒置後的第一句也特別慢。

做法

先做出能跑的參考實作,再拆成正式的 App 與後端。

先以參考實作逐項驗證語音合成、即時對嘴、長期記憶與推歌,再拆成正式的 iOS App 與雙平面後端:雲端控制平面負責身分、對話、記憶與推薦,自有 GPU 媒體節點負責語音與對嘴。

2026 年 6 月 23 日,7 個參考元件經會議選定為合作團隊整合主線的基礎;其後排定外部測試、送審到上架的時程。

iOS 端以聲音優先:網路變差時影像可以讓步,聲音不中斷;內建診斷紀錄,問題可以一鍵回報。聊到想聽的歌,一鍵打開 YouTube、Spotify 或 Apple Music。

對話品質用自動化迴圈調校:腳本化的使用者角色和 Anor 對談,由語言模型評分,連續兩輪通過才算數。iOS 端累積 845 個單元測試,每次提交都由 CI 建置與測試;開發全程與 AI 代理協作。

上架前把隱私與安全做齊:第三方 AI 使用前的同意畫面、長按檢舉 Anor 的回覆、隱私清單,以及帳號刪除的端對端驗證。

對話指派節點聲音優先ON DEVICE裝置端語音辨識在手機上完成,錄音不上傳CLIENTiOS App(SwiftUI)按住說話・大字單指CONTROL PLANE雲端控制平面身分・對話・記憶・推薦MEDIA PLANE自有 GPU 媒體節點語音合成・唇形推論LLMOpenAI GPT-5生成回覆、工具呼叫MUSIC音樂平台連結YouTube・Spotify・Apple Music

← 左右滑動查看完整系統圖 →

控制與資料語音與嘴型串流(影像可降級,聲音不斷)節點指派與健康巡檢

規格與架構決策先行TDD實機與 TestFlight 驗證CI 把關不可變版本部署可回滾

架構決策

聲音是主角,影像可以讓步。

  1. 系統分工原本單一伺服器在同一台 GPU 機器上跑全部決策雲端控制平面與自有 GPU 媒體平面分開,同一份程式碼依角色部署確保GPU 節點不持有個資、不碰資料庫
  2. 媒體傳輸原本聲音與影像共用一條連線決策聲音與影像各走一條 WebSocket,由雲端簽發短效通行證確保網路壅塞時只犧牲影像,聲音不中斷
  3. 客戶端平台原本網頁殼加伺服器端語音辨識決策原生 Swift App,只用裝置端語音辨識確保麥克風、通話與耳機切換都穩定
  4. 回覆時序原本文字與語音同步出現,要等 3–5 秒決策文字先出,語音從第一句開始播確保開口後很快就有回應,首字語音中位數約 200 毫秒
  5. 繁體中文發音原本逐詞替換的字典決策送語音合成前先做繁簡字元正規化,字典留作安全網確保一次修好一整類誤讀,不必逐詞補

專案時程

2026.08

有聲有伴 1.0 版上架 App Store(台灣)

2026 年 3 月啟動;8 月 28 日更新 1.1 版

出處 +
2026 年 3 月2026 年 8 月4 月5 月6 月7 月12345
  1. 12026 年 3 月專案規劃書定稿,參考實作開工
  2. 22026 年 4 月即時對嘴架構定案,決定改做原生 iOS App
  3. 32026 年 6 月參考元件選為合作團隊整合主線
  4. 42026 年 7 月正式命名「有聲有伴」;TestFlight 迭代延遲與對嘴,完成送審準備
  5. 52026 年 8 月App Store 1.0 上架(台灣,免費),月底更新 1.1:三平台播放與找歌改版

成果

長輩開口說話,Anor 用聲音和表情回應。

2026.08上架

App Store(台灣),免費下載

8 月 14 日 1.0 版、8 月 28 日 1.1 版;與陽明交大腦連結實驗室合作團隊共同完成

3個音樂平台

聊到想聽的歌,一鍵打開

YouTube、Spotify、Apple Music;喜歡的歌可以收藏

  • 2026 年 8 月於台灣上線,免費下載;同月更新 1.1 版。
  • 所有功能都能用說的完成。
  • 每天的聊天自動寫成日記,附 AI 水彩封面;Anor 記得的事,使用者都看得到、也能刪除。
  • 聊到想聽的歌,一鍵打開 YouTube、Spotify 或 Apple Music,並可收藏。
  • 網路變差時自動以聲音優先,長輩聽到的話不中斷。
  • 與陽明交大腦連結實驗室合作團隊共同完成。
有聲有伴 App Store 官方截圖:全螢幕虛擬人對話

技術

SwiftUI、TypeScript、OpenAI GPT-5。

iOS App
SwiftUI・Swift・裝置端語音辨識
後端
TypeScript(Fastify)雙平面:雲端控制平面+自有 GPU 媒體節點
語言模型
OpenAI GPT-5
語音與對嘴
自架語音合成與唇形推論引擎・WebSocket 串流
資料
Supabase
交付
TDD・845 個 XCTest・GitHub Actions CI・不可變版本・可回滾部署
隱私
語音辨識在手機上完成,錄音不上傳;App 不含追蹤套件;使用前同意、可檢舉回覆、可刪除帳號與記憶
工程備註

iOS 200 / 305 commits(2026-07-01 至 08-06,約 66%)後端共同主導 104 / 271 commits750+ 項 iOS 單元測試(上架前稽核)7 個參考元件選為主線整合基礎(2026-06-23)

更多案例