sign/translate

解決的問題

本專案解決手語使用者與口語使用者之間的溝通落差，提供手語與口語／書面語之間的即時雙向翻譯。

運作方式

此系統透過兩個主要流程運作：

1. 手語生成（口語轉手語）： 將語音或文字轉換為標準化文字，再轉換為SignWriting，最後生成姿態序列。這些序列透過骨架檢視器、3D角色或Human GAN進行渲染。
2. 手語翻譯（手語轉口語）： 透過上傳或即時攝影機處理手語影片，經過分割與SignWriting轉換，產生口語文字與音訊。

目標使用者

專為使用手語與使用口語的人設計，可在桌面與行動裝置平台上實現無縫溝通。

主要特色

• 即時翻譯功能。
• 雙向支援（口語轉手語與手語轉口語）。
• 多種輸出格式，包括3D角色與Human GAN。
• 支援即時攝影機串流與上傳的影片。