requestId:68ab42192d0b77.94763477.
原標題：中新健康|復旦大學團隊研發AI大模型 助視障者“看見”世界
中新網上海3月2日電 (記者 陳靜)只需一枚攝像頭和一對耳機，畫面能夠被轉包養app化成語言，描繪場景、提示風險，讓視障者出行臺灣包養網更安全、生活更便捷……記者2日獲悉，在復旦大學自然語言處理實驗室(FudanNLP)師生的努力下，基于多模態大模型“復旦·眸思”(MouSi)為視障者量身打造的“聽見世界”APP上線，將成為視障人士的生活助手與智能管家。
2023年上半年，復旦大學自然語言處理實驗室發布了開發MOSS對話式大型語言模型，被稱為中國版的GPT，僅用半年時間多模態模型“眸思”問世。據介紹，“眸思”和基于文本的MOSS不同，它能夠理包養解并識別圖片內容，致力于成為視障者的一雙“眸”。包養
基于“眸思”，包養網站“聽見世界”APP包養合約為視障者日常生活需求量身打造街道行走模式、自由問答模式和尋物模包養網式。在街道行走模式中，“眸思”如一位忠實的向導。紅綠燈、十字路口包養網包養、障礙物……它能細致掃描道路情況，提示潛在風險，陪伴視障者安全通行“看不包養網比較見”的漫漫長路。
在自由問答模式中，“眸思”則像一位貼心的朋友，走進博物館、藝術館、公園……捕捉四周景象短期包養的每個細節，用聲音構建豐富的生活場景，傳遞每一處日常之美包養。在尋物模式中，包養網“眸思”將成為一名可靠的管家，被移動過的手杖包養、最愛口味的牛奶……它可以讓視障人士找尋包養女人日常物件變得輕包養金額松。
復旦大學自然語言處理實驗室張奇教授說：“人工智能發展日新月包養俱樂部異，科技應該要改變更多人的生活，希望‘眸思’能夠幫助視障人士走出家門，讓他們可以嘗試更多工作，為人生書寫更多可能。”據介紹，該項目的主導者都是“初出茅廬”的學生們，在組內頭腦風暴會上，年輕學子總能提出開創性想法，能夠找到另辟蹊徑的解決辦法。包養網
自去年包養感情9月以來，復旦大學自然語言處理實驗室圍繞GPT4-v復現多模態大模型，對核心關鍵點開展研究，希望提升單項任務的準確率和強化大包養行情模型的學習。為了更好地感受視障者的難包養合約處，團隊成員模擬真實情包養境，蒙眼探索視障者“黑暗”世界。他們邀請視障人士加入，進一步摸清真實而具體的需求。
在基于幾億張短期包養圖片訓練出“眸思”大模型基礎上，針對視障者提出的各類需求，團隊又用上萬張圖片進行特殊樣本訓練，使“眸思”具備能夠適配更多場景的能力。據透露，今年上半年，團隊將結合AR升級APP包養甜心網內的定位精度細化至亞米級別。下半年，團隊希望將“眸思”升級為基于視頻的判斷。目前包養，更包養網推薦多模式正在開甜心寶貝包養網發中，比如，閱讀模式、解說模式包養網等。
據了解，團隊計劃與NGO組織、智算中心和硬件廠商等開展合作，致力于讓視障者免費使用產品和相關服務。預計今年3月“聽見世界”APP將完成第一輪測試，甜心寶貝包養網在中國一、包養妹二線城市和地區同步開啟試點臺灣包養網，包養網推薦根據算力部署情況進行推廣。(完)
TC:sugarpopular900