>> 國盛證券-計算機行業(yè)專題研究-多模態(tài)GPT的號角:SAM-230408
| 上傳日期: |
2023/4/9 |
大?。?/td>
| 1172KB |
| 格式: |
pdf 共11頁 |
來源: |
國盛證券 |
| 評級: |
增持 |
作者: |
劉高暢 |
| 行業(yè)名稱: |
計算機 |
| 下載權限: |
無限制-登錄即可下載 |
|
|
Meta發(fā)布SAM,零樣本分割圖像中一切對象。4月6號,Meta發(fā)布SegmentAnything Model(SAM),該模型可以用于分割圖像中的一切對象,即使是訓練數據中沒有見過的對象,可直接在網頁體驗:https://segment-anything.com/demo。SAM可以使用各種輸入提示包括點擊,框選和文字,指定要在圖像中分割的內容,并且可以靈活集成其他系統,比如將AR/VR頭盔的用戶視線作為提示來選擇對象,也可以將分割輸出用作其他AI系統的輸入,用于3D建模等任務。模型設計高效靈活,每個提示只需要幾毫秒就能在瀏覽器中運行,并且Meta開源了SAM的模型和包含1100萬張圖像和11億個掩碼的訓練數據集。 SAM初步驗證了多模態(tài)技術路徑及其泛化能力,相當于計算機視覺領域的GPT-3。英偉達人工智能科學家Jim Fan認為Meta的這項研究是計算機視覺領域的“GPT-3時刻”之一。SAM是通用的分割方法,已經學會了物體是什么的一般概念,可以對不熟悉的物體和圖像進行零樣本泛化,而無需額外的訓練。GPT-3系列模型可以使用“提示”技術對新數據集和任務執(zhí)行零樣本和少樣本學習,SAM從中獲得靈感將提示技術用于圖像分割。展望將來,SAM可以成為更大的AI系統的一個組成部分,用于對世界做更通用的多模態(tài)理解,例如,理解網頁的視覺和文本內容;在AR/VR領域,SAM可以根據用戶的目光選擇對象,然后將其“提升”到3D中;對于內容創(chuàng)作者,SAM可以提取圖像區(qū)域以進行拼貼或視頻編輯;SAM還可通過定位動物或物體在視頻中進行研究和跟蹤。 多模態(tài)提升空間巨大,技術進步速度超預期,將落地千行百業(yè)。當前多模態(tài)的輸入輸出主要是文本、圖像和音頻,應用場景包括智能辦公和,如智能PPT和其他office套件,此外多模態(tài)在AI繪畫、AI音樂創(chuàng)作以及看圖寫稿等AIGC方向也有廣泛應用。預計1~5年內,隨著多模態(tài)的發(fā)展帶來AI泛化能力提升,通用視覺、通用機械臂、通用通用物流搬運機器人、行業(yè)服務機器人、真正的智能家居有望進入生活。預計5~10年內,結合復雜多模態(tài)方案的大模型有望具備完備的與世界交互的能力,在通用機器人、虛擬現實等領域得到應用。 建議關注: 模型及應用:大華股份、??低?、云從科技、千方科技、商湯科技等。 工具廠商:當虹科技、萬興科技、星環(huán)科技等。 算力:英偉達、海光信息、寒武紀、中科曙光、易華錄、拓維信息、四川長虹、神州數碼、東華軟件、常山北明、景嘉微、工業(yè)富聯、浪潮信息、光通信產業(yè)鏈等。 風險提示:AI技術迭代不及預期;經濟下行超預期;行業(yè)競爭加劇。
|
|