台科大資工系碩士班二年級學生張先昀(左)、林于婷(中)、林鼎傑(右)組成團隊「MainBody:去背專家」榮獲2022 年「全國大專校院智慧創新暨跨域整合創作競賽」,電商與金融科第一名。圖/台科大提供
【記者曾博群台北報導】台灣科技大學資工系戴文凱教授指導碩士班二年級學生張先昀、林于婷、林鼎傑組成團隊「MainBody:去背專家」,利用深度學習(Deep Learning)製作出精確去除各種圖片背景的AI,獲得2022 年「全國大專校院智慧創新暨跨域整合創作競賽」,電商與金融科技第一名。
「MainBody:去背專家」是自動/互動式 AI 圖片、影片的去背系統,可將圖片中動物、人物髮絲、網狀細節等的背景去除乾淨。同時,高達3千萬畫素的圖片辨識速度,大約僅需1秒。
此系統可廣泛應用在任何需要去背應用情境,例如商業攝影、需要準備圖片素材的新聞媒體業,或電商平台需要上架商品、製作廣告。另外,針對超級複雜的環境中,無法完美去背時,系統擁有互動式AI去背功能,讓使用者簡便的輔助標示主體或保留的區域,流暢地達成去背工作。
資工系林鼎傑說明,雖然作品是一個去背網頁,但實際上包含了去背模型和去背系統。這平台使用數據驅動的方法,自行收集了約20萬張的圖片,先用模型初步預測後,再人工修正標註,取得答案。製作資料集也花了很多時間精力。
簡單來說,如果使用者希望修改去背結果的主題,就能直接透過互動式的操作,點選希望保留或刪除的部分,讓AI重新判斷去背結果,這是現有去背軟體較少實現的項目。而坊間的軟體問題在於難以編輯,或是專業人士使用美編軟體去背,需要花費大量時間,此一技術可以加速流程,減輕負擔。
「MainBody:去背專家」在未來應用上,包括影片或視訊的去背;可輸出多種去背讓使用者選擇;去背後的前景主體可融入合成的背景。資工系戴文凱教授進一步表示,研發團隊會繼續收集實務使用需求與市場商業模式、優化產品競爭力,積極推廣研發成果,也期待有資金挹注。