DeepMind發表新AI模型 可為YouTube Shorts自動加描述
記者/竹二
人工智慧的應用越來越多元,Google旗下DeepMind近日發表一項能為短影片YouTube Shorts自動產生描述文字的AI模型Flamingo,讓這些短影片能見度變高,更容易被使用者搜尋。
YouTube Shorts通常只有短短幾分鐘,大部份都沒有包含描述文字及有用的標題,使這些影片難以被搜尋,因此DeepMind推出視覺語言模型Flamingo以協助產生描述文字。
Flamingo是DeepMind和YouTube合作的一項專案,今年4月間Google宣布DeepMind和Google Brain合併成一個單一AI事業群。2018年DeepMind就有和YouTube合作,提供影片創作者藉由為影片搭配符合YouTube政策的廣告,以增加營收,不僅提升了廣告精準度,也強化YouTube上的觀眾、創作者及廣告商的信任度。
隨後YouTube影片增加分段篇章,為此DeepMind又和YouTube搜尋部門開發可自動處理影片、影音內容轉錄文字,以及建議篇章切分及標題的AI系統,現在AI自動分篇章的影片已經用在800萬則影片,計畫明年擴充到8000萬則 。
至於Flamingo的部份,根據官方說法,Flamingo會分析影片最初的訊框後就可解釋螢幕上的內容,例如「一隻狗頭頂著一疊餅乾」,這段文字可儲存成YouTube的metadata,更有效率分類影片。目前新上傳的數十萬則Shorts影片已經都有AI產生的影片描述,YouTube計畫把這個技術逐漸推到所有Shorts影片。
YouTube Shorts產製部門指出,所產生的metadata不會顯示給創作者,目的在大幅提升搜尋精確性,同時Google也會確保所產生的文字符合責任標準,不會出現文字負面呈現影片內容的情形。到底Flamingo AI標示準確性有多高,還需要一段時間的觀察。
瀏覽 16,525 次