美教授用Youtube視頻研究計算機情感識別
責任編輯:王梓 時間:2012-08-16 09:16
[導讀]Morency是美國南加州大學科技創(chuàng)新技術學院的一名科學家,主要工作是教計算機識別和理解人類傳達感情的方式,對他而言,YouTube上的寶貴資源不僅僅為他的學生提供了巨大的數據資料,同時也具有提升日益增長的觀點挖掘產業(yè)的潛力
當Louis-Philippe Morency還在南加州大學教授人類行為學的分析課程時,他就已經不遺余力地尋找人們之間彼此交談和表達觀點的優(yōu)秀視頻了,直到他靈光一閃,想到了YouTube。忽然之間就有數百萬充滿個人觀點的視頻以供分析,這些例子涵蓋的話題包羅萬象,從美容乳液到棒球,而且都是免費的。忘掉那些不自然且呆板的采訪吧,“最棒的是,即使采訪環(huán)境有些嘈雜,在攝像機面前,所有人都是如此直接地描述了自己的感受和自己的喜好。”Morency解釋道。
Morency是美國南加州大學科技創(chuàng)新技術學院的一名科學家,主要工作是教計算機識別和理解人類傳達感情的方式,對他而言,YouTube上的寶貴資源不僅僅為他的學生提供了巨大的數據資料,同時也具有提升日益增長的觀點挖掘產業(yè)的潛力,這遠遠領先于對只有文字的亞馬遜產品評論和Facebook狀態(tài)更新的深入研究。 “通過集中精力研究在線視頻,我們在這個領域領先了一步,因為在線視頻可以提供語言和非語言的交流線索,而不僅僅是話語。”Morency說道。
美國南加州大學教授 Morency
為了進行研究,Morency和他的同事們對上百個來自Youtube的視頻進行了梳理,這些視頻充滿了各種抱怨和誹謗,比方其中包括來自20個憤世嫉俗者各種各樣的抱怨吐槽,從小型鳥類到火氣大的司機等等。Morency將一份具有50個視頻資料分析結果的驗證類數據資料輸入自己開發(fā)的計算機程序中進行分析,該程序可以將說話人的語言、說話模式和面部表情等以圖像的形式進行覆蓋,用以判斷說話者想要表達觀點的類型。
“這個對樣本分析的小方法勝過單獨的文本分析。”Morency說道,“因此這種方法可以提供交流溝通中哪怕是最不明顯細枝末節(jié)的線索。”Morency還發(fā)現,除了明顯愉悅時,人們在自己的觀點得到認同的時候會更多地看著鏡頭,同時聲調也會變得更高。當人們持中立態(tài)度的時候,人們說話更容易停頓。“眼中的微笑最為真實。”他補充道,“在很多例子中會出現一個完美的表情,但是如果這個表情消失的很快,那么有可能就不是真實的。”
對人造情感的檢測和分辨帶來了更多的啟示和思考,Fast Company邀請Morency對《甜蜜布朗》新聞錄影帶的片段進行分析。她對從失火公寓中艱難逃生戲劇般的講述不僅讓攝影師為之動容,同時也引發(fā)了無數網民的觀看(目前已有三百七十萬瀏覽量,這個數字還在繼續(xù)上升),隨后這一事件演變成了使用電子合聲器而走紅的互聯(lián)網快速傳播事件。但是布朗當時真的是沒有穿鞋而逃命的嗎?
Morency承認自己并非是一個欺騙高手,不過從他的角度來說,布朗女士是一個老練的(或者是天生的)講故事高手。 “她從一開始就牢牢抓住了采訪者的注意力,接著通過不斷的搖頭和揚眉毛強調自己故事的重要線索,并且這些身體語言和她的話語很一致。同時她通過時不時的具有目的性的微笑將這個本該是難過的故事講述成了一個有趣的故事。”Morency說他需要親自和她見面會談才能做出更準確的判斷,不過根據另一份來自 KFOR的報告表明Morency的看法是對的,布朗女士確實是這樣的人。
Morency將他的模型帶到了在西班牙舉行的多模態(tài)交互國際會議,之后宣布他已經將自己的數據資料庫擴展到包含了接近500個視頻的規(guī)模,并將在今年年底宣布從這個更大的樣本庫得出的分析結果。
除了學術界,Morency的發(fā)現還吸引了YouTube和谷歌高層人員的興趣,目前Morency正在準備一份和搜索引擎巨頭合作的提議,并重申是出于“科學研究和創(chuàng)造技術”的動機。一旦提議得到許可,那么公司將金額他的團隊一起工作,“用行動影響世界”。
除了研究內容讓熱愛科學的Morency心潮澎湃以外,他還看到了在各領域中巨大的實際應用,包括為心理學家提供分析解釋行為的新工具,以及為企業(yè)和消費者提供更好的眾包方式等等。“當人們想要嘗試一家新餐館或者看一部電影的時候,多多少少都會受到網絡上人們的影響。”他解釋道:“增加視頻分析可以將最真實的意見和看法放到首位,不然用戶看到的不僅是通過關鍵詞還有正面負面評價得到的網絡搜索結果。”
企業(yè)測試版本最遲也會在3年內完成,不過科技創(chuàng)新技術學院已經在他們的虛擬人研究中運用了該技術,該技術可以改進虛擬人和真實人的交流方式。
作為法裔加拿大人,Morency同時希望研究非英語講話者的視頻。
從西班牙語入手,Morency研究了基于不同文化背景下的來自不同國家的人們是如何表達觀點的,“我們可以將視頻結合語境進行分析,同時對視頻進行分類,然后找尋天生行為中的差異。”跨文化領導訓練,有人愿意參加嗎?
說道領導力和協(xié)同工作,Morency的工作也幫助學生在集體中認清具有領導力的人,同時也分辨學生是融入其中、充滿困惑還是不斷學習。評估這些不確定因素可以創(chuàng)造更好的培訓系統(tǒng)以便在需要的時候提供更多建議和積極的影響,Morency相信這項技術能夠將家庭作業(yè)更加互動同時鼓勵學生之間的合作。
“我們正在培養(yǎng)下一代,”Morency說道:“好的學校應該盡早在課程體系中安排類似的課程,我非常希望和更多的公司合作以便將其付諸實踐。 Web3D納金網www.westwoodtownhomes.com/
- 分享到:
- 2025深圳設計周之第六2025年08月25日
- 2025年三明市第三屆非2025年08月06日
- JoySpace均勝電子智能座2025年07月14日
- 2024蘭州文創(chuàng)設計大賽2024年12月07日
- 2024“通武廊”文創(chuàng)和2024年12月04日
- 2025年紅點概念獎 開啟2024年12月02日
- 2026丙午(馬)年貴金2024年12月02日
- “閱鹿城·悅海南”2024年12月02日
- 2024年繁星計劃“物煥2024年12月02日
- ?“東海非遺文創(chuàng)產2024年11月27日