阿里安全摘下AI視覺“奧斯卡”雙料冠軍 突破行為檢測技術瓶頸
網商君
一場3個小時的直播結束后，由阿里安達實驗室（達摩院和阿里安全聯合實驗室）和華中科技大學打造的頂級AI，在3分鐘內精準檢測最佳商品展示片段，自動進行視頻剪輯并發布。不久前，在被譽為計算機視覺領域“奧斯卡”、AI領域規模最大的會議CVPR 2020上，這項行為檢測AI技術超越百度、商湯、中興等公司的同類技術，獲得了雙料冠軍，并比去年微軟、三星的參賽成績高出約17個百分點。
在人工智能頂會拿下雙料冠軍
當前隨著娛樂視頻、直播平臺的日漸成熟，直播視頻數量也出現了井噴的趨勢，自動化處理視頻的需求日益增長。作為自動化處理視頻的核心技術之一，行為檢測AI也越來越受到學術界和企業界的共同關注。
阿里安達實驗室高級算法工程師張士偉介紹，在CVPR 2020關于行為檢測AI的兩項賽道任務中，阿里和華科大聯手提出的解決方案不僅獲得了雙料冠軍，并以平均均值精度（mAP）42.788%的性能一舉打破眾多頂尖科技公司、科研院校去年無法突破“40%”的瓶頸，在AI視覺領域帶來新的可能。
CVPR兩個賽道的數據集分別有2萬個視頻和5萬個視頻，而且后者采用的是更貼近真實生活的視頻數據。這次兩個賽道任務目標是，給定一段無剪切的視頻，參賽AI必須檢測出目標行為發生的時間區間并正確預測該行為對應的類別。以一段跳水比賽視頻為例，視頻中有若干參賽選手的跳水動作，每個跳水動作約4秒，AI須準確定位某位或者多位參賽選手的跳水動作。
張士偉認為，CVPR的比賽任務還面臨四大挑戰：第一，目標行為時常分布廣，從0.5秒到400秒不等，以賽道中一個200秒的測試視頻為例，1秒采集15幀圖像，AI必須在3000幀圖像中精確定位；第二，視頻背景復雜，通常具有很多不規則的非目標行為嵌入在視頻中，比如一段集會場景的視頻中有許多參會者，AI必須從復雜的背景中精準定位演講者；第三，類間差大，行為的視覺效果會因人而異，比如專業舞者和業余舞者在跳同一段舞蹈，他們的動作必然有差異，AI要能識別這是同一段舞蹈。“此外，AI檢測人體動作還面臨人體之間的互相遮擋、視頻分辨率不夠、光照、視角等變化多樣的其他干擾?！睆埵總フf。
雖然面臨上述難題，兩個賽道的數據屬性也不盡相同，阿里安達實驗室和華中科技大學還是創造性地提出了兩項AI解決方案，出色地實現了比賽任務目標。
阿里安達實驗室和華科大在CVPR兩個賽道的獲獎證書
技術能力得益于現實場景磨煉
技術的進步往往得益于復雜現實場景的磨煉和沉淀。行為檢測AI經過長時間打磨，早在阿里安達實驗室的多媒體AI和安全審核等系統中布局，成為安全AI的核心組件之一。阿里安達實驗室負責人薛暉介紹，優酷、淘寶直播視頻等早已受益于這項頂尖技術。
行為檢測AI不僅可以準確定位、分析視頻中的違規行為，甚至還能預測一些行為的趨勢。同時，它還可以自動檢測淘寶直播中某個商品的最佳動作展示片段，自動剪輯出精華視頻用于櫥窗展示。
“把行為檢測AI應用在實際業務場景，并在業務的打磨和考驗中不斷成長，，這也是阿里安達實驗室打造的這項AI技術能在CVPR 2020上取得雙料冠軍的原因?！毖熣f。
左為時長3小時的直播視頻，右為行為檢測AI識別出的某單件服裝展示視頻
打造數字基建“安全樣板間”
今年3月，阿里發布數字基建新一代安全架構。從實戰出發進行安全基建，讓安全能力和業務數字化建設實現同步，是新一代安全架構的核心理念。
安全技術以往大多只應用于安全風控領域。阿里安全在20多年間的發展歷程中，始終堅持立足于不斷創新的業務場景打造安全技術。在保障業務安全的前提下，也在為一些商業難題提供新的解決方案，為業界打造安全基建的樣板。
張士偉介紹，行為檢測AI在體育、直播、影視傳媒和安防領域有廣闊的應用前景，比如精彩動作檢測、智能集錦生成、介紹商品行為，以及通用動作檢測識別、多模態搜索、異常動作檢測等。在護航數字基建的同時，也為多個領域的創新和提效帶來更多智能化助力。
?
核心關鍵字： 人工智能
相關文章
-
三年百縣十萬人才！阿里巴巴將在全國批量打造“客服縣”
摘要：脫貧摘帽一年后，江西尋烏以“客服第一縣”之名煥然一新。網商君脫貧摘帽一年后，江西尋烏以“客服第一縣”之名煥然一新。7月22日下午，在阿里巴巴助力尋烏脫貧攻堅與鄉村振興重點項目簽約儀式上，政企合作共建的“尋烏客服縣”項目正式簽約?！翱头h”模式，是今年疫情期間，阿里集團客戶體驗事業群（簡稱CCO）在江西尋烏首創的，用數字服務業人才技能+實踐結合的培訓，帶動小鎮青年就地實現數字化就業的創新模式。...
2020-07-23 18:17:46 客服尋烏阿里巴巴 -
先認證再上崗，每年有近3000萬人次在阿里認證平臺上通過培訓認證
近日，中國就業培訓技術指導中心、人社部職業技能鑒定中心發布《關于印發國家職業技能標準制定工作計劃的通知》。阿里巴巴參與“電子商務師”、“互聯網營銷師”等多個領域職業標準的制定工作?！吧鐣毙杈o缺職業”名單中的“呼叫中心服務員”等新職業的國家標準，也都明確由阿里巴巴牽頭承擔。阿里巴巴集團客戶體驗事業群（簡稱：阿里CCO）服務體驗專家單南就參與了“呼叫中心服務員”標準制定工作。而在單南背后，有一支團隊...
2020-07-23 14:17:06 阿里阿里巴巴客服 -
攜手阿里云 ，潤和軟件金融科技五年（2020-2025）新戰略深度報告
7月22日，江蘇潤和軟件股份有限公司（下稱潤和軟件或公司）在南京總部舉行了主題為“賦能傳統金融業的卓越數字化之路”的戰略轉型發布會，公司董事長兼總裁周紅衛發表開幕致辭，阿里巴巴副總裁兼阿里云智能新金融事業部總經理劉偉光率高管團隊參加，并做主題演講。發布會期間，潤和軟件與阿里云等合作伙伴分別舉行了戰略合作協議簽訂儀式。南京銀行、天津銀行、徽商銀行、上海華瑞銀行、江西銀行、江蘇省聯社、江蘇紫金農商行、...
2020-07-22 17:17:13 金融阿里軟件 -
一勺思想:“退休”了的馬云，為何能牢牢掌握阿里的絕對控制權？|2020-7-22
前段時間，蔣凡因丑聞被取消阿里巴巴合伙人的新聞鬧得沸沸揚揚的。陳欣老師也聽聞了八卦，想給我們聊聊公司管理架構跟股票市場的關系。阿里最初弄出個合伙人制度是為了牽制軟銀等其他大股東？阿里還曾經因為合伙人制度被香港拒絕上市？阿里的料，好像還挺多的呢……不過，再怎么樣，小筷子都是他們得不到的合伙人！陳欣：同學們好！前面我做了三期節目，分別是美團、茅臺和高鐵。主要的思路是去分析這些公司的商業模式或資本運作的方式，這樣可以加強我們對這些公司底層創造價值的理解。但是，這樣的分析僅僅是財報分析的一個角度。今天我給大家帶來...
2020-07-22 12:01:36 合伙人阿里阿里巴巴 -
阿里商業操作系統呈現新方案 星巴克“啡快”上線支付寶、淘寶、口碑、高德
摘要：“啡快”上線速度可謂飛快，但背后的故事展開得并不突然。網商君7月21日，星巴克“啡快”服務上線支付寶、淘寶、口碑和高德，消費者可通過以上APP享受“手機下單、到店即拿即享”的便捷體驗。據了解，餓了么也將隨后上線這項服務。利用阿里巴巴商業操作系統，星巴克跨端、多場景服務消費者的能力加速進化?！胺瓤臁庇唵瓮瓿珊螅M者到星巴克門店憑口令領取咖啡“啡快”上線速度可謂飛快，但背后的故事展開得并不突然...
2020-07-21 19:17:04 阿里巴巴消費者星巴克 -
讓商家更懂消費者 阿里安全用AI幫商家分析直播彈幕評論改善經營
摘要：每個淘寶直播間都是數字基建的“安全樣板間”。網商君在數以千萬計的直播彈幕評論之中，怎樣快速梳理出關鍵有效的信息？彈幕信息在直播時一閃而過，肉眼無法“抓住”眾多評論，很多的隱晦表達也容易被忽略。通過阿里安全的AI技術，不但可以幫助商家實時攔截彈幕中的違法違規信息，還可以對消費者的需求進行分析歸納，幫助商家適時改善經營和服務。目前，安全AI已經成為百萬淘寶主播的標配。不久前，淘寶主播小清來到國內...
2020-07-21 14:17:07 淘寶阿里基建 -
阿里張建鋒團隊獲浙江科學技術最高獎
摘要：這一獎項授予浙江省在當代科學技術前沿取得重大突破或者在科學技術發展中有卓越建樹的個人、團隊，每年授予數量不超過2項。7月17日，2019年度浙江省科學技術獎勵大會在杭州召開，阿里張建鋒團隊與中國工程院院士李蘭娟獲得最高獎浙江科技大獎。這是2019年10月浙江科技大獎設立后首次頒獎。這一獎項授予浙江省在當代科學技術前沿取得重大突破或者在科學技術發展中有卓越建樹的個人、團隊，每年授予數量不超過2...
2020-07-18 20:17:37 達摩團隊浙江 -
7.17虎哥晚報：當當網成立權益保護部；傳三星正研發QNED
Apple Pencil新專利曝光；當當網成立權益保護部；傳三星正研發QNED……...
2020-07-17 23:17:05 三星自如業主 -
國盛證券：無需流量焦慮，阿里已站在流量高地
摘要：阿里電商的內容布局和流量變現效率都走在了“后浪”的行列。網商君近期，國盛證券發布題為《競爭有多激烈，阿里的“后浪”就有多奔騰》的研報。針對近來輿論中被頻繁提及的“阿里流量焦慮”，該研報提出，阿里的流量焦慮和生態焦慮可能被市場高估了。事實上，阿里電商的內容布局和流量變現效率都走在了“后浪”的行列。條條大路通淘系一段時間以來，公眾輿論中出現了“阿里缺流量”的聲音，隨著此前騰訊市值短暫超過阿里，這...
2020-07-17 18:17:12 阿里流量淘寶 -
完全免費！阿里巴巴上線設計普惠公開課
摘要：設計能夠讓商業美而簡單。網商君一年一度的全球設計大會受疫情等因素影響無法按計劃舉行，怎么辦?阿里巴巴的設計師們做了個決定：把所有內容做成公開課，通過線上向社會開放，課程內容全部免費。日前，阿里巴巴宣布，今年AlibabaDesignUcan大會將以普惠公開課的形式舉行。7月16日至23日，Ucan官網（ucan.alibabadesign.com）將陸續上線53講設計課程，內容覆蓋平面設計、...
2020-07-17 14:17:16 阿里巴巴設計師大會
| 留言與評論（共有 0 條評論） |
