“19. 36 噸干魷魚在京東拍賣上拍,最終以178. 12 萬成交。人生兩大悲哀:活得不如咸魚,身價不如魷魚。” 在今年京東雙十一全球好物節期間,六款形象可愛的卡通虛擬主播,用詼諧的語言精確地播報著各個銷售數據,并且還能夠與其進行實時互動,獲知想要了解的數據。 京東早已不是首次使用虛擬主播,此前還與該技術背后提供方杭州相芯科技有限公司(以下簡稱相芯科技),合作展現了真人形象虛擬主播京小帥和京小蕾。 據京東人工智能高級產品經理許俊愷表示,相芯科技一直是京東的AI解決方案的合作伙伴,此次基于京東銷售數據的內容升級,用卡通虛擬主播播報京東銷售數據很好地體現了京東的科技創新范兒。 ![]() 全球VR/AR市場規模,圖片來源于東吳證券報告 5G潮的來臨,VR/AR或許將迎來快速發展,根據中國信通院數據, 2018 年全球虛擬現實市場規模將超過 700 億元人民幣,同比增長126%。 各方利好下,相關技術也在逐步滲透到消費端。傳統圖形學的手段主要是利用數學工具對現實世界進行建模,是Physical Based Approach。主要解決了專業用戶如何生成圖形給人看的問題,也就是PGC內容。 而近年來圖形學的發展越來越多地往普通用戶如何可以方便地生成圖形內容發展,計算機圖形學結合了計算機視覺、機器學習、人機交互等領域的知識,來實現自動化的內容生成和更自然的交互,形成了智能圖形學的概念。 新一代的圖形學越來越多的利用數據,更多地傾向于Data Driven Approach,促生了自動化的內容生成和自然的交互手段,由于對UGC內容生產的促進,其應用場景也擴展到短視頻、直播、及更多的應用場景中。 2016 年成立的相芯科技,正是在智能圖形技術領域的創新者,公司專注AI+計算機圖形學方向,目前產品主要有視頻AR特效、虛擬形象自動生成、AI虛擬主播、AI虛擬助手等。 相芯科技部分3D卡通虛擬主播 如今,成立近四年的相芯科技,已服務近 500 家B端客戶,其中包括百度、微軟小冰、傳音、浙江電視臺等,相關技術也廣泛應用在智能手機、直播、短視頻、在線教育、新零售等眾多行業。 由于擁有強勁的技術實力與廣闊的市場前景,相芯科技在成立一年后就實現盈利,目前已連續三年盈利。但走到這一步,并不是一件容易的事。 突破瓶頸,走向消費級 打開攝像頭,選擇河豚形象,一個活靈活現的animoji(3D動畫表情)出現在了屏幕端,伴隨著真人張嘴的動作,屏幕中的animoji吐出了一連串的氣泡,好像身處水中一般。 在陌生人社交APP Soul的功能中,Avatar(虛擬3D形象)實時表情捕捉成為年輕群體中頗受歡迎的功能。虛擬形象不僅能夠還原真人表情,增加社交趣味性,也能夠在與陌生人交流中保護自身安全。 看似簡單的應用,真正實現起來卻并不容易。Avatar其實并不新鮮,已經在影視、動漫、游戲等領域得到了應用,但這項技術此前從未真正走進消費級領域。究其原因,在于Avatar的普及存在技術瓶頸與成本方面的難題。 據相芯科技向鋅財經介紹,Avatar技術在消費級設備上實現的難度主要體現在Avatar生成、Avatar驅動互動。 此前在Avatar生成上,構建一個可實現表情等全部動態效果的真人3D模型,不僅耗時久,而且價格高昂,這直接導致Avatar難以實現在消費級領域進行大規模應用。 為此,相芯科技打造出了全球首創的虛擬形象自動生成技術 (Photo to Avatar,簡稱PTA),原本成本高、耗時長的Avatar生成,通過此技術只需要給到一張照片,即可以秒級的速度全自動生成一個全動態Avatar,用戶只需要一臺智能手機就能實現,極大地降低了Avatar生成的硬件成本。 與此同時,在Avatar驅動方面,相芯科技突破性地使用了智能手機上的普通攝像頭,無需使用深度攝像頭,即可進行精準的面部表情捕捉,讓Avatar的表情始終隨著用戶表情進行即時變化。這大幅度降低了用戶的創作難度,用戶體驗也更真實。 當下,相芯科技的核心技術人員來自浙江大學、微軟亞洲研究院、蘋果等公司,在計算機圖形、計算機視覺、VR/AR等技術領域擁有 20 多年的研發經驗。 經過不斷努力,目前相芯科技已經完全Avatar生成、互動和渲染技術的全面布局,可支持包含面部、舌頭、眼球在內的 56 個表情系數的融合。 在細節上,相芯科技也沒有含糊,添加了帶物理動效的animoji,用戶在實時驅動時,可發現在耳朵、毛發等地方,會遵循物理力學自然擺動,效果更為真實生動。 與市面上類似產品相比,相芯科技的animoji表情靈活豐富,維度比類似產品更多。 一直以來,讓創作更簡單,交互更自然,體驗更真實,也成為相芯科技不斷努力的目標。 從交互到“交流” “浙江省在全國的排名情況?”在今年京東雙十一全球好物節上,工作人員直接向京東3D虛擬主播京小帥詢問道。 隨即,京小帥脖頸微傾,眼神閃爍,帶著職業主持人的微笑播報道: 2019 年京東全球好物節,浙江省消費增長強勁。從下單量看,該省排名前五的城市是:杭州市、溫州市、臺州市…… 整個播報過程語速流暢,沒有一絲卡頓,與真人主播看不出任何差別,京東人工智能和相芯科技聯合打造的AI虛擬主播,成為AI落地從交互到交流成為重要展現方式。 在移動互聯網時代,智能手機通過其更加自然的交互和靈活的應用方式,不僅承載了部分基于PC的傳統互聯網應用,同時衍生出了更為豐富的移動互聯網生態。而隨著5G、云計算等技術的發展,勢必會提升用戶體驗,實現人與機器的無縫交流。 巨頭們也在紛紛通過布局智能音箱行業,切入未來的萬物互聯生態中,然而此前大多數產品仍然停留在語音交互階段,用戶可能需要進行多輪對話才能獲知想要的信息,這無疑降低了獲取信息的效率。 有屏化正在成為智能音箱升級迭代的重要標志。據市場研究機構Canalys披露的統計數據顯示,有屏智能音箱在 2019 年第三季度的同比增長高達500%,占到智能音箱總銷量的22%。 智能音箱有屏化的迭代,讓擁有個性化形象,并且能夠和用戶面對面互動的可視化AI虛擬智能助手,成為其標配。 相芯科技的AI虛擬助手解決方案,也早已進行全方位的布局,自主研發的語音動畫合成技術(STA),將人工智能與計算機圖形學相結合。 當計算機獲取語音或者文本中的內容信息后,STA即可通過計算機圖形學合成技術對虛擬形象的面部進行驅動并融合,實現極具逼真感的表情還原。 與此同時,相芯科技的STA技術還可與市面上主流的語音識別(ASR)、自然語言處理(NLP)、語音合成(TTS)兼容結合,既可為擁有語音技術的客戶帶來可視化的虛擬形象升級,還可為沒有語音技術的客戶帶來完備的AI虛擬助手解決方案。 目前根據不同需求,相芯科技還可定制專屬形象,包括3D卡通、3D動物、3D數字人、2.5D仿真人、深度學習仿真人等類型,并可適用于醫療、金融、教育、零售等各種應用場景。 從單純的人機交互,到實現可交流的人機互動,技術的突破正在帶來不同的體驗,而掌握這些技術的玩家,才能真正在今后立足生根,成長為新一代的巨頭。 多維度的應用場景 “浙江啟動防臺風Ⅱ級應急響應、杭州蕭山國際機場目前有 20 個航班取消、臺風利奇馬距離溫嶺市東南方向 225 公里……”AI主播“小范兒”時刻播報著超強臺風利奇馬的最新消息。 今年 8 月,利奇馬登陸江浙沿海地區,為應對這一超強臺風,錢江臺&錢江視頻緊急啟用了AI主播“小范兒”, 24 小時不間斷地為民眾播報利奇馬的最新動態。 相芯科技與錢江頻道聯合打造的AI虛擬主播小范兒 AI虛擬主播并不新奇,但此次由錢江頻道與相芯科技聯合打造的AI主播,在突發性事件中出色完成播報任務,標志著AI虛擬主播在實際落地中的新突破。 相芯科技的落地場景遠不止傳媒領域,在游戲、社交、電商、教育等領域,都可完美匹配。 在視頻AR特效的應用中,美妝功能頗受女性歡迎,相芯科技基于 209 個人臉關鍵點,支持粉底、腮紅、口紅、眼線等 10 個美妝維度,在不需要重新制作美妝素材的情況下,即可幫客戶輕松打造個性化妝容。 而在單個美妝維度上,比如口紅色號較多,女性需要挑選適合自己的色號,這時只要提前預置多種色號的口紅道具,在客戶端加載切換,即可實現口紅實時試色的功能,既能提升客戶挑選效率,還能實時看到上妝效果。 與此同時,在線上社交領域,相芯科技也能給出完美的解決方案,運用虛擬形象自動生成技術,用戶可定制屬于自己的卡通形象,與對方實時交流,既不用擔心泄露隱私,雙方也能形成良好的互動。 用戶在使用過程中,只需要上傳一張自拍照片,通過相芯科技的虛擬形象自動生成技術(PTA),即可生成個性化3D卡通形象,并且高度匹配個人特征,這增強了用戶在交互上的自然度。 細節上,相芯科技會提取用戶面部特征,如臉型、五官、發型、皮膚、胡子等,通過將信息風格化,生成具有本人特征的形象,實現千人千面的效果。 在這背后的技術應用上,相芯科技使用端對端神經網絡生成個性化形象,其中神經網絡分為肖像網絡與風格化網絡兩部分。肖像網絡負責全面分析用戶上傳照片,提取人臉特征,完成3D人臉的重建,風格化網絡則將重建的人臉模型卡通化。 與此同時,相芯科技開發了一系列的虛擬形象互動的應用場景,并提供客戶端的SDK用于進一步地虛擬形象個性化定制和互動,這也讓其可以輕松接入到各種VR/AR的應用中。 值得注意的是, 2018 年,相芯科技還與浙江大學,合作成立了“浙江大學-相芯科技智能圖形計算聯合實驗室”,這為其加強了在技術方面的探索與突破,智能圖形技術的創新發展,也將得到進一步的深入研究。 當下,相芯科技積累起的技術護城河,打開了消費級應用的市場,搭建起了全方位、多維度的服務體系,而今后萬物互聯時代來臨,將給相芯科技帶來更大的增長空間,以及更有利的開拓條件。 |
免責聲明:本站部分文章和圖片均來自用戶投稿和網絡收集,旨在傳播知識,文章和圖片版權歸原作者及原出處所有,僅供學習與參考,請勿用于商業用途,如果損害了您的權利,請聯系我們及時修正或刪除。謝謝!
始終以前瞻性的眼光聚焦站長、創業、互聯網等領域,為您提供最新最全的互聯網資訊,幫助站長轉型升級,為互聯網創業者提供更加優質的創業信息和品牌營銷服務,與站長一起進步!讓互聯網創業者不再孤獨!
掃一掃,關注站長網微信