AI攝影標(biāo)桿仍在,新宇宙又被華為Mate 20悄悄打開了

如果把手機比作一顆星球,那么我們對于AI芯片的期待,來自于它打破手機產(chǎn)品近三五年來近乎一成不變的“平穩(wěn)自轉(zhuǎn)”。芯片技術(shù)本身是星球的自轉(zhuǎn)軸,只要自轉(zhuǎn)軸毫無變化,星球表面往往只有風(fēng)雨帶來的剝蝕與沉積,比如把手機后殼換成紅色藍(lán)色綠色、或是一水兒的全面屏。這些浮于表面的改變,很難真正觸及到手機帶給我們的體驗,更遑論移動應(yīng)用的整體生態(tài)了。

AI芯片的改變就不同了,當(dāng)自轉(zhuǎn)軸發(fā)生變化時,才能真正從整體觸動星球的形態(tài),滄海桑田的轉(zhuǎn)移在瞬間完成,接連氣候與生態(tài)都會隨之改變。去年麒麟970帶來的,正是這種變化,算力提升對拍照的改變、HiAI開放能力搭建起的移動AI應(yīng)用生態(tài),這些劇烈的地殼運動都在改變著我們與手機之間的關(guān)系。

今年的蘋果發(fā)布會上,大家可以看到絕大多數(shù)鏡頭都投向了AI和芯片,這對于蘋果來說是非常反常態(tài)的。作為行業(yè)標(biāo)桿,蘋果的動向顯然能夠說明全球手機市場的戰(zhàn)略重心已經(jīng)聚集到了AI領(lǐng)域。此后我們可以看到,谷歌手機繼續(xù)在AI上發(fā)力,而Mate20則在AI上完成了突破性探索。

從中可以看出,從麒麟970時期就找準(zhǔn)了方向的華為,已經(jīng)開始了全力沖刺AI賽道。換句話說,移動AI盛宴又將到來。而今年的麒麟980會如何更進一步對移動星球產(chǎn)生影響,或許我們可以從HUAWEI Mate20系列中窺見蹤跡。

當(dāng)AI成為共有命題時,用雙腦合璧改變自轉(zhuǎn)

除了還沒有喘過氣來的三星,以及大概率繼續(xù)劍走偏鋒的谷歌,移動AI的主要玩家還有幾大國產(chǎn)手機品牌。今年國產(chǎn)手機無處不AI,可以說AI是國產(chǎn)手機的共有命題,但是這條賽道上國產(chǎn)們真的留下了什么技術(shù)探索嗎?恐怕有點牽強。對移動芯片缺乏把控力、缺乏底層技術(shù)投入,讓國產(chǎn)手機基本喪失了移動AI的先發(fā)優(yōu)勢。基本只能等驍龍855的AI能力進一步拓展,然后以生態(tài)合作的方式與算法公司合作嘗試AI創(chuàng)新。

目前的國產(chǎn)手機AI,小米還在探索識圖拍照功能,vivo則打造了軟件層面的智慧引擎,在美圖拍照、場景智能等領(lǐng)域進行探索。而打通了從AI芯片、生態(tài)開發(fā)平臺、產(chǎn)品協(xié)調(diào)度與軟件AI應(yīng)用的全棧AI通道后,華為似乎更加貼近AI硬核玩家,在終端AI技術(shù)領(lǐng)域具有自主性。

相比上一代產(chǎn)品,麒麟980這次在7nm芯片、GPU和CPU上的性能提升都很引人矚目,但從移動AI角度出發(fā),我們更關(guān)心的還是雙NPU帶來的變化。

NPU帶來的,一方面是爆炸式的算力提升,另一方面則是第二顆NPU的引入和對任務(wù)的合理分配,進而帶來的計算能效比提升。而硬件方面的能力提升,最顯著的體現(xiàn)就是在游戲方面。

在HUAWEI Mate20系列中,雙NPU對于高效8bit計算資源的有效分配,與游戲場景中存在的短時間爆發(fā)算力需求可以完美契合,加上GPU Turbo在軟件層面的優(yōu)化,可以給游戲體驗帶來一些意想不到的改變。像是AI融合調(diào)度技術(shù)進行智能負(fù)載預(yù)測,從而及時響應(yīng)渲染壓力帶來資源需求、包括觸控顯示優(yōu)化和智能控溫技術(shù)。簡單來說就是不卡頓、不掉幀、不燙手。加之從前幾代產(chǎn)品開始,華為就已經(jīng)通過對用戶日常應(yīng)用使用頻次的深度學(xué)習(xí),實現(xiàn)對用戶習(xí)慣的預(yù)測,從而對GPU、CPU等等硬件資源實現(xiàn)智能調(diào)度,預(yù)先加載用戶經(jīng)常使用的應(yīng)用,進一步提升手機應(yīng)用整體的流暢度。

這些改變帶來的不僅僅是更好的游戲體驗,還給手游開發(fā)者打開了更廣闊的空間,讓他們可以在游戲中加入更多的圖形計算來提升游戲效果。這樣一來,游戲開發(fā)者的創(chuàng)作空間完全被打開,給星球一個全新的自轉(zhuǎn)方式。

從湖泊到河流,距離移動AI體驗升級還差一個NPU

用過上一代麒麟970的用戶,一定對AI對于手機攝影的提升印象深刻。一時間盡管實現(xiàn)的方式不同,AI攝影也成了2017年手機行業(yè)的重要關(guān)鍵詞之一。移動AI之所以能持續(xù)發(fā)展,是因為產(chǎn)品的消費體驗不斷升級。手機想要帶給消費者更加豐富震撼的體驗,自然也要依靠AI這門技術(shù)作為核心。

其實AI攝影,就是移動AI處理圖像、以圖像為單位進行計算的最好體現(xiàn)。隨之而來的還有智能識物、圖片翻譯等等建立于圖像計算上的功能。當(dāng)這些功能已經(jīng)普遍化,如何進行下一步體驗升級,成為了移動AI的統(tǒng)考??上Ы衲晡覀兛吹降拇蟛糠諥I手機,都還聚焦在提升百分之零點幾的物體識別準(zhǔn)確度,或是更討人喜歡的美顏算法。不夸張的說,幾乎是在麒麟970時代原地踏步。而今年雙NPU的出現(xiàn),也幾乎注定了移動AI的體驗升級要從算力的爆炸式提升開始。

如果說AI攝影和智能識物等等功能來自于NPU對圖像識別、圖像處理能力的提升,那么雙NPU帶來的算力大爆炸則開始把圖片勾連成影像,進行“視頻計算”。

在HUAWEI Mate20系列中,已經(jīng)通過AI 4D預(yù)測追焦等技術(shù)再次優(yōu)化AI攝影,再通過實時渲染、精準(zhǔn)圖像分割等等技術(shù)實現(xiàn)對視頻的實時智能處理,賦能了AI攝像。

在精準(zhǔn)圖像分割技術(shù)中,AI對于畫面的理解分成了兩個部分,第一部分是對拍攝對象整體輪廓的識別,在整體畫面中辨識出移動的肢體,對于運動軌跡進行實時追蹤。另一部分是基于機器學(xué)習(xí)對畫面細(xì)節(jié)精準(zhǔn)分割,實時分析出每一個像素點的從屬對象——人體或靜物或背景的藍(lán)天白云。

在以往的硬件條件下,移動AI往往只能完成其中一項任務(wù),整體對象的實時捕捉和對畫面細(xì)節(jié)的分割往往不能兩全。這也是為什么我們在抖音、快手等視頻處理產(chǎn)品中常常會發(fā)現(xiàn)特效丟幀,或吞沒了手指、頭發(fā)等等細(xì)節(jié)部位。

但當(dāng)麒麟980的雙NPU開始雙腦協(xié)作,就可以各自處理畫面中的整體識別和細(xì)節(jié)識別,在兩個不同的神經(jīng)網(wǎng)絡(luò)模型上分別完成計算。

有了全新的計算方式和強大的算力,很多以往難以想象的視頻處理方式也可以出現(xiàn)在我們身邊,通過對動態(tài)運動和靜態(tài)細(xì)節(jié)分別的精準(zhǔn)認(rèn)知,加上實時渲染實現(xiàn)以假亂真的背景更換?;蚴菍B發(fā)絲等細(xì)微之處都能完美識別的智能色彩保留技術(shù)。有了麒麟980,這一切都可以在雙NPU強大算力的分工合作下輕易完成。

當(dāng)“圖像計算”升級為“視頻”,如同在地殼運動下湖泊變?yōu)楹恿?,用流動的力量?chuàng)造更多價值。文明往往由河流孕育,華為帶來的率先突破,其實在某種程度上已經(jīng)確定了后續(xù)國產(chǎn)手機的技術(shù)研究方向,相信距離AI攝像的普及,也不遠(yuǎn)了。

平地聳起高山,3D仿生成像所代表的AI創(chuàng)新空間

以往移動AI的效用,都是在原有的基礎(chǔ)上進行改動,例如讓拍照效果更好、提升資源調(diào)用效率等等。但我們更加期待的,是手機能否出現(xiàn)一些以前從未見過的功能,能否像曾經(jīng)蘋果率先推出觸摸交互游戲一樣,打開一種全新的應(yīng)用形態(tài)。

而這種期盼,或許很快就要實現(xiàn)了。通過對算力的進一步開放,HUAWEI Mate20系列率先推出了3D仿生成像功能,建立在強大的圖像數(shù)據(jù)處理能力上,AI引擎支持用戶自行建模、制作3D格式的動態(tài)圖像、利用自己的表情驅(qū)動平面等等。在發(fā)布會的展示中,我們可以看到身邊的一個玩偶都可以通過攝像頭實現(xiàn)建模,變成虛擬世界的對象。以往我們應(yīng)用AR時,只能看到現(xiàn)實世界與虛擬對象的疊加。而3D仿生成像的出現(xiàn),則是第一次出現(xiàn)了虛擬世界與現(xiàn)實對象的融合。

而在3D仿生成像上,最困難的兩個技術(shù)分別就是環(huán)境貼合計算和光照預(yù)處理?,F(xiàn)實物體轉(zhuǎn)化為3D建模圖像,首先要認(rèn)識到不同光照條件下光源對物體色彩的干擾,將其進行還原。建模完成后,想讓圖像與現(xiàn)實世界更有貼合感,要通過環(huán)境貼合算法結(jié)合陀螺儀狀態(tài)、3D結(jié)構(gòu)光數(shù)據(jù)和畫面中物體識別的多種數(shù)據(jù)進行計算,實時通過手機本身的移動來調(diào)整3D貼圖的位置和大小,使其更有真實感。

這樣跨越式的改變有如平地變?yōu)楦呱剑谟脩艉烷_發(fā)者兩端都打開了無盡的想象空間。一方面微博、臉書等等社交媒體可以承接全新的圖像介質(zhì),另一方面開發(fā)者可以打開更廣闊的空間,給市場帶來更多具有創(chuàng)作性的應(yīng)用。

相信3D仿生成像顯然不是強大算力賦能下唯一的創(chuàng)新功能,它更多的是為我們打開了想象空間,讓我們意識到,原來手機已經(jīng)做好了改變的準(zhǔn)備,一切才剛剛開始。我們可以看到在HUAWEI Mate20系列中,建立在AI更強大的識別功能上,創(chuàng)新性地出現(xiàn)了AI識別卡路里功能。對食物拍照后,可以通過數(shù)據(jù)庫匹配識別不同食物卡路里的多少,甚至當(dāng)食物被吃了一半時,還能識別出卡路里的減少。除了物體識別,結(jié)合對網(wǎng)絡(luò)信號狀況深度學(xué)習(xí),HUAWEI Mate20系列還可以對通信模式進行智能識別,對電梯、高鐵等等不同空間進行認(rèn)知和相應(yīng)配適,更主動的調(diào)整和搜尋網(wǎng)絡(luò)信號,減少信號問題帶來的不便。

這些建立在強大算力上的AI創(chuàng)新功能,正在無形間改變手機之于我們的角色定位。從以往的通信工具,變成今天的主動服務(wù)助手。

華為連續(xù)兩年在移動AI領(lǐng)域激進探索,本質(zhì)上是在為手機行業(yè)摸索整體上升通道。今年已經(jīng)可以看到蘋果大規(guī)模跟進AI命題,甚至重復(fù)華為的創(chuàng)新,這對于國產(chǎn)手機來說是從未有過的現(xiàn)象,也給中國手機行業(yè)打開了整體性新機遇。Mate系列在AI命題的持續(xù)前進,很大概率將影響2019的手機市場賽道規(guī)則,消費者期待已久的差異化競爭或許將來臨。而移動AI技術(shù)與軟硬件協(xié)同技術(shù)、云端一體化技術(shù),甚至5G的融合,讓手機產(chǎn)業(yè)的未來充滿了想象力。未來是最貴的資源,而今天移動AI正是終端產(chǎn)業(yè)未來的鑰匙。

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2018-10-24
AI攝影標(biāo)桿仍在,新宇宙又被華為Mate 20悄悄打開了
如果把手機比作一顆星球,那么我們對于AI芯片的期待,來自于它打破手機產(chǎn)品近三五年來近乎一成不變的“平穩(wěn)自轉(zhuǎn)”。

長按掃碼 閱讀全文