小米10率先使用 驍龍865不止提升性能:AI算力和應用更有看點
- 2019 年 12 月 28 日
- 資訊
全新一代旗艦移動平台驍龍865已經正式發布,預計2020年第一季度就可以看到搭載該平台的產品上市。
從官方公布的數據以及隨後披露出的性能測試數據來看,驍龍865無疑還是Android陣營標杆產品。
驍龍865安兔兔跑分達56萬,但這對於驍龍8系平台來說,只是常規操作,我們已經習以為常。而其不斷增強的AI性能,以及廣泛的AI用例似乎更有看點。
先來回顧一下驍龍865 AI方面數據。由CPU、GPU、DSP、記憶體、快取等模組共同組成的第五代AI Engine,運算能力達15萬億次/秒(TOPS),是驍龍855的2倍多,是驍龍845的5倍。
其中,作為AI Engine核心的Hexagon 698處理器,引入了全新升級的Hexagon張量加速器,算力是上代的4倍以上,能效提升35%。
同時支援深度學習頻寬壓縮,無損壓縮率超50%,可為SoC其它部分釋放頻寬,節省記憶體傳輸而節省功耗。
Adreno 650部分支援16位、32位浮點運算,支援新的AI混合精度指令,算力提升2倍以上。另外,LPDDR5記憶體將頻寬增加30%,有助於優化AI處理。
驍龍865整體AI性能提升非常明顯,那麼這麼強大的AI算力能夠做什麼,也是我們關心的。
在驍龍技術峰會上,高通展示了豐富的AI用例。AI已經並將持續改善我們的終端使用體驗。
1、實時互譯+實時語音轉文字/語音
基於強大的AI算力,驍龍865可以為基於AI的實時翻譯提供支援。
在驍龍技術峰會現場,演示了實時的演講語音英中互譯,且實時轉文字。轉換的正確率、效率都達到了很高的水準。
演示結束,現場觀眾無不發出驚嘆。如此高的互譯速度和效率在移動終端平台上應該尚屬首次。
對於媒體工作者來說尤其適用,將大大提高工作效率,減少不必要的麻煩。
可能未來在大型的會議現場,不再需要速記,不再需要中英同傳,這些都可以依靠AI來實現。
關於實時翻譯的另外一個場景,出國的時候相信大家都一定遇到過語言不通的尷尬。
雖然我們也從小開始就學習英語,但熟練掌握並運用的其實並不多。上述的演示意味著,未來手機上實時語音互譯不是問題。
需要強調的是,不同於常規的翻譯棒產品(需要錄入聲音再翻譯),這一互譯是“實時”的。
以後我們在國外與當地人交流的時候應該是這樣的:對向而坐,手機放桌上,你一言我一語。
他說英語你聽到的是中文,你說中文他聽到的是英語,好像用同種語言交流一樣順暢。沒有等待,沒有任何障礙。相比翻譯棒,這種體驗可高級太多了。
Vlog影片部落格的興起,極大改變了用戶獲取資訊的方式,更多用戶偏向於用Vlog的形式分享生活、分享各種資訊。
而在影片處理中,添加字幕一直都是最耗費時間和精力的步驟,尤其是影片剪輯工作者對此應該深有體會。
在驍龍技術峰會之後,首發驍龍765G移動平台的Redmi K30正式發布。
其中,Redmi帶來了一項頗為惹眼的功能:影片實時字幕。即用戶在錄製影片的時候,可以將用戶所說的話實時生成字幕,並添加到影片中。
它極大簡化了影片剪輯後期的處理時間,優化了效率,讓大眾用戶也能成為專業的Vlog創作者。而這一功能的實現自然也是依託於不斷提升的終端AI算力。
2、手機多攝鏡頭平滑變焦
多攝已經成為手機相機的主流,其主要作用是用不同的鏡頭應對不同的拍攝場景,以實現更好的拍攝效果。
另外一大作用就是通過不同焦段的鏡頭組合實現接力變焦,但現在大多數Android手機上的變焦體驗並不是很好,變焦體驗飽受詬病。
原因在於鏡頭切換時因鏡頭素質的差異,會造成白平衡、色彩等觀感的跳變,非常不順滑。
在驍龍技術峰會上,高通展示了與虹軟合作,通過虹軟全新演算法可實現媲美單反相機的平滑自然變焦體驗。
AI應用於拍照優化很早之前就有了,平滑變焦應該是拍照優化的又一個延伸。
通過大量的實時AI計算,使各個鏡頭呈現的畫面觀感達到驚人的一致,最大程度上消除鏡頭切換時的跳變,讓變焦變平滑。
3、更好玩、更有趣
驍龍技術峰會上,Qualcomm Technologies產品管理副總裁Ziad Asghar展示了LoomieTalk。
該應用程式重點展現了在Qualcomm驍龍865移動平台之第五代AI Engine人工智慧引擎上運行時,利用Qualcomm驍龍神經處理SDK後,Loom.ai實時SDK創建的3D虛擬形象極富表現力。
這些虛擬形象可以在手機的影片會議中實時鏡像面部表情和動作。Loom.ai藉由驍龍移動平台的人工智慧功能,可在移動硬體上大規模高效部署Loomie 3D虛擬形象。
Loom.ai只需使用一張照片,就可創建出一個完全可訂製且具有用戶特徵和動作的Loomie 3D虛擬形象。
它將深度學習與高級CGI相結合,可捕捉帶有微表情的細膩動作,並將其應用到用戶Loomie中。
就現場的實際體驗而言,還是相當震撼的。Loomie 3D通過對使用者的捕捉,可以實時呈現出一個3D的虛擬形象。
即便身處異地,也能通過虛擬形象實現面對面的無距離感的交流,增強員工協作,提高工作效率,所營造出的輕鬆愉快的氛圍同時也可提升企業文化。
4、持續優化手機拍照
前面也已經提到,AI很早就已經應用於手機拍照優化了。
通過對實際環境的捕捉和實時分析,甚至可以令手機的成像水準突破感測器成像能力的天花板。
感測器的成像能力雖然一直都是在逐步提升的,但AI一定更是手機影像的未來。
AI最早應用於手機拍照優化的用例應該就是人像美顏了,通過人臉的精確分析,針對每個人的臉部特徵做針對性優化,避免了整體磨皮、提亮造成的千篇一律。
在AI算力逐步提升之後,不僅照片可以美顏,影片同樣也可以。
現在已經完全可以做到影片中的實時美顏美體,也在一定程度上成就了“全民直播”,人人皆可美,人人皆可做主播。
而到了現在,15TOPS的AI算力可以為手機影像帶來哪些提升?
相機感測器的成像能力是有上限的,無論單位面積多大的進光量,在極限夜間、暗光環境下無論怎麼做演算法優化都不可避免會出現噪點,畫質不佳。
AI降噪則可以突破感測器成像能力上限,通過對畫面的實時捕捉和分析再進行處理,優化畫質,提升純凈度,得到一張觀感更好的照片。
因為手機的內部空間彌足珍貴,手機相機感測器要想獲得更好的畫質,勢必要增大感測器面積和體積,總會有上限。
並且與手機追求高度集成、輕薄化的趨勢相悖。正是因為終端平台AI算力的不斷提升,可以對手機成像做出更精細化的處理。
總結
可以看到,正是依託於驍龍865移動平台強大的AI性能,更多的功能已經得到實現。
而現在我們看到的功能相信還只是冰山一角,未來,無論在影像、還是交互方面,AI還將持續對手機使用體驗做出更深度優化。
對於驍龍8系旗艦平台來說,性能方面的領先,已經是習以為常的常規操作。
而此次驍龍865大幅提升的AI算力以及高通所搭建的AI生態,才更有看點。基於AI,更多的功能演進持續發生,正不斷提升著用戶體驗。
當然,還有更重要的是,小米10將首發驍龍865旗艦平台,明年Q1將正式亮相。