12月19日,在2019 OPPO開發者大會(ODC19)技術論壇上,OPPO圍繞5G、AI、AR及終端安全等技術方面的規劃與成果展開,聚焦“五大系統能力開放引擎”,與開發者共同探索5G時代的新機遇。
除了技術論壇對OPPO各項技術進行深度講解外,超1000平方米展區中還設立了多個技術項目的體驗區,開發者及合作伙伴可以現場體驗多人AR遊戲、5G雲遊戲、3D手部追蹤、人體3D建模等各項“黑科技”。
5G時代,擁抱智能,萬物互融。5G科技的進步為用戶創造了更便利的生活,技術的革新更為社會發展帶來更高效的運作。
OPPO 在 5G 發展的過程中做出了卓越的貢獻。早在 2015 年,OPPO 便開始著手於 5G 的研究工作,不僅全程參與了 5G 標準的制定,並且作為 5G 終端行業標準的起草單位之一,提交了超過 2500 族 5G 專利的申請,向國際標準化組織 3GPP 累計提交了超過3000 篇的文稿。
據介紹,早在2019年2月份,OPPO就利用5G實現全球首次的微博直播,成功展示了雲遊戲業務。同年5月份,OPPO第一款5G手機成功在歐洲瑞士電信成功上市。
此外,OPPO 還在積極探索未來在個域網和智能家居領域的 5G 邊緣,尋求在工業物聯網層面上的突破,讓 5G 技術的發展惠及更多企業。OPPO希望以5G為支點,撬動AI、AR、IoT等技術融合,助力未來智慧生活。
OPPO AI語音語義:神經機器翻譯引擎將開放
2019年,OPPO機器翻譯團隊取得了不錯的成績。例如,在WMT19競賽中獲得了英中新聞的第四名;在CCMT2019競賽中,獲得了多語言日英專利翻譯冠軍,英中新聞亞軍。
當前,OPPO神經機器翻譯在模型訓練和推理加速方面,做了很多工作。比如Deep Transformer、Fuse BERT into Transformer、AAN、SAN等。隨著這些技術的綜合應用,OPPO神經機器翻譯引擎,已經通過內部測試,與外部競品相比,翻譯性能處於同一水平。目前,OPPO機器翻譯引擎已經落地到OPPO內部很多業務場景中,未來將落地到更多的場景中。
據瞭解,OPPO神經機器翻譯引擎預計在20年將會對外開放在線API,首期將開放中英、英中、中日、日中翻譯接口,其它語種的機器翻譯服務也將會陸續開放。
“黑科技”:3D手勢識別、人體3D建模和混合現實
在技術論壇,OPPO還展示了自研的SLAM算法的“黑科技”,包括人體3D建模和混合現實,以及3D手勢識別。
當前,為了捕捉人體的3D形狀,傳統上有被動解和主動解。當前,3D建模採用主動解決方案,通過精密的 3D 掃描設備實現,該方案需要昂貴的固定設備設置,既不方便,又不適合廣大消費者使用。OPPO人體3D建模基於拍攝單張RGB圖像的方法,用戶可以通過自拍來完成,當然也可以有另外一位幫用戶拍攝,這種方法易於設置,可以滿足日常場景,適合非專業用戶隨時使用。
在3D手勢識別技術上,手的3D跟蹤對於AR/VR是必不可少的組成部分,是下一代最主要的3D人機交互技術,是AR/VR中的鼠標,它在下一代計算平臺的地位類似於多點觸控對於觸屏手機的地位。OPPO為了開發自己的手勢識別算法,購買了專門採集數據,樣本超過兩百萬。基於採集的數據和深度學習,OPPO開發了緊湊、高效、準確、實時、低功耗的3D手部追蹤算法。
ARUnit2.0 連接虛實 連接你我
OPPO 開放平臺的 ARUnit 系統能力,能夠為開發者提供 AR 底層驅動引擎、AR 內容創作工具鏈、軟件 SDK、開發者應用工具和模塊等,幫助開發者降低研發接入平臺的工作量。
ARUnit的追蹤技術使用攝像頭來標識特徵點,並跟蹤這些點隨著時間變化在屏幕上的移動。通過結合移動信息與手機慣性傳感器的數據,ARUnit能夠在手機移動時確認自身的位置和屏幕朝向。
ARUnit對開發者而言,帶來了諸多虛擬化價值。首先,能夠幫助開發者為用戶提供足夠有趣的內容和服務,滿足用戶的使用場景;其次,虛擬世界擁有足夠豐富的資源來支撐開發者實現這樣的內容和服務;再者,物理世界與虛擬世界能夠緊密的對齊、關聯,並導入資源;最後,用戶在物理世界的行為也能夠完整的映射到虛擬世界中。
因此,OPPO在ARUnit2.0中做了如下的升級:空間計算升級,更注重尺度的重要性;環境理解升級,更注重位置的重要性;多用戶體驗,更注重信息的密集性;骨骼跟蹤與手勢識別,更注重互動與趣味性。
此外,全新升級的ARUnit2.0開放計劃也在ODC19技術論壇正式公佈。其中,空間計算升級和多用戶體驗將在2020年Q1開放,而環境理解升級和骨骼跟蹤與手勢識別預計將在2020年Q2開放。
CameraUnit&MediaUnit:影像多媒體能力開放,共建清晰流暢新視界
目前,系統能力與三方應用呈現需求的存在重合與隔斷,用戶體驗存在斷層,通過開放系統能力,可以讓系統與應用體驗相融。因此,OPPO在ODC19宣佈“五大系統能力開放引擎”。
其中,CameraUnit主要側重影像類用戶體驗。CameraUnit的相冊能力可以將相冊中智能人物分類、圖像多標籤分類、地點分類和智能搜索等能力進行封裝,通過ContentProvider以跨進程的方式開放至三方應用,用戶在三方應用選圖片發送時,通過圖片分類和搜索可快速定位到照片,發圖的效率得到前所未有得提升。
在拍攝能力方面,CameraUnit超廣實現了116°超廣鏡頭,打開前所未有的廣闊視野,採用主攝+長焦鏡頭+超廣角鏡頭組合,讓三顆攝像頭「接棒式」實現 16-160mm「全焦段」覆蓋,釋放更多影像創作的自由度,三攝組合內含雙OIS光學防抖,智能感知抖動並校正,拍遠處也清晰。而超級防抖,則同時結合OIS光學防抖和EIS電子防抖,通過多源傳感器信息融合和防抖場景智能分析,陀螺儀頻率提高了2~3倍,從而更加靈敏地感應手機的運動狀態,實現視頻拍攝中的超級防抖。此外,超級夜景功能基於RAW域根據不同攝像頭精心調試的夜景算法,結合各種場景信息,利用平臺DSP加速,可以取得高質量的夜景成像效果。開發者接入CameraUnit的拍攝能力,能夠讓用戶直接操控手機原生相機,拍出更清晰的畫面。
MediaUnit系統能力主要表現在“聽”和“視”方面的用戶體驗上。
在聽覺方面,K歌耳返採用低時延解決方案實現聽唱同步,系統級優化的語音系統,智能美化音色、節奏和音準,同時支持5.1&7.1聲道技術,增強聽音辨位方向感。此外,基於Audio Virtualizer算法,通過耳機還原遊戲內的聲音距離和方位,並支持FRC功能。
在視覺方面,ROI編碼支持23~265格式解碼,且通過軟硬結合,靈活控制編碼,在直播場景或視頻通話場景提高清晰度,保證觀看效果,開啟ROI編碼最高可以節省35%的帶寬。特別值得一提,還有AI視頻插幀,當前視頻領域大部分電影或者電視劇只有24幀或25幀,而手機屏幕的刷新率已經到了90幀甚至更高,藉助OPPO在視頻生產方面的技術,AI視頻插幀能夠為用戶帶來更強的畫面流暢度。
Hyper Boost&Link Boost:共建用戶暢爽新體驗
Hyper Boost是OPPO自主研發的全場景、系統級資源調度優化方案,從系統、遊戲和應用三個層面對智能手機全面加速。Hyper Boost能力目前已通過OPPO開放平臺對外開放,該技術能力接入快速簡單、SDK體積合理、業務兼容性強,已有超過60+款遊戲及應用接入。
Hyper Boost主要包含場景加速、智能幀率、觸控優化三大核心能力。在場景加速方面,對運存、存儲兩塊領域挖掘,讓資源調度更加智能,並率先與引擎公司合作,針對遊戲中對局、團戰、決賽圈、開氮氣等場景進行定製加速。在智能幀率方面,繼續賦能幀率穩定、減少卡頓,通過智能幀頻進行鎖大核提頻,預防和緩解卡頓,讓遊戲幀率更穩定。在觸控優化方面,提供多樣化4D細膩振感,並開放馬達波形效果庫,開放能力聚焦CPU/GPU,通過對Android底層代碼的一一檢查,OPPO優化了大量代碼邏輯,每一幀的響應時間都可以減少3~5毫秒。同時,還對同步信號進行了優化,使得觸控幀可以更快的顯示在屏幕上。
Link Boost主要包含智能鏈路聚合能力、雙Wi-Fi能力和多路TCP能力。智能鏈路聚合能力將無線進行網絡訪問,根據實時進行優化,開啟SSA以後,在Wi-Fi信號很好的時候,開啟了SLA,打開網頁速度提升非常明顯,在Wi-Fi信號很弱時候也會提高。雙Wi-Fi能力能夠智能匹配用戶剛剛連接過的另外一個次Wi-Fi,去輔助網絡加速,讓網絡的分流完全智能化,使得網速達到倍增效果,改善網絡不穩定問題。多路TCP能力能夠允許雙方進行多條TCP的鏈路,充分利用多路徑提高可靠性和吞吐量。
Hyper Boost和Link Boost兩大系統能力,通過軟實力將充分發揮設備硬件能力,與開發者攜手共建用戶暢爽新體驗。
OPPO雲安全為互聯網生態保駕護航
目前,ColorOS 全球月活躍用戶已超3.2億,覆蓋140個國家和地區。OPPO為了保障用戶信息安全,進行了全球化佈局,在東南亞、印度和歐洲建立了相應的技術中心,以應對全球化互聯網信息安全。
在互聯網安全防禦體系建設方面,OPPO積極開展安全組織的建設,包括終端安全、信息安全、安全部門,以及多個安全實驗室,從而保證OPPO用戶的互聯網信息的安全性。此外,為了安全品牌的建設,OPPO上線了全球500家以上的白帽子,並給予豐厚的獎勵。
在移動端的安全能力檢測方面,採用自動化和人工化的檢測,對APP進行滲透分析和安全評估,防止別有用心的應用使用第三方的SDK,以免給用戶帶來安全風險。此外,還有業務防刷和反欺詐SDK,為開發者的APP提供實時的安全服務。
據介紹,今年9月份,OPPO還拿到業內第一個泰爾信息安全五級認證。從硬件安全、系統安全、外圍的接口安全,以及軟件安全和數據安全層面,為用戶及開發者提供更全面的安全保護。未來,OPPO也會在AI安全、隱私安全等研究方向發力。
技術的進步帶來用戶生活的新變化,科技是行業和社會發展的核心驅動力,在萬物互融時代趨勢下,OPPO將持續關注5G、人工智能、AR、大數據等前沿技術,並將致力於構建底層硬件核心技術與系統能力。
意向接入OPPO“五大系統能力開放引擎”、雲安全等各項技術能力的開發者及合作伙伴,可以通過OPPO開放平臺官網接入。
閱讀更多 砍柴網 的文章
