適應高刷新率屏幕,智能手機上的MEMC技術

2020年上半年,搭載高通驍龍865等新旗艦平臺的智能手機接連發布,性能、AI算力、存儲速度都有了飛躍的提升。為了避免性能的浪費,不少旗艦手機還配備了高刷新率的屏幕,為用戶帶來更流暢的操作體驗。評測的過程中,我們通常會選擇支持高幀率版本的遊戲來體驗行雲流水般的畫面觀感,但這並不意味著高刷新率屏幕的應用僅侷限在遊戲中。

每秒24格的藝術

從60Hz到90Hz再到目前的120Hz,手機屏幕刷新率在不到一年的時間裡就得到了翻倍的提升。與之對應的是,部分遊戲也逐漸放開了幀數的限定,《王者榮耀》推出了60fps的高幀率模式,《QQ飛車》適配120Hz屏幕,《和平精英》通過一定的方法也能解鎖120fps模式。可見,硬件的提升,需要應用、內容的同步支持,否則在120Hz刷新率的屏幕上玩30fps模式的遊戲,依然無法感受到行如流水的流暢畫面,這就像在高速路上開拖拉機一樣,依然只有慢吞吞的速度。

適應高刷新率屏幕,智能手機上的MEMC技術

支持高幀率模式的遊戲較少,內容還未完全跟上硬件發展的腳步。

除了遊戲之外,高刷新率的屏幕還有什麼用處?大家第一時間想到的肯定是視頻播放,但是在內容上,高幀率的視頻資源可以說是少之又少。就拿手機拍攝視頻來說,iPhone 11 Pro Max最高支持4K/60fps視頻拍攝,在這一規格下拍攝1分鐘就需要佔用1GB左右的存儲空間。如果你購買的是64GB容量版本,即使什麼應用也不裝,也只夠拍攝1小時。

適應高刷新率屏幕,智能手機上的MEMC技術

高幀率視頻需要佔用更多存儲空間,不到1分鐘的4K/60fps視頻就佔用了634MB。

在電影拍攝中,高幀率的畫面更是鳳毛麟角。法國電影大師讓·呂克·戈達爾將電影視為“每秒24個的真理”,和以30fps作為流暢及格線的遊戲不同,電影只需要24幀就能獲得流暢的畫面感。究其原因,遊戲製作中每一幀畫面都是靜止不連續的,但電影錄製的是動態的畫面。在每秒鐘的24張畫面中,部分畫面是清晰的,部分畫面是模糊的、有拖影的,這種模糊自帶方向性,與下一張畫面產生銜接,能夠讓人腦形成連貫流暢的畫面。

電影是表達的藝術,手法和風格各有不同。從導演的角度來看,不同幀速的電影有不同的風格,24幀的電影擁有獨特的“電影感”,甚至有部分導演在部分片段拍攝中,特意抽去一些畫面,通過減幀的手段來豐富自己的表達手法。比如導演王家衛就在《一代宗師》《重慶森林》和《旺角卡門》等電影鏡頭中適當地運用了抽幀(Step Printing)手法,營造不連貫的迷幻感。

從場景的快速切換和動作表現上來講,24幀的電影會產生不夠流暢的拖影感,只是考慮到製作成本和觀眾習慣,沿用了多年的24幀標準依然是權衡利弊的最佳選擇。就拿大家都愛看的科幻片為例,基於24幀拍攝時,電影的後期特效成本已經高得嚇人,如果以120幀拍攝,意味著增加了4倍的特效工作量,恐怕全部的票房都不夠填補這個窟窿。此外,這類影片還需要支持高幀率的電影播放的放映機才能放映。從《比利林恩的中場戰事》到《雙子殺手》,導演李安曾兩次採用120幀+4K+3D的拍攝技術,但大多數影院放映的依然是“縮水版”。

適應高刷新率屏幕,智能手機上的MEMC技術

▲在《比利林恩的中場戰事》上映時,全球僅有5家影院配備科視Christie Mirage 4KLH RGB激光放映系統,支持120幀/4K/3D電影放映。

填補硬件和內容的斷層

既佔空間,又費成本,以電影、電視劇為主的視頻內容天生自帶著幀率不足的缺憾,堪堪達到流暢的門檻。難道就沒有讓視頻變得更流暢的低成本方法嗎?有。在電視領域,早已出現了彌補內容與技術斷層的MEMC技術。MEMC(Motion Estimate and Motion Compensation)意為運動估計和運動補償,是目前常見的視頻插幀技術。

在電視領域的插幀補償中,曾出現過三種不同的插幀類型,分別是插複製幀、插黑幀和插計算幀。插複製幀只能提升原視頻的幀速,插黑幀能夠稍微減輕拖影感,但效果都不理想,逐漸被淘汰。而插計算幀則是通過運動估計預估畫面中運動物體的軌跡,然後在兩個相鄰幀中間插入一張中間幀,這樣原視頻的幀數就能翻倍,視覺上也會流暢平滑很多。

適應高刷新率屏幕,智能手機上的MEMC技術

插複製幀、插黑幀等技術對觀影效果的提升不夠理想,逐漸在電視上淘汰。

目前,MEMC動態補償技術在電視領域比較普及,但命名各有不同。索尼將其命名為MotionFlow,LG叫TruMotion,三星叫Auto Motion Plus,東芝叫做ClearFrame ,像華為的智慧屏和小米最新的小米電視5 Pro也都支持MEMC技術。以索尼電視上的MotionFlow技術舉例,視頻中的奔跑的馬從左側移動至右側僅有3個畫面,MotionFlow通過算法捕捉到了馬蹄、馬尾以及人的運動軌跡,根據畫面背景自動生成了中間幀,稍微改變了馬尾、馬蹄的位置和人的坐姿,從而增加了畫面的整體流暢感。從技術上看,MEMC對算法的依賴程度極高,如何準確識別移動物體,如何計算生成準確的新幀,取決於算法的智能程度。

適應高刷新率屏幕,智能手機上的MEMC技術

索尼MotionFlow技術原理

對於如此複雜的運算,還需要強悍的硬件支持,所以高端電視通常會配備一個集成MEMC功能的獨立圖像處理芯片,以達到更自然、流暢的插幀效果。現在高端電視的顯示芯片不僅支持倍速驅動,甚至能把視頻插幀達到200幀速率,同時結合插黑幀等方式提高畫面的流暢度,減小拖影現象。在實際應用中,MEMC的效果主要體現在體育賽事類節目中。由於物體運動速度較快以及鏡頭擺動幅度較大,這類節目的畫面又糊又晃,而通過MEMC補償之後,畫面的流暢度會得到質的提升,晃動感也會有所減弱。

MEMC在移動端的新生

儘管MEMC技術在電視領域比較普及,但是智能手機上卻鮮少出現。一方面,高刷新率屏幕的手機面世相對電視來說較晚,機型並不多。另一方面,用戶的需求還未充分得到挖掘,為了實現MEMC而在手機上搭載獨立的顯示計算芯片徒增成本。即便這樣,依然有部分廠商敢於人先,嘗試著在手機上加入MEMC技術。

黑鯊是較早支持MEMC補償的手機品牌,2018年發佈的黑鯊遊戲手機就搭載Pixelworks Iris顯示處理芯片,集成了PixelWorks獨家的MotionEngine技術,該技術的原理是通過運動預估算法,給顯示的畫面插幀,不光可以消除抖動和運動模糊,而且能夠使手機渲染的畫面更加流暢,匹配現在高刷新率的手機屏幕。通過這一技術,黑鯊打造了超級影院模式,有效改善了遊戲、電影及用戶自拍視頻的視覺體驗。

近期發售的OPPO Find X2 Pro屏幕配置非常奢華,分辨率達到3168×1440,屏幕刷新率提升至120Hz,觸控採樣率高達240Hz。為了充分利用120Hz屏幕的優勢,OPPO特別為Find X2 Pro加入獨立的顯示優化芯片,帶來“O1超感畫質引擎”。藉助其中的Motion Clear視頻動態插幀技術,可以將普通30fps視頻優化為60fps以上,從而帶來更順暢的視頻畫面。這項技術目前已經支持騰訊視頻、愛奇藝和優酷三大平臺。

適應高刷新率屏幕,智能手機上的MEMC技術

▲藉助Motion Clear視頻動態插幀技術,OPPO Find X2 Pro能夠帶來更流暢的觀影感受。

在上一期的評測中,我們選擇擁有大量手持攝影鏡頭的《美國隊長2》作為觀看樣片,通過Motion Clear自適應優化,影片中原本眼花繚亂難以辨別的搏鬥場面變得順暢清晰。觀看足球或者賽車競速等體育賽事類節目時,OPPO Find X2 Pro也帶來了別開生面的體驗,畫面的流暢度會得到質的提升,晃動感也會有所減弱。

4月2日,一加手機官方公佈了一加8系列屏幕的更多信息。除此前公佈的同時支持2K分辨率和120Hz等特點外,一加8系列還加入了最高120幀的MEMC視頻插幀技術。在應用方面,一加8將支持Bilibili、騰訊視頻、騰訊體育、優酷、愛奇藝、MX Player等國內外主流在線視頻平臺與應用。

適應高刷新率屏幕,智能手機上的MEMC技術

▲根據官方透露的消息,一加8的MEMC技術支持諸多在線視頻平臺和應用。

寫在最後

高刷新率屏幕逐漸成為旗艦手機的標準配置,甚至會很快在中端手機上普及,在目前高幀率視頻內容缺乏的情況下,MEMC技術將會是拉開手機觀影體驗差異的有效手段,更好地發揮了高刷新率屏幕應有的作用。不過完全照搬電視領域的經驗顯然不合適,無論是MEMC技術還是高幀率屏幕的應用,都對手機性能、續航、散熱提出了更高的要求,可以說牽一髮而動全身,廠商還需要具體機型具體分析,解決其中的能耗平衡問題。


分享到:


相關文章: