為什么我們在電視機/投影儀等設備上，觀看體育比賽/動作大片時會感受到畫面的卡頓？

想要弄明白？需要我們先來了解幾個技術名詞：幀率、MEMC技術、刷新率···

幀率影響著視頻的播放效果？

用電視看電影、追劇、看比賽，時常覺得電視在呈現這些內容時表現得并不夠好，這其中與片源有很大關系，即畫面的流暢感和片源視頻的幀率（Frame Rate）有很大的關系，幀率的單位為 fps（frame per second），即每秒播放多少幀畫面。電影普遍采用24幀來呈現其所具有的獨特藝術質感，而主流消費級顯示設備（顯示器、電視機、投影儀）的刷新頻率一般為60/120Hz（即每秒刷新60/120張畫面），現在不少高端產品開始向144Hz/165Hz甚至是240Hz提升（主要表現在電競領域），打起游戲來更“爽”。

“刷新率”就是顯示技術術語，其本質上是指顯示器上的像素每秒刷新多少次。刷新率和幀率很容易被混淆，其實一個用于終端，一個用于片源，不能互換使用，兩個相互協作才能帶來更好的觀看體驗。一旦二者沒有匹配，比如刷新率高于幀率或者幀率高于刷新率，體驗當然不會好到哪里去；當二者同等時，比如在120Hz面板，觀者正在觀看以120fps的幀率拍攝的內容，觀者就將能夠感受到更佳更流暢的平滑度。在60Hz顯示器上觀看以120fps拍攝的視頻，由于顯示器在一秒鐘內只能刷新60次，少于120次，那么就會丟掉一半的畫面來顯示，最終呈現的效果也只有60Hz，畫面會有輕微的抖動。

?

總之，內容的幀率是內容源本身的頻率，而設備的刷新率則是設備播放內容時顯示的頻率。當畫面刷新的頻率不夠高時，在展現一些高速運動場景時會讓觀看者感覺到明顯的卡頓和遲滯。除電影外，各大在線視頻平臺的片源幀率格式也參差各異，使得最終呈現到用戶眼前的畫面會有明顯的拖影、抖動，這樣的情況在觀看物體運動頻繁的體育賽事/動作大片時會更明顯。

至關重要的MEMC技術

目前，硬件性能已經達到解碼60Hz或120Hz的能力，傳輸技術的信號幀率也達到60或120Hz，唯獨視頻內容方面，電影的幀率是24Hz，電視幀率一般是25Hz-60Hz。一般情況下畫面會通過pull up pull down的方式，增加重復幀 （即第一幀重復3次，第二幀重復2次，第三幀再重復3次，第四幀再重復2次……）這樣就把24“fps”的視頻各幀“相對均勻”地分配到了60Hz的播放設備上，這種方法并沒有給視頻添加新的畫面內容，運動畫面的質量也沒有得到真正的改變，雖然是是60Hz的設備，最終呈現的效果也是24Hz的效果。在遇到高速運動場景時就會出現“拖影”或者“模糊”的情況，也就是觀影過程中的“拖影現象”。想要這些補充幀準確無誤的展現出運動畫面應有的效果，就需要強大的運算能力和算法支持，這也就是我們為什么需要MEMC運動補償技術的原因。

?

如何解決以上問題呢？這需要運用MEMC的技術，就是通過對圖像里物體的運動軌跡（運動矢量）進行檢測，在原始幀中間插入運算后的補償幀來提升畫面的流暢性。MEMC，英文全稱為Motion Estimation and Motion Compensation，中文譯為運動預估與運動補償。簡單來說就是通過芯片和算法基于物體運動的軌跡進行預測，最終補償出視頻源中本身沒有的畫面，達到畫面更為流暢的目的，也就是說，有了這項技術，設備側可以突破內容本身的限制，把最終呈現效果提升到和設備最終顯示頻率一致的高幀率。MEMC運動補償技術是一個電視畫質的重要指標。

?

那么海思的MEMC是如何實現神操作的呢？

?

MEMC是如何解決“拖影”的？

MEMC試圖解決的問題便是如何利用算法來智能化得協同刷新率和幀率，使銜接更自然、動勢更順滑，從而消除運動抖動、運動拖尾，讓運動畫面更加清晰流暢。

?

MEMC通過智能算法，根據前后的運動趨勢計算其動態變化，預測下一幀的幀速率，在傳統的兩幀圖像之間加插一幀運動補償幀，將原本24幀的視頻處理成60幀甚至120幀，以彌補幀不足。如果幀速率只有24Hz，MEMC會在每奇數幀之后添加一個額外的幀，并在每偶數幀之后添加兩個額外的幀以顯示60Hz，來匹配在60Hz的終端屏幕上觀看。如果幀速率較高，例如120Hz，MEMC所做的是智能化相應地修改添加的幀數，解決電影中的斷斷續續的問題。MEMC運動補償功能都是需要靠芯片來實現的，對芯片的性能要求較高。同樣是MEMC，因為算法和芯片能力的不同，顯示出來的效果也存在著不小的差別。

?

海思算法去除果凍效應、改善小物體運動

由于所有新增的幀都是運動預測計算出來的，但是畫面中，一般會有運動部分和靜止部分，MEMC必須要精確識別出運動部分，然后進行預測補償，一旦識別出錯或者補償出錯，都會帶來副作用，識別算法有缺陷，會引起果凍效應、光環“halo”和小物體的丟失。補償算法的優劣，影響畫面整體的和諧之美，出現畫面破碎等問題。

?

大家會發現以上動態演示圖中，第二幀插入的幀足球消失了，為什么呢？大部分的MEMC算法模塊中，采用塊匹配的方法計算相鄰的幀之間物體的運動相關性，也就是把圖像切成16x16或32x32像素矩陣的塊，再根據物體的運動矢量（mv）進行插值，由于算法是基于圖像的塊進行計算而非像素級（每個像素進行計算，計算量成幾何級數上升，從芯片成本和可實現性上來看無法實現）導致對于小物體的運動矢量估計不準確，會導致小物體的丟失或出現重疊的現象。為了改善小物體的運動，海思芯片算法基于當前幀的頻率特征計算圖像塊的運動矢量，這樣就能改善小物體的運動矢量計算，大家看第三幀，消失的足球又回來了。

高刷新率這一神操作，是顯示技術的一大亮點。智能科技行業領域的頭部都已經對其展開了發展研究，嘗試讓畫面流暢如絲，為用戶在使用時帶來更好的視覺享受。

海思MEMC運動防抖技術，能夠通過預測及補幀將每秒24幀的畫面調整到最合適的幀數，并減少預測失誤，去除果凍效應及改善小物體運動；此外海思早已把8K MEMC整合到8K SoC內，在8K SoC里增加了MEMC，實現了和8K畫質模塊更好配合，為消費者完美呈現8K身臨其境的畫質體驗，讓您無論是玩游戲、看電影都能體驗全程絲滑無卡頓，流暢畫質快人一步，質感升級，品質加滿！