Nvidia通過使用AI填充額外的幀來生成令人難以置信的慢速視頻
慢速VS超級慢速
創建慢動作鏡頭是關於每秒捕捉大量幀的。 如果錄製得不夠充分，只要放慢視頻速度，就會變得不穩定，無法觀看 - 除非您使用人工智能來想象多餘的幀。
芯片設計師Nvidia的新研究正是通過深度學習將每秒30幀的視頻變成華麗的240幀每秒慢動作。 本質上，AI系統查看兩個不同的幀，然後通過跟蹤從一幀到下一幀的對象移動來創建中間鏡頭。 這與實際想像人類大腦的鏡頭不一樣，但它會產生準確（但不完美）的結果。
這個過程需要在商業上使用之前進行改進，但是如果改進後，它可以用於在智能手機錄像之後添加慢動作效果。
“雖然可以用手機拍攝每秒240幀的視頻，但以高幀率記錄所有內容是不切實際的，因為它需要大容量的存儲器，而且對於移動設備而言功耗很大，”研究人員在一篇論文中寫道。描述他們在預打印服務器arXiv上的工作。 “出於這些原因和其他原因，從現有視頻中生成高質量的慢動作視頻非常令人感興趣。”
雖然有限制。對於初學者來說，研究人員必須訓練他們的深度學習系統來處理特定類型的素材。所以，為了減慢汽車在水中滑行的視頻，他們必須先用相似的鏡頭對它進行訓練。這可能會限制消費者版本的研究可以將慢動作應用於目標視頻。值得注意的是，這種技術不能產生無限數量的中間幀。沒有數據，計算機就不可能預測真實世界物體的運動和行為。但是，Nvidia的系統最多可以生成7箇中間幀，這足以創造體面的慢動作。
Nvidia的技術看起來比現有的偽造慢動作鏡頭的方法更快更容易。預計不久的將來，手機相機中會出現類似的功能。
分享到:
閱讀更多 華東交大不方便 的文章
