當(dāng)50秒的無(wú)聲短片L'Arrivéed'un Train en gare de La Ciotat于1896年首映時(shí)，據(jù)報(bào)道，一些看戲的人為了安全而奔跑，認(rèn)為一輛即將來(lái)臨的火車(chē)就在眼前沖破了銀幕。任何時(shí)候，都是Looney Tunes風(fēng)格的。考慮到原始電影的模糊，低分辨率質(zhì)量，這是一個(gè)瘋狂的想法。值得慶幸的是，那些驚慌失措的電影發(fā)燒友們從未見(jiàn)過(guò)Denis Shiryaev發(fā)行的AI增強(qiáng)版，或者說(shuō)他們絕對(duì)會(huì)倒閉。

Shiryaev利用DAIN和Topaz Labs的Gigapixel AI兩個(gè)公開(kāi)可用的增強(qiáng)程序，將原始素材轉(zhuǎn)換為4K 60FPS剪輯。根據(jù)Topaz Labs網(wǎng)站，Gigapixel AI使用專(zhuān)有的插值算法，可以“分析圖像并識(shí)別細(xì)節(jié)和結(jié)構(gòu)并'完成'圖像”。實(shí)際上，Topaz教會(huì)了AI即使在將圖像放大多達(dá)600%之后也可以準(zhǔn)確地銳化和澄清圖像。另一方面，DAIN可以想象并在現(xiàn)有視頻剪輯的關(guān)鍵幀之間插入幀。該概念與4K電視上的運(yùn)動(dòng)平滑功能相同，只有您的父母才能使用。但是，在這種情況下，它添加了足夠的幀以將速率提高到60 FPS。

這兩個(gè)都是升級(jí)技術(shù)的例子，自1998年第一臺(tái)高清電視投放市場(chǎng)以來(lái)，升級(jí)技術(shù)一直是廣播娛樂(lè)的重要組成部分。老式學(xué)校的標(biāo)清電視以720x480分辨率顯示，可以一次顯示的內(nèi)容總價(jià)值為345,600像素。高清晰度電視顯示的分辨率為1920×1080，即2,073,600總像素，是SD分辨率的六倍，而4K電視機(jī)(分辨率為3840x2160)則需要8,294,400像素。

您需要額外填充600萬(wàn)像素以放大HD圖像以適合4K屏幕，因此升頻器必須弄清楚要顯示哪些像素。這就是內(nèi)插過(guò)程的用處。內(nèi)插基于周?chē)孪袼氐娘@示來(lái)估計(jì)這些新像素中的每一個(gè)應(yīng)顯示的內(nèi)容。但是，有很多不同的方法可以用來(lái)衡量。

“最近鄰居”方法只是用與它們的最近鄰居相同的顏色填充空白像素(因此命名)。它簡(jiǎn)單有效，但會(huì)產(chǎn)生鋸齒狀，明顯像素化的圖像。雙線性插值需要更多的處理能力，但它使電視能夠根據(jù)每個(gè)空白像素的兩個(gè)最近鄰居來(lái)分析每個(gè)空白像素，并在它們之間產(chǎn)生梯度，從而使圖像清晰。另一方面，雙三次插值從其16個(gè)最近鄰居中采樣。與原始圖像相比，通過(guò)結(jié)合雙線性和雙三次插值的結(jié)果，電視可以準(zhǔn)確著色，但圖像仍然模糊，電視可以解決每個(gè)過(guò)程的缺陷，并生成光學(xué)質(zhì)量下降(銳度和偶發(fā)偽像)損失最小的放大圖像。 。

由于插值過(guò)程本質(zhì)上是一個(gè)猜謎游戲，為什么不讓AI做主呢?使用深度卷積神經(jīng)網(wǎng)絡(luò)，諸如DAIN之類(lèi)的程序可以分析和映射視??頻剪輯，然后在現(xiàn)有幀之間插入生成的填充圖像。

效果絕不是完美的。Engadget的視頻制作人Chris Schodt在仔細(xì)檢查后發(fā)現(xiàn)了許多視覺(jué)偽影，包括火車(chē)動(dòng)蕩和行人融合。“簡(jiǎn)而言之，它看起來(lái)像YouTube一樣大小，” Schodt告訴Engadget。“但是把它炸到全屏，我感覺(jué)前景物體和物體內(nèi)部都還不錯(cuò)，但是如果你看物體邊緣或背景物體，接縫會(huì)散開(kāi)一些。”