在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AI助力,老片修復一直在路上

KSiH_idg_capita ? 來源:大數據文摘 ? 2020-06-03 10:53 ? 次閱讀

這個視頻來自一位名叫“大谷Spitzer”的博主,據他所說,接觸老片修復是一個偶然,整個項目也只花了7天時間就順利完成了。

先來一起看看這驚人的修復效果。

老視頻

修復后效果

這樣的畫面大大地滿足了網友們的好奇心。視頻一經發布,在24小時內就有了將近50萬的點贊量,10萬+次的轉發和接近3萬的留言。修復后的視頻把當時的北京城演繹得活靈活現,下邊的片段中,左下角小哥呆呆地看著鏡頭,連細微的表情都清晰可見,青澀中帶有一點可愛。想象一下這位表情憨厚的小哥來自一百年前,不禁讓人感慨萬千。

怪不得網友們紛紛贊嘆。有網友表示,不僅整體氛圍沒話說,連細節部分也分毫畢顯,“每個人臉上都是新奇又不敢接近的表情”。

甚至有網友留言表示,“博物館應該收藏你的作品”!

博主在視頻最開始就說道,想用技術為社會做一些有意義的事情,懷著仰慕的心情,筆者聯系到了這位“大谷Spizer”,來看看他是怎么說的吧~

7天完工,難在顯卡

整體滿意,顏色上還有不足

自稱將AI視為業余愛好的大谷如今身在紐約,他透露說,其實這次接觸老片修復純屬偶然,在搜索其他資料時候,偶然間在YouTube看到了人民日報上傳的一段老北京視頻,在視頻里,100年前的人們恰好也在看鏡頭、和看視頻的人形成了“對視”時,大谷十分有感觸:“有一種穿越時空的感覺”。在這基礎上,他自己又恰好了解相關技術,為何不將老片上色補幀,做成活靈活現的60幀,和大家分享呢?

100年前熟人見面打招呼的方式

具體到操作上,根據大谷介紹,可以大致分為補幀、擴分辨率、上色三個環節,每個環節也都用了不同的工具,整體框架的流程則主要參考了Denis Shiryaev在社交媒體上分享的經驗貼。

大谷說道,整個項目只用了7天時間,大部分都是硬性的時間消耗,比如補幀需要一到兩天,擴分辨率至少一天,上色也需要花費一天時間,再加上要做到4K60fps,渲染速度很慢。多方考量之下,他把人民日報14分鐘的原片剪到了10分鐘。

相比而言,去年國慶164分鐘修復版《開國大典》為人們還原了三次戰役勝利到開國大典的歷史過程。除了借助AI,膠片的撕裂、劃痕等都是專業的修復師一幀一幀地修補。“修復過程中,我們70%的時間都在完成資料片鏡頭的修復工作,”負責該片修復工作的三維六度公司的首席技術官周蘇岳曾說道。雖然修復時間只用了40天,但這卻是600人每天工作20小時的奮戰結果!

除了硬性的時間消耗,大谷還笑稱,最大的問題就是自己筆記本電腦的顯卡不夠好,“要1070的顯卡才帶得動,否則會out of memory”,迫不得已之下向女朋友求了助。

對于最后的結果,大谷表示:“還是比較滿意的”,不過在顏色上還存在可以改進的地方。

在視頻中,相信大家也會看到時不時會出現顏色跳來跳去的情況,大谷表示,在補幀之前用工具把老電影中經常出現的畫面閃爍去掉了,否則會更嚴重,整體的色彩上,AI的渲染效果也明顯偏淡。

除此之外,大谷這次利用的是國外的一套模型,顯然無法直接將其套用到100年前的中國影片修復上,在顏色上就無法做到歷史性的準確,視頻中的上色都是AI學習的成果,雖然膚色大致還原了,但是在紅綠服裝等方面的真實性還有待商榷。

也正是考慮到這些不足,大谷對去年參與《開國大典》修復的工作人員表達了敬意,“AI沒辦法做到藝術家那么準確,尤其是在歷史方面,而《開國大典》對歷史準確性的要求更高”,隨后他也打趣地說道,或許可以“讓AI看看清宮劇,提升一下準確率”。

就像大谷在視頻開頭所說,他想用技術做一些對社會有意義的事,在這次視頻爆紅之后,他表現得相當豁達,“太深刻的大意義倒也說不上,主要是想借此讓人們對歷史有所反思。”不少網友指出,視頻中幾乎看不到女性,這正是歷史生動性的體現,既有光鮮也有不足,讓大家意識到現在的生活是多么來之不易。

同時,作為老北京人,大谷也想通過視頻分享他的切身感受,讓更多人看到一百年前的民俗,“尤其是上了色幀數提高之后,感覺確實不一樣,也感慨這一百年的變化”。

對于目前收到得反饋,大谷表示“完全沒想到”,他看了很多評論,也受感觸于一些留言,還有人私信向他表示,給太姥姥看后,也很懷念那個年代。

大谷透露道,這其實是他第一次嘗試做視頻修復,后續或許會出一期視頻介紹一下具體的操作。對于后續的視頻更新計劃,他想要介紹一下國內已經成熟的語音修復技術。

AI助力,老片修復一直在路上

對于這次用到的技術,大谷表示,上色主要還是應用在黑白照片和電影上,補幀技術就可以遍地開花了,比如修復像素動畫的跳幀問題,或者在動畫領域加以應用,因為動畫很多是12幀/秒,甚至6幀/秒,補幀之后效果很好,也終于可以看更流暢的EVA了。

作為一名獨立游戲開發者,大谷透露他因為做游戲開發接觸到AI,起初想要了解AI能否為他節省時間,后來發現AI能做的不止這些,在社會公益上也有不少應用,比如這次的老片修復。

正如大谷所說,這次的視頻修復技術管線參考自Denis Shiryae的影像修復教程,針對Denis的歐美老片修復,大谷也做過漢化視頻進行了專門的介紹。

【AI高清修復】1906大地震前的舊金山

視頻鏈接:

https://www.bilibili.com/video/BV1Uf4y1m72n

Denis Shiryaev通過神經網絡修復老視頻的內容今年在油管爆紅了一陣子,他使用Topaz Labs的Gigapixel AI和DAIN圖像編輯應用程序將19世紀的膠片縮放到4K分辨率,不僅將素材增加到4K,還將幀率提高到每秒60幀。

Shiryaev最火的作品是用Gigapixel AI將1896年拍攝的50秒無聲短片《火車進站》(the Arrival of a Train at La Ciotat Station)做成了4K格式,把模糊的原片做成了高清畫質,完全符合當下的高清視頻標準。

盡管存在一些缺陷,如圖像會出現跳躍或某些細節依舊模糊,但已經很棒了!

Gigapixel AI軟件使用一種專有的插值算法來分析圖像,它可以使圖像更清晰——甚至在放大了600%之后。

再來說說DAIN(深度感知視頻幀插值),它可以將幀想象并插入現有視頻剪輯的關鍵幀之間。換句話說,DAIN首先分析并映射視頻片段,然后插入在現有圖像之間生成填充圖像。

為了在這段1896年的視頻中達到同樣的效果,Shiryaev添加了足夠多的圖像來將速度提高到60幀每秒。因此,DAIN自動生成,然后在最初記錄的24張圖像之外,每秒添加36張額外的圖像。

Shiryaev的“火車”的視頻修復版本看起來像是一部使用智能手機或GoPro拍攝的最新電影。與原始視頻相比,效果非常驚人,尤其是在新版本中獲得了流暢性。列車上的陽光反射和月臺上的女士珠寶都被記錄的很完整,也許是最顯著的改進之一。

Shiryaev也用神經網絡對這一修復視頻進行了著色:從一堆彩色照片開始,將它們轉換為黑白,然后訓練神經網絡以重建彩色原稿。

修復后的視頻傳送門:

https://youtu.be/EqbOhqXHL7E

Shiryaev的新技術隨之在技術圈火了起來,激發了包括大谷在內的更多技術人,修復珍貴的影像文獻。

除了上文提到的《開國大典》,在老片修復上,AI應用于影視制作的新技術——“中影·神思”系統的開發,能縮短修復電影所需時間的四分之三,成本可以減少一半,目前已成功應用于《厲害了,我的國》《血色浪漫》《亮劍》等多部影視劇的圖像修復與增強當中。

IDG資本被投企業愛奇藝也推出了其自主研發的視頻增強技術Zoom AI,來為電影修復提出解決方案。這是業內第一個利用較低成本、將深度學習技術應用在視頻畫質增強場景中的方案。

但不可否認的是,這種技術如果被有惡意的人使用,例如,可以用于制作“偽造品”并允許視頻中的身份盜用,也會導致巨大的社會問題。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 視頻
    +關注

    關注

    6

    文章

    1949

    瀏覽量

    72981
  • AI
    AI
    +關注

    關注

    87

    文章

    31155

    瀏覽量

    269496

原文標題:AI修復的真實影像,帶你瞬間穿越回100年前

文章出處:【微信號:idg_capital,微信公眾號:IDG資本】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    LDC1614EVM一直處于紅燈狀態,為什么?

    LDC1614EVM一直處于紅燈狀態,根據資料板子一直在自我測試,但是應該自我測試完之后就可以使用了,一直處于自我測試階段,不能使用
    發表于 01-03 06:53

    ADS1216上電后采樣到的值一直在緩慢減小,為什么?

    我用的AIN0和AIN1差分輸入采樣,用恒壓源提供的采樣電壓,幾十毫伏的,PGA設置的64倍,上電后采樣到的值一直在緩慢減小,要經過好幾個小時才能穩定住,而且斷電之后和下次上電之間間隔的時間越長,上電時的采樣值與之后的穩定值相差越大
    發表于 12-27 08:44

    dac8760一直沒輸出,而且ALARM引腳一直輸出高電平,是什么原因?

    最近,我和同學一直在調dac8760,但一直沒輸出,而且ALARM引腳一直輸出高電平。不知道是什么原因,求解答。謝謝
    發表于 12-27 07:06

    ADS8331 spi2.125Mhz通信速率下,第次讀取的數據一直在32865附近上下,為什么?

    1、就是spi2.125Mhz通信速率下,第次讀取的數據一直在32865附近上下,需要訪問同個通道兩次,第二次才獲得正確數值,這是為什么?發送給芯片的工作模式為E7FD,與ST
    發表于 11-13 06:07

    LMX2594鋸齒掃頻8-12G,頻譜儀卻一直在7.3-8G之間也有信號,為什么?

    LMX2594: 鋸齒掃頻8-12G,頻譜儀卻一直在7.3-8G之間也有信號,這是為什么,怎么解決?
    發表于 11-08 08:22

    mic口不接任何麥克風,但是aic23data的值一直在改變,請問是為什么?

    =aic23data; 以上程序調試的時候,mic口不接任何麥克風,但是aic23data的值一直在改變,請問是為什么?理論上來說是不變的。
    發表于 10-14 06:16

    照TPA3112D1的datasheet的典型應用電路焊接了個音頻功放,出來的波形一直在失真或出不來,為什么?

    我照TPA3112D1的datasheet的典型應用電路焊接了個音頻功放,但出來的波形一直在失真或出不來,這是什么原因?輸入和輸出及電源的這些GND都可以接在起嗎?
    發表于 09-09 07:25

    單片機燒錄程序時為什么一直在檢測

    單片機燒錄程序時,如果軟件一直在顯示“正在檢測單片機”,可能是由多種原因導致的。以下是些常見的原因及其解決方法: 1. 連接問題 USB轉串口接觸不良 :檢查單片機與電腦的連接是否穩定,可以嘗試
    的頭像 發表于 09-02 09:57 ?5121次閱讀

    用OPA695做了10倍放大,從1Mhz到100Mhz放大倍數一直在縮小,還失真,為什么?

    我用OPA695做了10倍放大 但是從1Mhz到100Mhz放大倍數一直在縮小,而且還失真,OPA694壓擺率4500應該不會失真啊!PCB和原理圖附件里Rf/Rg是750歐和39歐。
    發表于 08-27 06:31

    STM32F105RC USB配置成Mass Storage Class,插上U盤,一直在SOF這里中斷,是什么原因?

    STM32F105RC USB配置成Mass Storage Class,插上U盤,一直在SOF這里中斷,請問是什么原因,謝謝!
    發表于 07-26 06:40

    編譯ESP8266_RTOS_SDK-master中的project_template項目后,串口打印看一直在boot中循環,為什么?

    編譯ESP8266_RTOS_SDK-master中的project_template項目后,把文件燒到板子中,串口打印看一直在boot中循環
    發表于 07-12 07:46

    modustoolbox3.0打開不了設備配置器 ,一直在轉圈圈怎么解決?

    我的modustoolbox 打開不了設備配置器 ,一直在轉圈圈。我嘗試卸載重裝,但是并不能解決我的問題
    發表于 07-04 06:46

    XC2365應用區跳轉啟動區程序中的特定地址一直在循環,為什么?

    你好,我需要你的幫助。 非常感謝 程序從啟動區跳轉到應用程序區是正常的,但從應用程序區跳轉到啟動區后,應用程序區的程序不能正常運行,而是個地方循環。 程序一直在 0x00C00090 處循環
    發表于 05-22 06:18

    英偉達為什么越漲越便宜?英偉達的市盈率一直在下降?

    英偉達為什么越漲越便宜?英偉達的市盈率一直在下降? 2023年英偉達的股價漲了兩倍多;龍年開年之后,英偉達股票繼續猛漲,2024年以來英偉達的股價上漲超過87%。 但是為什么分析師說英偉達越漲越
    的頭像 發表于 03-12 18:02 ?1835次閱讀

    一直在調pmsm無速度的仿真,但是波形總是不對是為什么?

    一直在調pmsm無速度的仿真,但是波形總是不對,轉速甚至是負的。。。用的反電勢積分法。就是目前能正轉了。但是僅限于空載情況下某個特性參數下才會出現正轉,速度一直是且封頂900(可能是電機參數關系
    發表于 02-06 06:49
    主站蜘蛛池模板: 日本黄色高清视频网站| 性免费网站| 黄色大片网| 四虎永久在线精品网址| 最新亚洲一区二区三区四区| 四虎国产精品4hu永久| 国产黄色在线观看| 日本加勒比在线精品视频| 色多多视频在线| 欧美亚洲专区| 4hc44四虎www在线影院男同| 午夜视频在线看| 好男人社区www在线观看| 色多多18免费观看| 一级特黄国产高清毛片97看片| 色视频免费在线| 欧美有码视频| 香蕉久久夜色精品国产小说| 成人精品第一区二区三区| 黄色一级视频网| 亚洲黄色影片| 1024手机免费看片| 奇米在线| 亚洲精品系列| 男女爱爱是免费看| 天堂在线看| 一区二区三区亚洲视频| 久久久久国产| 成人在线天堂| 色视频久久| 亚洲卡一卡2卡三卡4卡国色| 婷婷在线观看香蕉五月天| 欧美成人观看免费全部完小说| 午夜婷婷网| 一级特黄aa大片一又好看| 色吧亚洲欧美另类| 中文字幕亚洲一区婷婷| 人人爽影院| 欧美黄色大片免费| www视频在线观看天堂| 日本动漫在线看|