經(jīng)典影視畫(huà)面承載著一代人記憶。但是,隨著時(shí)間飛逝,模糊、劃痕、噪點(diǎn)……為記憶中的畫(huà)面蒙上了“塵土”。而近幾年的人工智能技術(shù)飛速發(fā)展,又為影像作品帶來(lái)了新的生機(jī)。當(dāng)科技遇上文化,會(huì)碰撞出何種新火花?
京東方技術(shù)創(chuàng)新中心潛心研發(fā)推出8K+AI超高清技術(shù)方案,并基于獨(dú)有的超高清算法模型,有效解決影像清晰度、色彩、流暢度等問(wèn)題,目前已實(shí)現(xiàn)為北京電視臺(tái)、廣東電視臺(tái)等專(zhuān)業(yè)客戶(hù)提供符合超高清標(biāo)準(zhǔn)的AI修復(fù)服務(wù),深度賦能超高清顯示領(lǐng)域。
那么,京東方技術(shù)創(chuàng)新中心所推出的8K+AI超高清技術(shù)方案具體有哪些獨(dú)特技術(shù)優(yōu)勢(shì)呢?
小編請(qǐng)來(lái)了研發(fā)團(tuán)隊(duì),為讀者朋友深度解析這項(xiàng)炫酷的黑科技。
01、圖像處理產(chǎn)品負(fù)責(zé)人:
支持多場(chǎng)景定制化處理,可提升影像修復(fù)效率2-3倍
京東方技術(shù)創(chuàng)新中心 8K+AI超高清技術(shù),在圖像和視頻處理領(lǐng)域具有豐富的技術(shù)積累,可針對(duì)不同的場(chǎng)景需求進(jìn)行定制化的處理。
在現(xiàn)有設(shè)備情況下,京東方AI修復(fù)的自動(dòng)化流程,可以提升影像修復(fù)效率2-3倍,降低人工成本50%以上。
02、圖像處理技術(shù)負(fù)責(zé)人:
圖像分辨率智能提升,“一個(gè)圖像,一套參數(shù)”自適應(yīng)監(jiān)控
采用8K+AI超高清技術(shù)修復(fù)“老照片”,性能十分強(qiáng)悍。
以我們修復(fù)《紫禁城》史料照片為例,有的照片已經(jīng)100多年了,清晰度低,每張照片質(zhì)量參差不齊,存在很大的挑戰(zhàn)。
針對(duì)這些難點(diǎn),我們采用了“先整體后局部”的思路,先通京東方技術(shù)創(chuàng)新中心超分辨率技術(shù),對(duì)圖像的分辨率進(jìn)行自適應(yīng)拉伸,得到高分辨率的圖像。通過(guò)“一個(gè)圖像,一套參數(shù)”的方法,對(duì)圖像處理過(guò)程進(jìn)行自適應(yīng)監(jiān)控,解決參數(shù)不固定的問(wèn)題。關(guān)于人臉處理,我們會(huì)對(duì)人臉進(jìn)行定位,進(jìn)行針對(duì)性的細(xì)節(jié)提升。
具體來(lái)說(shuō),它采用了多重反向遞歸深度網(wǎng)絡(luò),能夠?qū)Φ头直媛蕡D像進(jìn)行倍數(shù)級(jí)提升,最大可實(shí)現(xiàn)16倍拉伸,轉(zhuǎn)化為4K至8K的高分辨率圖像,實(shí)現(xiàn)圖片無(wú)損放大。同時(shí)通過(guò)GAN(對(duì)抗生成網(wǎng)絡(luò),一種機(jī)器學(xué)習(xí)架構(gòu)),智能補(bǔ)充圖像像素細(xì)節(jié)特征,兼顧從宏觀到微觀的效果,使生成的圖像更加逼真、自然。
多重反向遞歸深度網(wǎng)絡(luò),是一種基于深度學(xué)習(xí)的算法模型,它通過(guò)上百層腦神經(jīng)網(wǎng)絡(luò),學(xué)習(xí)圖像的特征參數(shù),采用“漸進(jìn)式拉伸”的方式實(shí)現(xiàn)圖像拉伸,并將每次拉伸之后的圖像都與原始輸入的低分辨率圖像做特征比對(duì),有利于增強(qiáng)拉伸圖像的精度,大大減少圖像特征損失,具有系統(tǒng)占用內(nèi)存小、處理圖像速度快、圖像拉伸視覺(jué)效果好等優(yōu)點(diǎn)。
另外,我們的色彩增強(qiáng)技術(shù)已經(jīng)能對(duì)黑白照片進(jìn)行智能上色,進(jìn)一步拉近觀眾與歷史的距離。
03、圖像畫(huà)質(zhì)增強(qiáng)技術(shù)負(fù)責(zé)人:
壓縮失真修復(fù)技術(shù)+AI HDR調(diào)色算法,讓視頻修復(fù)效果更佳
應(yīng)用8K+AI超高清技術(shù)提升視頻畫(huà)質(zhì)的效果,同樣令人驚艷。
在提升視頻畫(huà)質(zhì)時(shí),如果依照傳統(tǒng)的思路,單純將暗部提亮,會(huì)導(dǎo)致暗部的噪聲、壓縮塊更加明顯。對(duì)此,我們采用了壓縮失真修復(fù)技術(shù),有效抑制視頻暗部的噪點(diǎn)干擾。
此外,我們?cè)O(shè)計(jì)了HDR智能調(diào)色算法模型,通過(guò)有效學(xué)習(xí)調(diào)色師的HDR調(diào)色經(jīng)驗(yàn),形成可適配不同場(chǎng)景的調(diào)色模型池,自適應(yīng)的對(duì)超高清視頻進(jìn)行HDR上變換及不同風(fēng)格的智能化色彩創(chuàng)作。經(jīng)過(guò)智能化HDR調(diào)色,可將超高清視頻擴(kuò)展到HDR標(biāo)準(zhǔn)及BT.2020色域,并且充分利用色域廣度進(jìn)行色彩重映射,有效提升了視頻圖像豐富的色彩及層次,提高了明暗對(duì)比,并且使得色彩表達(dá)更加飽滿,細(xì)節(jié)表現(xiàn)更加豐富。
04、互動(dòng)體驗(yàn)場(chǎng)景設(shè)計(jì)師:
賦能智慧文博,讓藝術(shù)品“活”起來(lái),煥發(fā)蓬勃生機(jī)
京東方技術(shù)創(chuàng)新中心 8K+AI超高清技術(shù),在文博領(lǐng)域也成功實(shí)現(xiàn)應(yīng)用。一方面,8K+AI技術(shù)能夠有效對(duì)藝術(shù)素材進(jìn)行超高清修復(fù),讓素材的可塑性更強(qiáng);另一方面,通過(guò)京東方性能卓越的超高清顯示產(chǎn)品,讓文物展示更人性化,幫助觀眾深入理解文物背后的文化價(jià)值。
目前,我們已經(jīng)為包括故宮博物院在內(nèi)的博物館行業(yè)提供了豐富的數(shù)字展示方案,讓藝術(shù)品“活”起來(lái),煥發(fā)蓬勃生機(jī)!
05、8K+AI Team 技術(shù)總負(fù)責(zé)人:
把AI修復(fù)流程化、工具化和終端化,應(yīng)用前景星辰大海
目前,我們正在將8K+AI超高清技術(shù)運(yùn)用在更廣闊的領(lǐng)域,持續(xù)推進(jìn)將技術(shù)成果賦能遠(yuǎn)程視頻、智慧安防等多個(gè)場(chǎng)景。
同時(shí),我們也在順應(yīng)AI普適化的潮流,把AI修復(fù)變得流程化、工具化和終端化,讓AI修復(fù)更簡(jiǎn)單。
我們希望技術(shù)能夠帶給人們更多的共鳴,更好感受歷史、品味回憶,這是我們技術(shù)團(tuán)隊(duì)的初心。