電腦科學與資訊工程科Computer Science & Information Engineering190012
利用深度學習將黑白影片色彩化 Taiwan
過去,攝影設備只能拍攝黑白圖像的照片或影片,但仍有許多經典電影被記錄下來。如今,攝影設備也在不斷迭代,彩色成像技術和高品質成像技術不斷被更好的技術所取代。因此,如何將黑白圖像轉換為彩色圖像成為一個重要的研究課題。本研究的目的是將黑白影片轉換成彩色影片。我們的方法可以分為兩部分:彩色化模型設計和影片連續性優化。在顏色轉換模型設計部分,我們使用了生成對抗網絡技術,基於U-Net設計5個模型,並使用COCO數據集訓練顏色生成模型。在電影連續性優化部分,我們首先使用景觀數據集中微調的前五個模型中最好的模型。在這個過程中,我們發現模型生成的影片存在顏色不連續的問題。因此,我們設計三套方案來解決,如使用H.264重新編碼生成電影,使用平均像素的色調值提高電影的色調穩定性,ORB預測個別幀。結果表明,影片的色彩轉換效果表現優異。