2023臺北科學日
活動內容單
單位:臺北市立百齡高級中學(國中部) 帶隊教師:蔡碩彬
- 活動標題:AI繪圖-我把照片變清晰了~
- 活動類型: □ 實驗 ■ 觀察 ■ 實作
- 適合年齡: □ 全年齡 ■ 10 歲以上
- 活動內容簡述
AI繪圖是近年來科技的新寵,它的發展改變了很多近年來的相機生態,例如美顏、調色、去背景等……都是很實用的工具。這次要介紹的「CodeFormer」修復影像畫質AI工具,它是由南洋理工大學的四位教師所研發的,能藉由AI 模型運算,一鍵將低解析度的照片,自動修復成清晰的影像;操作方式不僅簡單好上手,效果也相當好又自然,且目前是免費使用。我們這次科學日不僅介紹、並探討它背後所運用的模式,程式的特長跟限制,以期了解更多新奇有趣的應用跟未來發展。
- 運用原理和操作步驟
(a) 我們首先使用一個離散的密碼和一個解碼器,通過自重構學習來存儲
面部圖像的高質量視覺部分。
(b) 使用固定的碼本和解碼器,然後我們引入一個代碼序列預測的
Transformer 模塊,對低質量輸入的全局人臉組成進行建模。此外,
可控特徵轉換模塊用於控制從LQ編碼器到解碼器的信息流。*此連接
是可選的,可以禁用它以避免在輸入嚴重退化時產生不利影響,並且
可以調整標量權重 w 以在輸出美化和保真度之間進行權衡。
- 注意事項
- 參考資料(若實驗內容有引用他方所製圖片、文章的部份,請於此處加上來源。)
- Towards Robust Blind Face Restoration withCodebook Lookup TransFormer 網站
https://shangchenzhou.com/projects/CodeFormer/