AI로 할아버지의 1927년 초상화를 복원했고 우리 가족은 40년 만에 처음으로 그의 얼굴을 선명하게 보았습니다

나의 할아버지는 1923년 후난성의 작은 마을에서 태어났습니다. 그의 어린 시절 사진은 정확히 한 장뿐입니다. 그것은 그가 4살이었을 때인 1927년경에 찍은 대략 2x3인치 정도의 흑백 인쇄물입니다. 내가 기억하는 한, 그 사진은 할머니 아파트에 있는 누렇게 변한 앨범 ​​안에 녹화되어 수십 년 동안 형광등 아래서 천천히 희미해졌습니다.

지난 봄에 내가 손에 넣었을 때 그의 얼굴은 거의 알아볼 수 없었습니다. 그의 눈은 두 개의 어두운 그림자였습니다. 그의 입은 희미한 선이었다. 사진의 왼쪽 3분의 1은 1980년대에 발생한 누수로 인해 갈색 물 얼룩으로 덮여 있었습니다. 할머니는 40년 넘게 그 사진에서 그의 얼굴을 선명하게 볼 수 없었다고 말했습니다.

나는 그것을 복원하는 방법을 배우는 데 3주를 보냈습니다. 그 과정에서 나는 많은 실수를 저질렀다. 나는 첫 번째 시도에서 그를 밀랍 인형으로 과도하게 날카롭게 만들었습니다. 두 번째 시도에서 AI가 누락된 세부 사항을 너무 많이 채우게 했더니 완전히 다른 아이처럼 보였습니다. 하지만 네 번째 시도에서 실제로 작동하는 작업 흐름을 갖게 되었습니다. 할머니에게 최종본을 보여줬더니 손끝으로 화면을 터치한 채 오랫동안 아무 말도 하지 않으셨다.

휴대폰 사진이 아닌 좋은 스캔부터 시작해보세요

나의 첫 번째 실수는 휴대폰 카메라로 찍은 사진을 복원하려는 것이었습니다. 앨범 위에 아이폰을 올려놓고 안정감을 유지하려고 노력하며 사진을 찍어봤습니다. 내가 시도한 AI 복원 도구는 사진의 휴대폰 사진에 반사, 고르지 않은 조명, 미묘한 각도 및 원래 손상 위에 자체 압축 아티팩트가 포함되어 있기 때문에 많은 작업을 수행할 수 없었습니다.

실제로 효과가 있었던 것은 평판 스캐너를 사용하는 것이었습니다. 저는 지역 도서관에서 Canon CanoScan을 빌렸습니다. 비용은 전혀 들지 않았습니다. 원본 인쇄물을 600DPI로 스캔하여 TIFF로 저장했는데 그것이 나의 출발점이 되었습니다. 그 차이는 즉각적으로 나타났습니다. 스캔 결과 내 휴대폰 카메라가 완전히 놓친 세부 사항이 포착되었습니다. 종이의 작은 질감. AI가 나중에 아래에 있던 것을 재구성하는 데 사용할 수 있는 페이딩의 미묘한 변형입니다.

스캐너에 액세스할 수 없는 경우 최후의 수단으로 휴대폰 사진을 사용할 수 있습니다. 하지만 사진을 테이블 위에 평평하게 놓고, 창문에서 자연광을 이용하고, 휴대폰을 사진과 완벽하게 평행하게 잡고, TIFF나 최소한 고품질 PNG로 저장할 수 있는 앱을 사용해야 합니다. 기본 카메라 앱 JPEG를 사용하지 마세요. 압축하면 되돌릴 수 없는 세부 정보가 손실됩니다.

AI에 무엇이든 먹이기 전에 큰 피해를 수정하세요

AI 복원 모델은 존재하는 것을 향상시키도록 설계되었습니다. 완전히 파괴된 정보를 재구성하도록 설계되지 않았습니다. 사진에 찢어진 부분이 있거나 이미지의 3분의 1을 덮고 있는 물 얼룩이 있거나 심한 주름이 있는 경우 AI는 다른 모든 부분을 복원하는 것과 동일한 방식으로 손상된 부분을 복원하려고 시도합니다. 눈물의 가장자리를 날카롭게 만듭니다. 물 얼룩의 질감을 향상시킵니다. 그러면 손상이 더욱 날카롭고 영구적으로 보이게 됩니다.

일반 사진 편집기에서 기본적인 정리를 먼저 하는 법을 배웠습니다. 할아버지 사진의 경우 복제 스탬프 도구를 사용하여 가장 심한 물 얼룩을 손상되지 않은 배경 부분의 질감으로 채웠습니다. 나는 그것을 완벽하게 만들려고 노력하지 않았습니다. 목표는 손상의 거친 가장자리를 제거하여 AI가 이를 중요한 이미지 세부 사항으로 처리하지 않도록 하는 것이었습니다. 10분간의 서투른 클론 스탬핑으로 나중에 AI와 싸울 시간을 절약할 수 있었습니다.

찢김과 주름에도 동일한 원칙이 적용됩니다. 기본 편집 도구를 사용하여 물리적 손상을 최대한 부드럽게 처리합니다. 손상되었지만 상세한 시작점보다는 깨끗하지만 흐릿한 시작점을 AI에 제공하십시오. AI는 손상을 처리하는 것보다 흐림을 훨씬 더 잘 처리합니다.

한 번이 아닌 두 번 통과

내 작업 흐름에서 가장 큰 혁신은 모든 것을 한 단계로 처리하려는 시도를 중단했을 때 이루어졌습니다. 초기에는 일반 복원 도구를 통해 사진을 실행하고 모든 것이 한 번에 해결되기를 바랐습니다. 결코 그렇지 않았습니다. 배경은 멋져 보이지만 얼굴은 밀랍처럼 보일 것입니다. 또는 얼굴은 선명해 보이지만 옷의 질감은 부드러운 그라데이션으로 지워집니다.

실제로 효과가 있었던 것은 작업을 두 개의 개별 패스로 나누는 것이었습니다. 첫 번째 합격,ClarifyPix 오래된 사진 복원. 이것은 전반적인 정리를 처리합니다. 전체 이미지에서 먼지, 긁힘, 퇴색 및 일반적인 품질 저하를 제거합니다. 사진이 새 것이었을 때의 전반적인 대비와 선명도를 되살립니다. 이 패스의 비용은 10크레딧이며 표준 스캔 이미지의 경우 약 10초가 걸립니다.

두 번째 패스, 얼굴 복원. 전체적인 사진이 괜찮아 보이면 얼굴에만 전용 얼굴 복원 모델을 실행합니다. 이 모델은 수백만 개의 인간 얼굴을 대상으로 특별히 훈련되었으므로 얼굴의 해부학적 구조를 이해합니다. 눈이 서로 상대적인 위치를 알고 있습니다. 배경이나 옷에 손을 대지 않고도 눈동자, 속눈썹, 입술 라인, 피부결을 복원해줍니다. 이 패스의 비용은 이미지당 4크레딧이며 약 5초가 소요됩니다.

두 패스를 함께 사용하면 한 번의 패스로는 절대 할 수 없는 작업을 수행할 수 있습니다. 일반 복원은 사진이 인쇄된 매체를 고정합니다. 얼굴 복원은 사진 속 인물을 수정합니다. 그것들은 근본적으로 다른 문제이며 근본적으로 다른 도구가 필요합니다.

색상화는 별도의 결정입니다.

흑백 이미지를 잘 보존된 1927년 사진처럼 보이는 것으로 복원한 후 컬러화할지 여부를 결정해야 했습니다. 이것은 생각보다 까다롭습니다. 흑백사진은 그 자체로 무게감이 있습니다. 그들은 역사적인 느낌을 받습니다. 색상화된 버전이 때로는 그렇지 않은 방식으로 실제적인 느낌을 줍니다.

할아버지 초상화를 색칠해보았습니다. AI는 기술적으로 좋은 일을 해냈습니다. 피부톤이 자연스러워 보였어요. 배경 나뭇잎이 적절한 녹색으로 나왔습니다. 그의 옷은 그럴듯한 진한 파란색 음영이었습니다. 그러나 뭔가 문제가 있었습니다. 컬러화된 버전은 실제 사진이 아닌 시대극의 스틸컷처럼 보였다. 오래된 느낌을 잃어버렸습니다. 우리 할머니는 흑백 버전을 더 좋아하셨어요.

내 가족 기록 보관소를 위해 둘 다 보관합니다. 복원된 흑백 버전은 제가 인쇄하여 액자에 넣은 것입니다. 색상화된 버전은 "실험"이라는 라벨이 붙은 디지털 폴더에 있습니다. 일부 사진은 아름답게 채색됩니다. 특히 색상 정보가 의류, 환경, 계절에 대한 유용한 맥락을 추가하는 야외 장면과 단체 사진입니다. 그러나 제가 발견한 인물 사진은 원본 흑백이 더 잘 어울리는 경우가 많습니다. 사진에 따라 마일리지가 달라집니다.

원본 스캔으로 무엇을 할 것인가?

나는 당신에게 경고하고 싶은 실수를 저질렀습니다. 네 번째 시도에서 만족스러운 버전이 나온 후 이전에 실패한 시도와 원본 스캔을 거의 삭제할 뻔했습니다. 내 생각에는 지금은 좋은 버전이 있는데 왜 나쁜 버전을 유지해야 할까요? 그 생각은 잘못된 것입니다.

AI 복원은 해석이다. 복원된 모든 사진은 원본이 어떻게 생겼는지에 대한 모델의 최선의 추측입니다. 이는 수백만 장의 실제 사진을 바탕으로 훈련된 매우 교육받은 추측입니다. 하지만 아직은 추측일 뿐입니다. 계보 목적으로 원본 스캔은 역사적 기록입니다. 복원된 버전은 시각 자료입니다. 아직 존재하지 않는 미래의 AI 모델은 동일한 원본 스캔으로 더 나은 작업을 수행할 수 있습니다. 원본을 삭제하면 그 가능성은 영구적으로 상실됩니다.

나는 이제 복원한 모든 사진을 세 가지 버전으로 보관합니다. "originals"라는 폴더에 저장된 TIFF 형식의 원본 고해상도 스캔입니다. "복원됨"에서 PNG로 복원된 버전입니다. 그리고 가족에게 보내는 "공유"의 작은 JPEG 사본입니다. 원본 스캔은 두 개의 서로 다른 클라우드 서비스에 백업됩니다. 남편의 어린 시절 얼굴을 다시 볼 수 있는 할머니의 능력은 공공 도서관 스캐너의 스캔으로 시작되었습니다. 그 TIFF 파일은 이제 제가 소유한 가장 귀중한 디지털 파일이 되었습니다.

가족을 위해 복원된 사진 인쇄하기

만족스러운 복원 버전을 얻은 후에는 할머니가 실제 사본을 가질 수 있도록 인쇄하고 싶었습니다. 이로 인해 내가 고려하지 않은 완전히 새로운 문제가 발생했습니다.

원본 사진은 약 2 x 3 인치였습니다. 나는 그녀가 돋보기 없이도 세부 사항을 볼 수 있도록 5x7로 인쇄하고 싶었습니다. 즉, 복원된 이미지를 300DPI에서 2100x1500픽셀로 확대해야 했습니다. 복원을 통해 품질이 크게 향상되었지만 원래 크기의 픽셀 수는 600 DPI 스캔에서 여전히 약 1200x800에 불과했습니다. 깨끗한 5x7 인쇄를 얻으려면 더 확장해야 했습니다.

이미 복원된 이미지에 대한 두 번째 AI 업스케일링 작업은 놀라울 정도로 잘 작동했습니다. 4x 업스케일은 복원된 버전을 4800x3200픽셀로 가져왔습니다. 이는 300DPI에서 5x7에 충분합니다. 동네 사진관에서 무광택지에 인쇄했어요. 광택 용지는 남은 결함을 강조하는 경향이 있는 반면, 무광택 용지는 더 관대하고 빈티지 사진에 더 시대에 적합해 보이기 때문에 무광택 마감이 중요했습니다. 인쇄물을 포함한 총 비용은 약 18달러였으며 할머니의 얼굴 표정은 그보다 훨씬 더 가치가 있었습니다.

전체 앨범을 처리하는 방법

할아버지 초상화로 성공을 거둔 후, 저는 야망을 갖게 되었습니다. 우리 할머니는 1920년대부터 1970년대까지의 오래된 가족 사진으로 가득 찬 네 개의 앨범을 가지고 계십니다. 아마도 총 200장의 이미지일 것입니다. 전체 2단계 워크플로를 사용하여 한 번에 하나씩 모두 복원하는 데 몇 달이 걸렸습니다.

컬렉션을 분류해봤습니다. 얼굴이 포함된 사진은 완전한 2단계 처리를 거쳤습니다. 일반 복원과 얼굴 복원. 비용은 각각 약 14크레딧이었습니다. 풍경이나 건물처럼 얼굴이 없는 사진은 10크레딧으로 일반 복원 단일 패스를 받았습니다. 이미 괜찮은 모양의 사진은 완전히 내버려 두었습니다. 모든 사진에 AI 복원이 필요한 것은 아닙니다. 원본 스캔이 일반 보기 크기에서 좋아 보인다면 복원은 필수가 아니라 사치입니다.

효율적으로 배치 스캔하는 방법도 배웠습니다. 대부분의 평판 스캐너는 한 번에 3~4장의 작은 사진을 넣을 수 있습니다. 나는 그것들을 모두 하나의 큰 TIFF로 스캔한 다음 나중에 개별 파일로 분할합니다. 이로 인해 100장의 사진을 스캔하는 데 걸리는 시간이 몇 시간에서 약 40분으로 단축되었습니다. 스캐닝은 지루한 부분입니다. AI 복원은 재미있는 부분입니다. 스캐닝 병목 현상으로 인해 재미있는 부분에 접근하지 못하게 하지 마십시오.

몇 년 동안 보지 않은 앨범에 오래된 가족 사진이 있다면 꺼내어 가장 중요한 사진을 스캔하세요. 얼굴이 가장 잘 보이지 않는 사진부터 시작하세요. AI 복원이 가장 큰 차이를 만드는 부분이 바로 이것이다. 빛바랜 인쇄물에 여전히 무엇이 숨어 있는지, 적절한 도구가 이를 다시 가져오기를 기다리고 있는지 보고 놀랄 수도 있습니다.