휴대폰 사진을 실제로 고치는 방법을 알아낸 이후로 내 DSLR은 먼지만 쌓이고 있습니다

저는 24-70mm f/2.8 렌즈가 장착된 Sony A7III를 소유하고 있습니다. 전체 설치 비용은 약 3,000달러였습니다. 올해는 정확히 11장의 사진을 찍었습니다. 열하나. 한편 내 아이폰 카메라롤에는 같은 시기의 사진이 847장 있다. 최고의 카메라는 바로 당신과 함께 있는 카메라입니다. 그 말은 다들 아시죠. 하지만 당신이 가지고 있는 카메라의 사진은 당신의 옷장에 있는 카메라보다 여전히 더 나빠 보입니다. 그리고 그것은 수년 동안 나를 괴롭혔습니다.

약 4개월 전, 저는 DSLR을 가지고 있지 않은 것에 대한 죄책감을 버리고 대신 소프트웨어와의 품질 격차를 줄일 수 있는지 알아보기로 결정했습니다. 전화 센서는 작습니다. 휴대폰 렌즈는 플라스틱입니다. 휴대폰 이미지 처리는 최대 확대 시 품질이 아닌 속도와 Instagram을 위해 설계되었습니다. 그러나 AI 향상 모델은 충분히 좋아져서 얼마나 가까이 다가갈 수 있는지 알고 싶었습니다. 그 결과는 나를 놀라게 했습니다.

나는 AI가 100% 줌에서 휴대폰 사진을 DSLR과 구별할 수 없게 만든다고 주장하지 않을 것입니다. 그렇지 않습니다. 센서 크기와 광학 유리의 물리학은 여전히 ​​중요합니다. 그러나 대부분의 사람들이 실제로 사진을 보는 방식, 화면 및 작은 인쇄물에서 AI 향상 후의 격차는 예상보다 훨씬 작습니다. 다음은 제가 찍은 거의 모든 휴대폰 사진을 4개월간 개선하면서 배운 내용입니다.

휴대폰 카메라가 지속적으로 잘못되는 세 가지

지난 몇 년 동안 휴대폰 카메라는 눈에 띄게 좋아졌습니다. 전산 사진, 다중 프레임 스태킹, AI 기반 장면 감지 기능을 통해 전용 카메라와의 격차가 많이 줄어들었습니다. 그러나 거의 모든 휴대폰 사진이 잘못되는 세 가지 구체적인 사항이 있으며, 이 세 가지 사항이 AI 향상으로 가장 잘 해결됩니다.

첫째, 소음 감소. 전화 센서는 작습니다. 밝은 일광이 아닌 다른 환경에서도 사용 가능한 이미지를 얻기 위해 휴대폰에서는 공격적인 소음 감소 기능을 적용합니다. 이 노이즈 감소는 센서가 무작위 변화를 감지한 이미지 영역을 부드럽게 하는 방식으로 작동합니다. 문제는 노이즈 감소 알고리즘이 항상 노이즈와 미세한 질감의 차이를 구분할 수 없다는 것입니다. 잔디가 녹색으로 흐릿해집니다. 패브릭 질감이 사라집니다. 피부는 마치 뷰티 필터를 씌운 것처럼 보입니다. 휴대폰은 눈에 보이는 결을 눈에 보이는 매끄러움으로 바꾸었고 결과는 부자연스러워 보입니다.

둘째, 지나치게 선명하게 하는 것입니다. 노이즈를 완화한 후 휴대전화는 선명도를 적용하여 이미지를 다시 선명하게 만듭니다. 이렇게 하면 고대비 가장자리 주위에 후광이 생성됩니다. 밝은 하늘을 배경으로 한 건물의 휴대폰 사진을 보세요. 샤프닝 알고리즘이 대비를 강화한 지붕선 주변에 얇은 흰색 윤곽선이 표시됩니다. 가장자리는 인위적으로 선명해 보이며 거의 나쁜 HDR 효과처럼 보입니다. 이것은 모든 것 주위에 윤곽선을 그려 자체 소음 감소를 보상하려는 전화기입니다.

셋째, 다이내믹 레인지 압축입니다. 휴대폰 센서는 동적 범위가 제한되어 있습니다. 더 큰 센서보다 밝은 하이라이트는 흰색으로 날아가고 어두운 그림자는 검은색으로 부서지는 속도가 훨씬 빠릅니다. 전화 처리는 그림자를 들어올리고 하이라이트를 당겨서 보상하려고 시도하지만 너무 지나친 경우가 많습니다. 결과는 모든 것이 중간톤 회색인 평면 이미지입니다. 진짜 흑인은 없어요. 밝은 흰색은 없습니다. 깊이가 부족한 균일하고 평평한 노출입니다.

AI 향상으로 휴대폰 사진에서 실제로 수정되는 것

AI 업스케일링 및 향상 모델은 휴대폰에 내장된 처리 방식과 다르게 이러한 문제에 접근합니다. 휴대전화는 그래야 하기 때문에 밀리초 안에 처리됩니다. AI 향상은 가능하기 때문에 몇 초 밖에 걸리지 않습니다. 이러한 추가 처리 시간을 통해 AI는 무엇이 텍스처이고 무엇이 노이즈인지, 무엇이 엣지인지, 무엇이 압축 아티팩트인지에 대해 더 스마트한 결정을 내릴 수 있습니다.

아이폰으로 찍은 벽돌벽 사진으로 테스트해봤습니다. 원래 전화 출력은 예상했던 것과 같습니다. 소음 감소로 인해 벽돌이 약간 번진 것처럼 보였습니다. 박격포 선에는 지나치게 선명하게 만든 희미한 흰색 후광이 있었습니다. 전체 이미지는 휴대폰 사진이 완벽한 조명에서 나올 수 없을 정도로 밋밋하고 과도하게 처리된 모습이었습니다. 나는 그것을 사용하여 2배 업스케일을 통해 실행했습니다.ClarifyPix AI 업스케일링그 차이는 즉시 눈에 띄었습니다.

벽돌 질감이 돌아왔습니다. 완벽하지는 않습니다. 미세한 입자 중 일부는 실제로 거기에 있었던 것을 복구하는 것이 아니라 거기에 무엇이 있어야 하는지 예측하는 AI였습니다. 하지만 전체적인 인상은 벽돌을 주황색 직사각형으로 다듬은 사진이 아니라, 벽돌 표면이 보이는 사진이었습니다. 모르타르 라인은 후광 없이 깨끗했습니다. AI가 전화 처리 방식처럼 대비를 평탄화하지 않았기 때문에 색상이 더 깊이 있었습니다.

AI는 본질적으로 휴대폰 처리 파이프라인의 손상을 복구합니다. 센서는 충분한 정보를 포착했습니다. 렌즈는 세부 사항을 충분히 해결했습니다. 그러나 휴대폰의 이미지 신호 프로세서는 속도와 파일 크기를 절충하여 유용한 질감과 대비를 버렸습니다. AI 강화로 손실된 내용 중 일부를 복구합니다.

모든 휴대폰 사진에 개선이 필요한 것은 아닙니다.

4개월 동안 제가 찍은 휴대폰 사진의 약 3분의 1을 향상시킨 후에 저는 선택하는 법을 배웠습니다. 일부 사진은 AI 향상으로 인해 큰 이점을 얻습니다. AI가 속하지 않는 세부 사항을 추가하기 때문에 다른 것들은 개선 후 더 나빠 보입니다. 어느 것이 나에게 많은 크레딧과 많은 나쁜 결과를 절약했는지 알 수 있습니다.

복잡하고 자연스러운 질감이 있는 사진이 가장 큰 이점을 얻습니다. 벽돌, 돌, 나무, 직물, 단풍, 머리카락, 모피. 이는 전화 소음 감소가 파괴되고 AI 향상이 복구하는 텍스처입니다. AI 강화 후 숲 바닥 사진에는 전화 처리를 통해 녹색 진흙으로 변한 개별 나뭇잎과 이끼 질감이 표시됩니다. 인물 사진은 일반적으로 원하든 원하지 않든 기본적으로 켜져 있는 휴대폰의 뷰티 처리로 인해 부드러워진 결과 대신 실제 피부 질감을 보여줍니다.

크고 부드러운 영역이 있는 사진은 가장 적은 이점을 얻습니다. 구름 한 점이 떠 있는 푸른 하늘의 사진입니다. 해질녘의 잔잔한 호수 사진입니다. 흰 벽의 사진입니다. 이 이미지들은 처음부터 질감이 별로 좋지 않습니다. AI는 회복할 것도 없고 날카롭게 할 것도 없습니다. 다이내믹 레인지가 약간 향상될 수 있지만 그 차이는 눈에 보이지 않을 정도로 미묘합니다. 질감이 있는 사진에 대한 크레딧을 저장하세요.

사람의 얼굴이 포함된 사진은 특별한 경우입니다. 일반 AI 업스케일러는 얼굴 특징을 다른 텍스처와 동일하게 처리하기 때문에 얼굴을 약간 부자연스럽게 만들 수 있습니다. 일반 업스케일 이후 전용 얼굴 복원 패스를 사용하면 이 문제가 해결됩니다. 얼굴 모델은 인간의 얼굴을 대상으로 특별히 훈련되었으며 왜곡 없이 향상될 만큼 해부학적 구조를 잘 이해합니다. 모든 사진에 대해 이 작업을 수행하면 비용이 추가되지만 관심 있는 인물 사진의 경우 2단계 접근 방식이 그만한 가치가 있습니다.

실제로 DSLR에 얼마나 가까운가요?

처음에 했어야 했던 비교를 직접 해봤습니다. 같은 장면. 같은 조명. 동일한 구성. AI로 강화된 iPhone으로 찍은 사진 한 장. 동일한 초점 거리와 노출로 Sony A7III로 촬영한 사진 한 장. Lightroom에서 정상적으로 처리되었지만 AI 향상은 적용되지 않았습니다. 그런 다음 나란히 비교해 보았습니다.

결과는 생각보다 가까웠어요. 너비가 약 2000픽셀인 인스타그램 크기에서는 맹목적인 비교를 통해 어느 것이 어느 것인지 진정으로 알 수 없었습니다. 전문 사진작가인 친구는 내가 그녀에게 10켤레를 보여줬을 때 약 60% 정도 정확하게 사진을 찍었습니다. 그것은 무작위 추측보다 거의 낫지 않습니다. 그녀는 선명함이나 디테일이 아니라 피사계 심도의 차이와 미묘한 색상 표현을 구별하기 위해 찾고 있다고 말했습니다.

4K 모니터에서 100% 확대하면 차이가 눈에 띄게 나타납니다. DSLR 사진은 멀리 있는 질감의 디테일이 더 세밀합니다. AI가 강화된 휴대폰 사진은 가장 세밀한 부분까지 약간의 처리된 품질을 가지고 있습니다. 선명도는 있지만 캡처된 것이 아니라 생성된 것처럼 보입니다. 설명하기가 어렵습니다. 실제 가죽 질감과 아주 좋은 가죽 렌더링의 차이와 비슷합니다. 일반적인 보기 크기에서는 볼 수 없습니다. 전체 확대/축소에서는 가능합니다.

인쇄물의 경우 임계값은 약 8x10인치입니다. 8x10으로 인쇄된 AI 강화 휴대폰 사진이 좋아 보입니다. 대부분의 사람들이 의문을 제기하지 않을 만큼 선명합니다. 11x14 이상에서는 차이점이 나타나기 시작합니다. DSLR 사진이 그대로 유지됩니다. 기본 렌즈 해상도가 처음부터 존재하지 않았기 때문에 휴대폰 사진은 개선 후에도 약간 부드러워 보이기 시작합니다. AI는 센서가 캡처한 내용을 향상시킬 수 있습니다. 렌즈로 해결되지 않은 광학 해상도는 생성할 수 없습니다.

AI 향상을 위해 촬영할 때 실제로 중요한 설정

나중에 AI 강화를 통해 사진을 실행할 예정이라면 휴대폰에서 바로 올릴 사진과는 다르게 촬영해야 한다. 휴대폰 카메라를 사용하는 방법에 대해 몇 가지 사항을 변경했는데 개선 결과에 눈에 띄는 차이가 생겼습니다.

휴대폰의 뷰티 모드와 AI 장면 향상 기능을 끄세요. 이는 표준 노이즈 감소 및 선명화 파이프라인 위에 추가 처리를 적용하며, AI 향상 모델은 이미지 개선을 시작하기 전에 이 모든 작업을 취소해야 합니다. 휴대폰에서 처리하는 작업이 적을수록 AI는 원시 센서 데이터에 더 가까워지고 최종 결과는 더 좋아집니다. iPhone에서는 사진 스타일을 끄고 덜 처리된 형식으로 저장하는 타사 카메라 앱을 사용하는 것을 의미합니다. Android에서는 장면 최적화 및 뷰티 모드를 끄세요.

가능한 한 최고의 조명으로 촬영하세요. AI 향상은 텍스처를 복구하고 노이즈를 줄이는 데 놀랍지만 한계가 있습니다. 좋은 낮에 찍은 사진은 더욱 아름답게 빛날 것입니다. 어두운 레스토랑에서 찍은 사진은 AI가 인위적으로 보이는 세부 사항을 만들어내기 전까지만 향상됩니다. 시작 이미지가 좋을수록 향상 효과도 좋습니다. 당연한 조언인 것은 알지만, 후반 작업에서 문제를 해결할 수 있다는 것을 알면 게으르게 되기 쉽습니다.

휴대폰에 초광각 또는 망원 카메라가 있는 경우 카메라가 아닌 기본 카메라를 사용하십시오. 휴대폰 제조업체는 여러 대의 카메라를 장치에 집어넣지만 초광각 및 망원 모듈의 센서는 일반적으로 기본 센서보다 작고 품질이 낮습니다. 메인 카메라는 AI 향상을 위한 가장 깨끗한 시작 파일을 생성합니다. 특히 울트라와이드는 AI 향상이 완전히 교정할 수 없는 부드러운 가장자리와 눈에 띄는 왜곡을 생성합니다.

휴대전화를 흔들리지 않게 잡으세요. 휴대폰 이미지 안정화는 좋지만 마술은 아닙니다. 약간의 모션 블러가 있는 사진에서는 AI 향상이 복구할 수 없는 정보가 손실됩니다. AI가 시도하고 결과는 여전히 흐릿해 보이지만 더 선명해 보일 것입니다. 가능할 때마다 휴대전화를 단단한 물체에 고정하세요. 이는 어떤 소프트웨어 설정보다 더 큰 차이를 만듭니다.

카메라 롤 정리를 위한 일괄 작업 흐름

몇 장의 테스트 사진에서 좋은 결과를 얻은 후 카메라 롤을 다시 살펴보며 작년에 찍은 약 40장의 사진을 보정했습니다. 제가 찍은 사진은 당시에는 평범해 보였기 때문에 잊어버렸습니다. 평평하고 시끄러웠던 하이킹의 풍경. 휴대폰이 플라스틱으로 매끈하게 변한 내 여자친구의 초상화. 그림자가 검게 변한 황혼의 도시 거리.

일괄 처리가 포함된 Pro 계획을 사용하여 일괄 처리했습니다. 한 번에 5~10장의 사진을 선택하고 모든 사진에 대해 2배 확대한 다음 얼굴을 확인하고 인물 사진에 추가 얼굴 복원 작업을 수행했습니다. 총 비용은 얼굴이 없는 사진의 경우 사진당 약 2크레딧, 얼굴이 있는 사진의 경우 6크레딧이었습니다. 대략 40장의 사진으로 총 160크레딧 정도였습니다. 500크레딧이 포함된 Pro 요금제는 더 많은 혜택을 제공합니다.

일괄 접근 방식은 지루한 수동 프로세스를 커피를 만들면서 할 수 있는 작업으로 바꿔주었습니다. 배치를 업로드하고 AI가 모든 것을 처리하도록 한 다음 향상된 버전을 다운로드하고 나중에 확인하세요. 한 번에 하나씩 수행하는 것보다 효율성이 크게 향상되었습니다. 개선할 휴대폰 사진이 많으면 일괄 처리를 사용하는 것이 좋지 않습니다. 실제로 해보는 것과 전혀 하지 않는 것의 차이입니다.

내 DSLR은 아직도 옷장 속에 있다. 나는 아마도 사진 촬영을 위해 특별히 가져가는 다음 여행에 그것을 가지고 나갈 것입니다. 하지만 일상 사진의 경우 최신 휴대폰 카메라와 AI 향상의 조합이 더 이상 타협하지 않을 만큼 가까워졌습니다. 전화는 나와 함께 있습니다. DSLR은 그렇지 않습니다. 그리고 이제는 생각보다 DSLR이 그리워지지 않을 정도로 휴대폰 사진이 잘 나오네요.