딥 퓨전, 셔터를 누르기 «전»에 이미 사진을 찍고 있었다

실내나 흐린 날 아이폰으로 찍은 사진이 유독 또렷하게 나올 때가 있습니다. «딥 퓨전»이라는 기능 덕분인데, 이 기능의 핵심은 «셔터를 누르는 순간»이 아니라 «셔터를 누르기 전»에 있습니다. 2019년 아이폰 11과 함께 처음 공개된 이 기능이 실제로 어떻게 동작하는지, 애플이 당시 매체들에 직접 설명한 내용을 기준으로 정리했습니다.

셔터를 누르기 «전»에 이미 8장을 찍어 둔다

보도에 따르면, 딥 퓨전이 켜진 상태에서 카메라 앱을 열면 셔터를 누르기도 전에 이미 «짧은 노출 4장»과 «보조 노출 4장», 총 8장을 미리 찍어 둡니다. 사용자가 실제로 셔터를 누르면 그제서야 «긴 노출» 1장을 추가로 촬영해, 최종적으로 총 9장의 사진이 모입니다.

⇒ ★«짧은 노출»은 일부러 노출값을 낮게 잡아 찍은 사진으로, 흔들림이 적고 윤곽이 날카롭습니다. 반대로 «긴 노출»은 빛을 더 오래 받아들여 어두운 부분의 정보가 풍부합니다. 셔터를 누르기 전에 짧은 노출들을 미리 찍어 두는 이유는, 사용자가 셔터를 누르는 그 짧은 순간을 기다리지 않고도 «날카로운 기준 사진»을 이미 확보해 두기 위해서입니다.

9장을 «하나»로 합치는 방법

이 9장은 그대로 겹쳐지지 않습니다. 먼저 보조 노출 4장 중 3장과 긴 노출 1장을 합쳐 «합성 긴 노출(synthetic long 성격의 프레임)» 하나를 만듭니다. 그다음 이 합성 프레임을, 짧은 노출 4장 중 가장 선명한 한 장과 다시 합칩니다.

⇒ ★★이렇게 만들어진 결과물을 신경망 엔진이 «픽셀 단위»로 분석합니다. 약 2,400만 개의 화소 각각을 대상으로, 하늘·직물·피부처럼 «피사체의 종류에 따라 다른 4단계 처리»를 적용합니다 — 예를 들어 하늘처럼 매끄러운 영역과 옷감의 질감, 사람 피부는 각각 다른 방식으로 디테일과 노이즈 사이의 균형을 잡아야 하기 때문입니다. 애플 마케팅 담당 수석부사장 필 실러는 이 전체 과정을 «계산 사진술의 미친 과학(Computational Photography Mad Science)»이라고 표현했습니다.

A13 칩이 «1초» 만에 끝낸다

이 모든 합성과 분석은 아이폰 11·11 프로에 탑재된 A13 바이오닉 칩의 신경망 엔진이 처리합니다. 사용자가 셔터를 누른 뒤 사진이 카메라 롤에 뜨기까지, 이 과정 전체가 대략 1초 안에 끝납니다.

⇒ 셔터를 누르기 «전»부터 촬영을 시작해 둔 덕분에, 실제 사용자가 체감하는 대기 시간은 «셔터 이후 1초»뿐입니다. 만약 셔터를 누른 다음에야 9장을 찍기 시작했다면 훨씬 오래 기다려야 했을 것입니다.

항상 켜져 있지는 않다

딥 퓨전은 모든 사진에 적용되지 않습니다. 보도에 따르면 이 기능은 «중간~약한 조도»에서 주로 작동하며, 너무 어두워 «나이트 모드»가 필요한 상황에서는 대신 나이트 모드가 작동합니다. 즉 밝은 대낮 야외 촬영이나 아주 어두운 촬영 각각에는 다른 처리 방식이 적용됩니다.

3년 뒤, 더 «일찍» 적용하는 방식으로 바뀌었다

딥 퓨전은 2022년 아이폰 14부터 «포토닉 엔진(Photonic Engine)」이라는 이름으로 한 단계 더 발전했습니다. Apple 뉴스룸 공식 발표에 따르면, 포토닉 엔진은 딥 퓨전을 «없애는» 것이 아니라 «촬영 처리 과정의 더 이른 단계에서» 적용하는 방식입니다. 그 결과 아이폰 14 프로 기준으로 중간~약한 조도 사진 품질이 메인 카메라 최대 2배, 초광각 카메라 최대 3배, 망원 카메라 최대 2배, 전면(트루뎁스) 카메라 최대 2배까지 개선됐다고 밝혔습니다.

⇒ 즉 셔터 전에 여러 장을 미리 찍어 합성한다는 딥 퓨전의 기본 뼈대는 그대로 두고, «어느 단계에서 합치는가»를 앞당겨 손실을 줄인 것이 포토닉 엔진의 개선 지점입니다. 카메라마다 개선폭이 다른 것(초광각이 가장 큰 3배)도, 원래 초광각 카메라의 낮은 조도 성능이 다른 렌즈보다 더 약했기 때문에 개선 여지가 컸다는 것으로 이해할 수 있습니다. 애플이 전면(TrueDepth) 카메라까지 2배 개선폭에 포함시켰다는 점도 눈에 띕니다 — 딥 퓨전 이후의 이 개선이 후면 망원·광각 렌즈뿐 아니라 셀피 촬영의 저조도 품질에도 그대로 적용됐다는 뜻이기 때문입니다.

실무 적용 — «컴퓨테이셔널 포토그래피» 기능을 이해할 때

• ★★사진 한 장이 «한 번의 촬영» 결과라고 단정하지 마십시오. 딥 퓨전처럼 여러 장(많게는 9장)을 찍어 합성하는 기능이 스마트폰 카메라에는 흔합니다.
• ★셔터를 누르기 전부터 이미 촬영이 시작될 수 있다는 것을 기억하십시오. 체감 대기시간이 짧은 이유가 «처리가 빨라서»가 아니라 «미리 찍어 둬서»인 경우가 있습니다.
• 같은 카메라 기능도 조도에 따라 다른 처리 방식(딥 퓨전 vs 나이트 모드 등)으로 전환된다는 점을 확인하십시오.

정리하면

• 딥 퓨전은 셔터를 누르기 전에 짧은 노출 4장과 보조 노출 4장을 미리 찍어 두고, 셔터를 누르면 긴 노출 1장을 더해 총 9장을 확보합니다.
• 보조 노출 4장 중 3장+긴 노출 1장으로 «합성 긴 노출»을 만든 뒤, 가장 선명한 짧은 노출 1장과 다시 합칩니다.
• ⇒ 그 결과물을 신경망 엔진이 픽셀 단위로 분석해, 피사체 종류(하늘·직물·피부 등)에 따라 다른 4단계 처리를 적용합니다.
• 이 전체 과정은 A13 바이오닉 신경망 엔진이 약 1초 만에 처리하며, 중간~약한 조도에서만 작동하고 매우 어두운 상황에서는 나이트 모드가 대신합니다.

본 콘텐츠는 2019년 애플이 IT 매체에 직접 시연·설명한 딥 퓨전 메커니즘 보도와, 2022년 Apple 뉴스룸의 포토닉 엔진 공식 발표를 바탕으로 정리한 해설입니다. 딥 퓨전 자체의 세부 메커니즘은 Apple 1차 문서에 공개돼 있지 않아, 여러 독립 매체가 일관되게 보도한 수치만 채택했습니다. 정확한 활성화 조도 임계값과 지원 렌즈 전체 목록은 다루지 않았습니다. 최종 확인일: 2026-09-26.

작성: Inkpipes 편집팀 — 기다림 없이 빨라 보이는 처리 뒤에는 미리 해 둔 일이 있다는 관점으로 읽었습니다.

참고

• AppleInsider, 「Inside Apple’s Deep Fusion, the iPhone 11 and Pro’s computational photography feature」(2019.10.2)
• Apple Newsroom, 「Apple debuts iPhone 14 Pro and iPhone 14 Pro Max」(2022.9)