Microsoft Research, Under-Display 카메라로 인한 흐릿한 사진에 대한 AI 기반 수정 프로그램 개발

펀치 홀 전면 카메라의 성공 이후 셀카 카메라의 다음 주요 개발은 완전 언더 디스플레이 카메라입니다. 카메라는 활성 상태가 아닐 때 일반 디스플레이로 계속 작동하지만 투명 OLED 화면 뒤에 카메라가 있습니다. 아래에 있는 카메라가 유용한 사진을 찍을 수 있도록 충분한 빛을 허용하십시오.

문제가 된 마지막 측면이며 Microsoft Research에서 조사한 것입니다.

그들은 화면 픽셀 구조의 회절이 장치의 디스플레이 픽셀 디자인에 따라 이미지를 흐리게 하고, 대비를 줄이며, 사용 가능한 조명 수준을 줄이고, 일부 이미지 콘텐츠를 완전히 방해할 수도 있다는 점에 주목합니다.

다행히도 열화는 예측 가능한 방식으로 발생하며 일반적으로 수평 방향에서만 픽셀 구조로 인해 발생합니다.

T-OLED 스크린을 통한 사진 촬영에 내재된 이미지 저하를 보상하기 위해 연구원들은 신호 대 잡음비를 개선하고 이미지를 흐리게 처리하는 U-Net 신경망 구조를 사용했습니다. 팀은 직접 촬영한 이미지와 거의 구별할 수 없는 복구된 이미지를 얻을 수 있었습니다.

개선 사항은 아래 샘플 이미지에서 확인할 수 있습니다.

원본, 정상적으로 촬영됨:

T-OLED 화면을 통해 촬영:

이미지 복구 후:

사진 캡처에 AI를 사용하면 배경을 흐리게 하거나 교체하는 것과 같은 다른 흥미로운 기술과 더 낫고 자연스러운 화상 통화를 가능하게 하는 기타 비디오 조작 기술도 사용할 수 있습니다.

Microsoft는 주로 화상 회의 설정에서 더 큰 화면에서 사용하기 위해 작업을 개발하는 것으로 보이지만 다음 플래그십 스마트폰에도 동일하게 적용될 것이라고 확신합니다.

Microsoft의 프로젝트에 대해 자세히 알아보기 여기에서 지금 확인해 보세요..

를 통해 WalkingCat