높은 카메라 화소에 광학손떨림방지(OIS) 기능과 한 단계 진화한 야간모드까지 지원해, 어떤 환경에서나 밝고 선명한 사진을 얻을 수 있다. 개선된 인물모드로 더욱 정확하고 깊이 있는 인물 촬영이 가능해졌고, ‘펀(Fun) 모드’의 다양한 필터와 효과로 사진을 꾸밀 수 있게 됐다. 저화질이나 오래된 사진도 보정할 수 있는 ‘사진 리마스터’ 기능을 지원하며, ‘갤럭시 A’ 시리즈에 최초로 적용한 ‘AI 지우개’로 불필요한 사물을 말끔히 지울 수 있어 인생샷을 건지기가 한결 쉬워졌다. 촬영한 사진을 즉석에서 빠르게 공유할 수도 있다.

스마트폰 카메라로 성큼 들어온 놀라운 AI 기술, 디지털 네이티브 세대가 일상에서 누리는 새로운 경험은 어떤 모습일까? 아래 영상에서 만나 보자.

※영상에서는 A53 5G만 사용했으나, 영상에서 나온 기능들은 A53, A33 모두 사용 가능한 기능입니다.

AI 기능이 한층 강화된 갤럭시 S21의 ‘싱글 테이크’는 이보다 더 얼마나 진화했을까? 갤럭시 S21의 AI 카메라 3부작, 그 두 번째 시리즈에서 자세히 살펴봤다.

단순한 장면 그 이상을 포착하는 ‘싱글 테이크’

더 똑똑해진 AI를 기반으로, 갤럭시 S21의 ‘싱글 테이크’는 눈 깜짝하는 사이에 지나가 버리는 소중한 순간도 놓치지 않게 해준다. 최소 5초에서 최대 15초 동안 비디오와 초당 최대 10장의 사진을 동시에 촬영하기 때문이다.

촬영을 마치면 AI는 가장 잘 나온 사진과 하이라이트 영상 구간에 다양한 효과를 더해 최대10장의 사진과 4개의 비디오 클립을 실시간으로 생성해 낸다.

사진의 경우, 촬영 결과물을 분석해 사진의 장점을 극대화시킬 수 있는 보정이나 효과를 바로 적용한다. 인물이나 애완동물이 찍힌 사진이라면 ‘인물 모드(Portrait mode)’를 적용해 피사체를 강조한다. 생동감 있는 순간이나 광활한 풍경을 촬영할 때는 ‘스마트 크롭(Smart Crop)’을 사용해 사진에서 가장 인상적인 부분을 강조하거나, 다양한 AI 필터를 적용해 색과 밝기를 조절하기도 한다.

영상의 경우, AI는 장면 속의 움직임과 배경을 분석한다. 우선 빨리 감기(Fast Forward, 3x) 또는 이벤트 구간에 슬로우 모션 효과를 넣은 다이내믹 슬로모(Dynamic Slow-mo) 영상이 기본적으로 생성된다. 여기에 가장 잘 나온 사진들과 이벤트 영상들에 필터와 다양한 전환 효과를 얹어 만든 하이라이트 동영상(Highlight video)과 부메랑(Boomerang), 리버스(Reverse) 등 영상에 따라 개성 넘치는 결과물을 만들어준다.

어떻게 이런 것들이 가능하냐고? 갤럭시 S21 카메라 AI에 대해 더 자세히 알아보자.

최고의 사진을 순식 간에 고르고 수정한다고? 싱글 테이크의 다양한 엔진을 소개합니다

한 번의 촬영으로 다양한 장면들을 포착하는 것도 중요하지만, 그중 최고의 순간을 빠르게 선별해내는 기능도 중요하다. 싱글 테이크는 딥 러닝을 기반한 다양한 AI 엔진과 컴퓨터 시각(Computer Vision) 기술을 사용해 사진을 신속하게 분석하고 선택한다.

싱글 테이크가 활용할 수 있는 엔진의 종류는 무척 다양하다. 먼저 에스테틱 엔진(Aesthetic engine)은 전문가가 선별한 약 30만 장의 사진을 학습해 사진의 선명도와 사진 품질, 얼굴 표정 등 사진의 심미성을 평가한다. 인물 사진을 예를 들어 눈을 감거나 고개를 숙인 사진 대신 활짝 웃는 사진을 알아서 골라준다. 최고의 사진들이 선택되면 AI가 동일한 딥러닝 기술을 활용해 어떤 필터와 효과를 적용할지 결정하고, 가장 인기 있는 필터를 자동으로 사진에 적용한다.

사진의 완성도를 결정하는 요소 중 하나는 바로 구도. 앵글 분석 엔진(Angle Evaluation engine)은 약 1억 장의 이미지 데이터베이스를 기반으로 최고의 구도를 학습하고 이미지를 크롭해준다.

마지막으로 인물이나 애완동물 촬영에서는 인물 모드가 자동으로 적용되는데, AI를 활용해 피사체를 배경으로부터 분리하고 블러와 같은 배경 효과들을 적용한다.

영상편집은 어렵고 복잡하다고? 싱글 테이크와 함께라면 No

사진과 필터 선택에 이외에도, 싱글 테이크는 다양한 AI 엔진을 활용해 손이 많이 가는 편집과 처리 과정을 빠르고 효율적으로 해낸다. ‘캡처 인텔리전트’는 광량에 따라 고속 촬영을 사용해 상황에 따른 최상의 촬영이 가능하게 한다. 그리고 ‘인물 인식 인텔리전트’는 인물의 표정과 자세, 머리 기울기를 분석하고, 인물을 배경보다 돋보이게 만든다. 비디오 촬영에서도 ‘모션 인텔리전트’가 활용돼 영상의 움직임에서 최고의 순간을 찾아낸다.

싱글 테이크로 비디오를 촬영하면 장면 인텔리전트와 캡처 인텔리전트, 모션 인텔리전트, 그리고 인물 인식 인텔리전트가 최고의 사진과 영상 내 움직임을 선택하고 모은다. 이후 선택된 장면에 필터나 전환, BGM을 적용하면 즉시 공유 가능한 동영상이 만들어진다. 모션 인텔리전트로 움직임이 많은 장면을 분석해 다이내믹 슬로모, 부메랑 또는 리버스 효과를 적용해 특별한 순간을 강조하기도 한다.

한자리에 오래 머물 수는 없지만, 한 장의 사진에 아침부터 밤까지의 변화가 적용된 영상을 만들고 싶을 때 유용한 기능이 있다. 생성적 적대 신경망(Generative Adversarial Network, GAN)^[1]을 활용하는 씬 리라이팅 기능은 같은 장면으로도 아침, 저녁, 해질녘, 해가 지기 직전, 밤과 새벽 등 시간대에 맞게 조정된 빛으로 사진을 만들어 낸다. 이 사진들을 자연스럽게 연결하고 변환하면 12초 분량의 타임 랩스 비디오가 완성된다. 시간의 변화를 사실적으로 그려내는 씬 리라이팅 비디오를 활용하면 푸른 하늘과 환상적인 노을을 놓칠지 모른다는 걱정 없이, 하루의 흐름이 담긴 결과물을 만들어낼 수 있다.

사용자들이 더욱 편리하게 최상의 사진과 영상을 얻을 수 있도록 돕는 갤럭시 S21 시리즈. 앞으로도 엔진과 인텔리전트 기능을 지속적으로 확대, 발전해나갈 예정이다.

갤럭시 S21 시리즈에 탑재된 AI가 사진과 영상을 어떻게 탈바꿈시키고 있는지, 그 원리를 뉴스룸에서 3부작에 걸쳐 자세히 소개한다. 첫 번째 시리즈는 바로 ‘인물사진’에 숨겨진 원리이다.

한 번 촬영에 인생 샷, 셀피 카메라 모드(Selfie Camera Mode)

누구나 한 번쯤 멋진 포즈를 잡고 촬영한 ‘회심의 셀피’가 생각보다 마음에 들지 않았던 경험이 있을 것이다. 이제는 더 이상 ‘멘붕’에 빠질 필요가 없다. 갤럭시 S21 시리즈의 새로워진 셀피 카메라는 AI 기반으로 더 자연스러우면서도 디테일이 살아있는 사진을 만들어준다. 여기에 숨어있는 두 가지 기술을 살펴보자.

1. 얼굴 정보 감지: 사용자가 촬영을 하면, 셀피 카메라의 AI는 먼저 이미지 속 얼굴을 인식한다. 이후 배경 등 사진 속 디테일로부터 얼굴을 분리한다. 이때 사람 얼굴의 세부 요소인 머리카락, 눈, 피부 등 디테일한 부분까지 눈 깜짝할 사이에 인식한다.

2. 복원: 피사체의 머리카락, 눈, 얼굴 특징 등 디테일한 요소의 질감을 살려낸다. 또 화이트 밸런스를 조정해 어떤 환경에서도 피부 톤을 자연스럽게 만들어, 사진을 추가로 편집할 필요 없이 바로 공유할 수 있다.

SNS 앱이나 써드 파티 앱을 자주 사용한다면? 갤럭시 카메라 앱뿐 아니라 주요 SNS, 카메라 앱에서도 AI 기반의 얼굴 감지와 복원 기능을 사용해 자연스러운 인물 사진을 찍을 수 있다.

느낌 있는 사진의 비밀, 인물사진 모드(Portrait Mode)

친구, 가족, 반려동물 등 사랑하는 이들의 모습을 기록하고 싶지만, 사진 촬영에 자신이 없어 망설이는 이들을 위해. 갤럭시 S21 시리즈는 초보자들도 스튜디오에서 촬영한 것 같은 퀄리티를 낼 수 있는 ‘인물사진 모드’를 탑재했다. 기존 라이브 포커스(Live Focus) 기능을 고도화한 인물사진 모드는 개선된 ‘깊이 정보 인식 기술’을 활용해, 더욱 깊이 있고 극적인 효과를 연출할 수 있다.

인물사진 모드에는 블러(Blur), 스튜디오(Studio), 하이키 모노(High-key Mono), 로우키 모노(Low-key Mono), 백드롭(Backdrop), 컬러 포인트(Color Point) 등 다양한 배경 효과가 있어 상황과 취향에 맞게 선택지를 넓혀 준다. 촬영 버튼을 누르자마자 AI가 실시간으로 피사체의 디테일에 대한 세그먼팅(segmenting), 매팅(matting), 디테일 보정(refining)을 진행해 즉각적으로 효과를 적용해 준다.

1. 세그먼테이션 맵(Segmentation Map): AI가 이미지 속의 사람이나 반려동물을 인식하고 즉각적인 세그먼테이션 맵을 생성, 피사체를 분리한다.

2. 시드 맵(Seed Map): 앞서 생성한 세그먼테이션 맵을 토대로 피사체와 배경이 분리된 시드 맵이 생성된다. 이렇게 분리된 맵을 기준으로, 이후 배경부에만 다양한 배경 효과가 적용된다.

3. 트라이 맵(Tri-map): 그다음, 피사체와 배경의 경계면, 특히 이 두 가지 요소가 섞인 영역을 확인한다.

4. 매트 맵(Matte Map): 트라이 맵의 경계면에서 피사체 부를 정확하게 인식하는 매팅 작업이 진행되어 매팅 맵을 만들어준다. 피사체 머리카락의 디테일을 자연스럽게 표현할 수 있게 만든다.

5. 깊이감 추정(Depth Estimation): 1~4번 과정이 진행되는 동시에 AI는 사진 속 ‘깊이 정보’를 측정해 배경 디테일과 심도^[1]를 다듬는다.

사진 속 구도가 복잡하거나, 여러 명이 함께 있을 때도 걱정 없다. AI를 통한 세그먼팅은 심도 수준이 다양한 여러 사람이거나 반려묘, 반려견과 함께 있어도 스마트하게 인식한다.

3초의 마법, 디테일 리파이닝(Refining)

사람, 동물, 풍경… 스마트폰 카메라로 담는 피사체는 다양하다. AI 매팅은 이처럼 수많은 피사체의 디테일을 최대한으로 살려주는 역할을 한다.

인물사진 모드에 블러 효과를 적용할 경우, 매팅은 피사체 경계부가 흐려지지 않게 하는 역할을 한다.

먼저 배경으로부터 피사체를 최초로 분리한 ‘시드 맵’에서 경계부를 인식해 ‘트라이 맵’이 만들어진다. 위 이미지를 예시로 보면 검은색은 배경 부, 흰색은 인물 부, 회색은 경계 영역으로 인식된 부분이다.

이 ‘트라이 맵’을 토대로 경계부를 정밀하게 인식해, 배경과 피사체를 매우 세밀하게 구분한 ‘매팅 맵’이 만들어진다. 매팅이 진행되는 동시에 AI는 인물의 얼굴 등 피사체의 디테일을 다듬는다. 끝으로, 매팅 맵과 깊이 정보를 합쳐, 업스케일링(upscaling)해 최종 고해상도 사진이 생성된다.

매우 복잡한 프로세스를 거치지만 이 모든 것을 완료하는 데 소요되는 시간은 3초도 걸리지 않는다^[2]. 갤럭시 S21 시리즈는 이처럼 사용자의 편의를 강화할 수 있는 똑똑한 기능을 다채롭게 확대해 나갈 예정이다.

▲ 갤럭시 S20 올트라의 ‘1억 8백만 화소 초고화질 센서’로 촬영한 사진

매일 반복되는 평범한 일상 속에서도 특별한 순간은 언제나 찾아온다. 그 순간을 놓치지 않고 언제까지나 기억하고 싶을 때, 최대 1억 8백만 화소 이미지 센서, 100배 스페이스 줌 등 역대 최강의 카메라 스펙을 장착한 갤럭시 S20 시리즈와 함께라면 그것은 일상을 넘어 세상에 단 하나뿐인 작품이 될 수 있다.

삼성전자는 갤럭시 S20 시리즈 사용자의 특별한 순간들을 빛내 줄 ‘갤럭시 콘텐츠 페스타’를 개최, 3월 6일부터 진행 중이다. 갤럭시 S20로 촬영한 사진이나 영상을 응모하면 총 4,700만 원 상당의 상금과 갤럭시 워치 액티브2 등 다양한 혜택을 누릴 기회를 얻는다.

상상 이상의 울트라급 카메라로 기록한 나만의 순간

카메라의 경험을 완전히 바꿔 줄 갤럭시 S20의 카메라는 100배(울트라)와 30배(S20, S20+) 스페이스 줌, 1억 8백만(울트라)과 6천 4백만(S20, S20+) 화소의 초고화질 센서, 8K 동영상 촬영, 슈퍼스테디∙저조도 아웃도어 카메라, 한 번에 다양한 사진을 촬영할 수 있는 싱글테이크를 포함한 AI 카메라 등 지금까지 보지 못한 역대급 기능들을 갖추고 있다. 다시 말해, 갤럭시 S20 카메라가 있다면 일상은 작품이 되고, 누구나 작가가 될 수 있다는 것.

▲ 갤럭시 S20의 ‘AI 카메라’ 기능으로 촬영한 사진

▲ 갤럭시 S20의 ‘스페이스 줌’ 기능으로 촬영한 사진

우리 집 고양이와 같은 소소한 일상부터 오지 여행 등 인생에서 잊지 못할 특별한 경험까지 갤럭시 콘텐츠 페스타의 주제는 사용자의 관심사와 취향을 모두 아우른다. 맛집, 일상, 패션, 푸드, 육아, 여행, 반려동물, 뷰티 인 아트 등 총 7개의 다양한 주제로 자유롭게 응모할 수 있다.

뷰티 인 아트는 디지털프라자 메가스토어에서 만날 수 있는 갤럭시 S20 아트 셀피존으로 현장에서 촬영한 사진도 콘텐츠 페스타 뷰티 인 아트 주제로 바로 응모할 수 있다.

주제당 3회씩 2편, 총 42편의 최종 우수작 선정

콘텐츠 페스타의 응모 방법은 심플하다. 갤럭시 S20로 촬영한 사진이나 영상을 삼성닷컴 이벤트 페이지에 업로드하면 된다. 응모한 작품을 SNS에 공유하는 이벤트에도 참여하면 당첨확률은 더 높아진다. 자세한 내용은 콘텐츠 페스타 이벤트 페이지를 참고하면 된다.

갤럭시 콘텐츠 페스타는 7개의 주제별로 모두 3회차를 진행, 회차별 2편의 우수작을 선정한다. 우수작에는 총상금 4,700만 원을 수여하고 참여작에도 갤럭시 워치 액티브2 등의 경품 혜택을 제공한다. 선정된 작품 중 우수작은 갤럭시 S20의 TV, 디지털, 인쇄, 라디오 등 다양한 미디어 광고로 제작되는 기회까지 가질 수 있다.

1차 우수작들은 삼성닷컴 내 콘텐츠 페스타 갤러리에서 감상할 수 있다.

갤럭시 S20 시리즈의 혁신적인 사용성을 다채롭게 알리며 사용자들이 직접 촬영한 사진 또는 영상을 통해 갤럭시 사용자들과의 소통을 나눌 장이 될 갤럭시 콘텐츠 페스타는 4월 16일까지 진행될 예정이다.