[Сұхбат] Galaxy Z камерасының инновациялық функцияларын жасаушылар ②: «Портреттік видео» кәсіби объективтердің әсерін қалай жаңғыртады

Жұмсақ бұлыңғыр фонда анық нысан тереңдік сезімін тудырады – бұл әсер бұрыннан кәсіби оптикамен байланысты. Зерттеушілер смартфонмен видео түсіру кезінде де осындай нәтижеге жету жолдарын іздеуді жалғастыруда.

Galaxy Z сериясында «Портреттік видео» функциясы жарық күшті объективтерге тән кадр тереңдігі мен боке¹ береді². Осы әсерге қол жеткізу үшін Samsung Research мамандары нақты объективтердің оптикалық сипаттамаларын зерттеп, жасанды интеллект негізінде бейне өңдеу технологиясын әзірледі, ал MX командасы оны смартфондар үшін оңтайландырды.

▲ (Сол жақта) Mobile eXperience (MX) бөлімшесінде камераларды әзірлеуге жауапты Санук Пак және Samsung Research-тегі визуалды технологиялар тобынан Ёнгёл Ким.

Samsung Newsroom өкілдері Samsung Research компаниясының Visual Technology командасының мүшесі Ёнгёль Киммен (YoungGeol Kim) және Mobile eXperience (MX) бөлімшесіндегі камераларды әзірлеуге жауапты Санук Пакпен (Sang-uk Park) зерттеу идеясының Galaxy камерасының толыққанды функциясына қалай айналғаны туралы әңгімелесті.

Портреттік видеодағы тереңдіктің жаңа деңгейі

Сұрақ. «Портреттік видео» дегеніміз не және жаңа Galaxy Z сериясында бұл функцияда не өзгерді?

Пак: «Портреттік видео» негізгі түсірілім нысанын фокуста сақтайды және фонды жұмсақ бұлдыратады. Нәтижесінде объект кадрда ерекшеленіп, видео кинематографиялық сипатқа ие болады.

▲ Пайдаланушылар “Камера” қолданбасын ашып, «Портреттік видео» режиміне өту үшін “Көбірек” батырмасын баса алады.

Galaxy Z сериясында бұлдырлықтың қарқындылығы нысан мен фон арасындағы қашықтыққа байланысты табиғи түрде өзгереді. Артқы пландағы кішкентай жарық көздері жұмсақ дөңгелек бүйірлерге айналады – жарық күшті объективпен түсіргендегідей. Осының арқасында басты нысанға назар аударып, қосымша кәсіби жабдықсыз смартфонға үлкенірек және атмосфералық бейнелерді түсіруге болады.

Сонымен қатар, суретке түсіргеннен кейін пайдаланушылар фокусты басқа объектіге ауыстыра алады немесе бұлыңғырлық деңгейін өзгерте алады.

«Портреттік видеоның» негізінде жатқан технология идеясы қалай пайда болды?

Ким: Мен 25 жылдан бері фотосуретке қызығамын. Дәл осы қызығушылық мені камералар саласындағы зерттеулер мен әзірлемелерге алып келді және әртүрлі объективтердің кескінді қалай қалыптастыратынына тұрақты қызығушылық оятты.

Смартфондардың камералары қарқынды дамыды: жаңа функциялар пайда болды, фотосуреттердің сапасы айтарлықтай артты. Бейне түсіру мүмкіндіктері де тез жетілдірілді, бірақ маған мұнда әлі де үлкен әлеует бар сияқты көрінді – ең алдымен кәсіби оптикаға тән фонның тереңдігі мен бұлыңғырлану сипатын көрсетуде. Біз бұл идеяны зерттеу кезеңінде ұсындық. Сонымен қатар MX бөлімшесі пайдаланушылар үшін кәсіби деңгейдегі видео жасауды жеңілдету жолдарын іздеді. Осылайша біздің бірлескен дамуымыз басталды.

▲ Ким “Портреттік видео” функциясын құруға не шабыт бергені туралы айтады.

Ким: Нақты объективке тән табиғи кескінге қол жеткізу үшін қолданыстағы шешімдер жеткіліксіз болды. Сол кезде Samsung Research технологиясы әлі де зерттеу сатысында болғандықтан, оны коммерциялық өнімге енгізу шешімі оңай болған жоқ. Дегенмен, MX командасы оның әлеуетін көріп, дамуды сериялық құрылғыға дейін жеткізуге шешім қабылдады.

Осыдан кейін ауқымды сынақтар мен жетілдірулер басталды. Біз технологияны тікелей смартфондарда сынақтан өткізіп, үнемі пікір алмасып, біртіндеп оны камераның дайын функциясына айналдырдық.

Пак: Функцияны нақты пайдалану жағдайларына дайындау үшін бізге әртүрлі жағдайларда көптеген видео түсіріп, нәтижелерді мұқият тексеруге тура келді. Функция ең алдымен адамдарды түсіруге бағытталғандықтан, екі команданың мамандары тіпті модель болып, бір-бірін түсірді. Біз адамның фоннан қаншалықты табиғи бөлінетініне және әртүрлі қашықтықтағы бұлыңғырлық пен бүйірлердің қалай көрінетініне ерекше назар аудардық.

Бейнежазбадан кейін біз нәтижелерді бірге талдап, нені жақсартуға болатынын талқыладық. Маған бәрінен де қамырдан қамырға дейін сапаның қаншалықты айтарлықтай өскені есте қалды.

▲ Пак командалар арасындағы ынтымақтастықты сипаттайды.

Смартфондағы жарық күшті объектив әсері

“Портреттік видеоны” жаңа деңгейге көтеруге қандай технология мүмкіндік берді?

Ким: Ең бастысы – смартфондағы видеода жарық күшті кәсіби объективтердің сипатты бейнесін қалпына келтіруге мүмкіндік беретін технология. Ол үшін біз жасанды интеллект пен оптикалық талдауды біріктірдік.

Кәсіби камера беретін фонның тереңдігі мен табиғи сипатын жеткізу үшін бейнені жай ғана бұлыңғырлау жеткіліксіз. Кәдімгі бұлыңғырлау көршілес түстерді араластыру арқылы кескінді жұмсартады, ал жарық күшті объектив басқаша жұмыс істейді. Бұлыңғырлық дәрежесі табиғи түрде нысан мен фон арасындағы қашықтыққа байланысты болады, ал жарық нүктелері өзінің пішіні мен жарықтығын сақтай отырып, бүйіріне айналады. Мұндай бөліктердің кескін аймағынан тыс пішіні мен сипатын боке деп атайды.

Сондықтан нысан мен фон арасындағы қашықтықты да, жарықтың нағыз объектив арқылы қалай өтетінін де ескеру қажет.

Бұл эффектіні смартфонда жасау үшін екі компонент қажет болды. Алдымен біз жарықтың шынайы жарық күші объективінің ішінде қалай таралатынын және нәтижесінде қандай боке шығатынын талдадық, содан кейін бұл сипаттамаларды деректерге айналдырдық. Содан кейін біз оларды жасанды интеллектпен анықталатын кадрдағы нысандарға дейінгі қашықтық туралы ақпаратпен біріктірдік. Осының арқасында жүйе түсірілім объектісі мен фон арасындағы қашықтыққа байланысты бұлыңғырлық дәрежесін және боке өлшемін өзгерте алады.

▲ Жарық күшті объективтің әсерін қалпына келтіру процессі.

Смартфондарда бұлыңғырлық пен бокені жасау кезінде қандай техникалық қиындықтарға тап болдыңыз?

Ким: Ең қиын мәселе нысан мен фон арасындағы шекараларды, әсіресе шаш немесе көзілдірік жиегі сияқты ұсақ және күрделі бөлшектерді табиғи түрде өңдеу болды. Смартфонда мұндай шекараларды дәл анықтау үшін жасанды интеллект есептеген қашықтық туралы ақпараттың өзі жеткіліксіз. Тіпті кішігірім қателіктің өзі шаштың жекелеген талшықтарының бұлыңғыр болуына немесе фонның бір бөлігінің, керісінше, айқын болып қалуына әкелуі мүмкін. Нәтижесінде адам кадрдан жасанды түрде кесіп алынғандай көрінеді.

Бұл мәселені шешу үшін біз жасанды интеллектпен есептелген қашықтық деректерін бастапқы видеодағы нысан шекаралары туралы ақпаратпен біріктірдік. Бұл тіпті шаш сияқты күрделі аймақтарда нысанды фоннан табиғи түрде ажыратуға мүмкіндік берді.

Пак: Әртүрлі жағдайларда – әртүрлі ауа райы мен жарықта, нысанның қозғалысында және оған дейінгі қашықтықтың өзгеруінде тұрақты нәтижеге қол жеткізу өте маңызды болды. Біз әртүрлі жағдайларда қайта-қайта видео түсірдік, нәтижені талдадық және бағдарламалық оңтайландыру мен қосымша жасанды интеллект оқыту арқылы жасанды әсерлерді жойдық. Samsung Research технологиясына сүйене отырып, MX бейне сапасы мамандары да нәтижені пайдаланушы тұрғысынан бағалап, функцияны одан әрі жетілдіруге көмектесті.

Мұндай күрделі бейне өңдеу Galaxy Z сериялы құрылғыларда тұрақты жұмыс істеуі үшін не қажет болды?

Ким: Ең маңызды міндет — сапаны құрбан етпей, энергия тұтыну мен жылытуды азайту болды. Видео кадрлардың жылдам тізбегі болып табылады, сондықтан нақты уақытта 4K видеоны өңдеу айтарлықтай есептеу ресурстарын қажет етеді.

Бізге басымдықтарды белгілеуге тура келді. Біз кескін сапасы үшін өте маңызды барлық есептеулерді сақтап қалдық және пайдаланушы айырмашылықты байқамайтын жерде оларды қысқарттық.

Нәтижесінде кәсіби оптиканың табиғи әсері мен нақты уақыт режимінде өңдеу арасындағы тепе-теңдікті табуға мүмкіндік туды. Функция ұзақ жазба кезінде де тұрақты және тиімді жұмыс істейді.

Бейне түсіру үшін көбірек еркіндік

Портреттік бейнеден барын алғысы келетін пайдаланушыларға қандай кеңес берер едіңіз?

Ким: Боке ерекше көзге түсуі үшін, салыстырмалы түрде қараңғы фонда жарық көздері бар көріністерді іздеңіз. Жапырақтар арасынан түскен күн сәулесі, жаңа жылдық гирляндалар немесе түнгі шамдар жұмсақ дөңгелек бүйірлерге айналып, кадрды атмосфералы ете алады.

Адамды суретке түсіргенде, оның алдындағы жарықтан аулақ болған дұрыс. Жарық көзін түсірілім нысанының артына немесе бүйіріне қоюға тырысыңыз. Осылайша адамның шашы мен контурын жұмсақ жарықтандыруға болады, сонымен қатар артқы жақтағы бүйірлерді айқын етуге болады. Шағылысқан жарық немесе көше шамдары сияқты қоршаған жарық көздері тым қараңғы бетті болдырмауға және суретті теңгерімдірек етуге көмектеседі.

Портреттік видеоны сынап көрген адамдардан қандай реакция естігіңіз келеді?

Пак: Мен пайдаланушылар, контент авторлары мен видео саласындағы кәсіби мамандар қазір смартфонда кинематографиялық роликтерді түсірудің қаншалықты оңай екеніне таңғалғанын қалаймын. Табиғи бұлыңғырлық, боке және түсірілімнен кейінгі өңдеу мүмкіндіктері оларға көбірек еркіндік беріп, олар ойлаған визуалды әсер мен көңіл-күйге қол жеткізуге көмектеседі деп үміттенемін.

Ким: Сайып келгенде, мен адамдардың өздерімен бөлек кәсіби камера алып жүрудің қажеті жоқ екенін сезінуін қалаймын. Біз кинематографиялық бейнелерді жасау үшін бір смартфон жеткілікті болуы үшін осы функцияның негізінде жатқан технологияларды жетілдіруді жалғастырамыз.

▲ Сарапшылар портреттік бейне түсіру технологиясының одан әрі дамуын қызығушылықпен күтуде.

Мобильді бейнеге кәсіби оптикаға тән аз тереңдікті және жарықпен жұмыс істеуді көшіру үшін көптеген сынақтар мен командалардың тығыз ынтымақтастығы қажет болды. Зерттеу идеясы күнделікті қолдануға дайын сенімді функцияға айналуы керек еді. Samsung Research және MX бөлімшесінің бірлескен сараптамасының арқасында жасалған “Портреттік видео” Galaxy-де бейне түсіру мүмкіндіктерін кеңейтіп, пайдаланушыларға шығармашылық идеяларды жүзеге асыру үшін көбірек құралдар береді.

¹ Боке – кескіннің айқындық аймағынан тыс бөліктерінің бұлыңғырлану формасы мен сипаты. Бұл эффект әсіресе шағын жарық көздері дөңгелек жарық дақтарына айналған кезде жақсы байқалады.

² Жарық күшті объектив – диафрагмасы кең ашылатын, жарықты көбірек өткізетін объектив. Мұндай оптика негізгі нысанды айқын сақтауға мүмкіндік береді, фонды жұмсақ бұлдыратады және мәнерлі боке жасайды.