С появлением QLED-моделей Samsung совершила переворот на рынке ТВ, интегрировав инновационную технологию квантовых точек в свою продукцию. Благодаря сверхмалым квантовым точкам, QLED-дисплеи достигают более широкой цветовой гаммы и повышенной яркости, поднимая качество изображения на уровень, недоступный обычным LED-телевизорам.

▲ Телевизоры Samsung QLED предлагают лучшее в отрасли качество изображения, звучание, функции искусственного интеллекта и возможности подключения.

Что отличает телевизоры Samsung QLED от обычных LED-телевизоров? Редакция Samsung Newsroom встретилась с исследователями Кевином Ча и Джанг Нэвоном из подразделения дисплейных решений (Visual Display Business) компании Samsung Electronics.

Вместе они разобрали QLED-телевизор Samsung, чтобы раскрыть секреты его впечатляющей производительности — в буквальном смысле заглянув по ту сторону экрана.

1. Операционный модуль: мозг телевизора

1) Задняя панель

▲ Задняя панель защищает внутренние компоненты, предотвращает перегрев, поддерживает аудиосистему и обеспечивает удобство подключения.

Задняя панель телевизора служит не просто структурным каркасом: она защищает внутренние компоненты и поддерживает температурный режим. Также на ней закреплены динамики для воспроизведения звука и разъемы для удобного подключения внешних устройств.

2) Материнская плата (PCB)

▲ Материнская плата содержит компоненты, которые отвечают за основные функции телевизора.

Материнская плата (PCB) выступает в роли мозгового центра телевизора, управляя такими функциями, как подача питания, прием сигнала с пульта дистанционного управления и подключение SmartThings. Этот ключевой компонент управляет всей системой, гарантируя стабильную и бесперебойную работу устройства.

3) ТВ-тюнер

▲ ТВ-тюнер принимает сигналы вещания и преобразует их в изображение на экране.

ТВ-тюнер принимает телевизионные сигналы и преобразует их для отображения на экране. Рост популярности стриминговых сервисов и рост популярности внешних источников сигнала привели к тому, что многие пользователи предпочитают умные дисплеи без тюнеров. Однако «телевизор» по определению должен включать этот компонент.

4) AI процессор ^[1]

▲ AI-процессор управляет функциями искусственного интеллекта, такими как оптимизация изображения и звука.

В сердце телевизора Samsung QLED находится нейронный процессор NQ4 AI на базе искусственного интеллекта. Чип NQ AI Processor. Этот уникальный компонент управляет функциями AI, такими как оптимизация изображения и звука и работа AI-ассистентов. Автоматически подстраивая параметры в зависимости от окружающей обстановки, AI процессор делает просмотр более иммерсивным.

5) Динамики

▲ Динамики обеспечивают объемный звук.

2. Дисплей

1) Слой жидких кристаллов

▲ Жидкокристаллический слой и управление цветовым фильтром. Плата, прикрепленная к нижней части этого модуля, помогает свету на уровне пикселей, создавая изображение

Конструкция панели состоит из нескольких важных элементов. Слой жидких кристаллов регулирует яркость проходящего света, а цветовой фильтр разделяет цвета и формирует изображение на уровне пикселей. Материнская плата (PCB), прикрепленная к панели, точно управляет каждым пикселем, формируя изображение для получения лучшего качества.

2) Оптический лист

▲ Оптический лист концентрирует свет от подсветки для повышения яркости.

Оптический лист фокусирует свет от подсветки, создавая яркое и равномерное изображение по всей площади дисплея. За счет концентрации света повышается общая яркость панели.

3) Слой квантовых точек

▲ В QD-слое используются настоящие квантовые точки.

Далее следует, пожалуй, основа телевизоров Samsung QLED — полимерный слой с добавление раствора квантовых точек, который преобразует свечение подсветки. Технология обеспечивает более точную и яркую цветопередачу по сравнению с традиционными дисплеями, создавая реалистичное изображение. Квантовые точки этого слоя сертифицированы как безопасные для человека, так как не содержат вредных компонентов, включая кадмий, тем самым они обеспечивают безопасность телевизоров QLED.

4) Рассеивающая пластина

▲ Рассеивающая пластина равномерно распределяет свет по панели.

Рассеивающая пластина равномерно распределяет свет по панели, убирая яркие пятна и обеспечивая естественную освещенность панели. 

5) Синяя светодиодная подсветка

▲ На каждом изображении показаны различия между телевизором Samsung QLED (слева) и обычным ЖК-телевизором (справа).

Телевизоры Samsung QLED используют яркую синюю светодиодную подсветку с низким потреблением энергии. В сочетании со слоем квантовых точек подсветка обеспечивает чистые цвета и более высокую световую эффективность по сравнению с обычными белыми светодиодами в стандартных жидкокристаллических телевизорах, что повышает общую яркость изображения.

3.Три ключевых требования для соответствия телевизоров сертификации Real Quantum Dot

▲ Существует три основных требования к телевизорам с квантовыми точками.

Сертификация Real Quantum Dot присваивается телевизору, если выполнены три условия: наличие слоя квантовых точек, достаточная их концентрация и присутствие синей подсветки. Телевизор, отвечающий всем трем условиям, считается QLED моделью.

QLED-телевизоры Samsung — единственные в мире, которые соответствуют этим требованиям и получили сертификацию Real Quantum Dot Display международной сертификационной организации TÜV Rheinland, что подтверждает исключительное качество технологии QLED от Samsung. 

4. Ключевое отличие между QLED и LCD

▲ На каждой фотографии показана разница между телевизором Samsung QLED (слева) и обычным LCD-телевизором (справа).

Различия между QLED-телевизорами Samsung и традиционными LCD-телевизорами заметны даже невооруженным глазом, а при профессиональных измерениях становятся особенно очевидными. 

▲ График цветового спектра телевизора Samsung QLED. ^[2]

На QLED-телевизорах Samsung спектры красного, зеленого и синего цвета имеют четко разделенные диапазоны и выделенные пики, что обеспечивает точную передачу цвета без примесей. Зрители получают естественное изображение с насыщенными и глубокими оттенками.

▲ График цветового спектра LCD-телевизора.^[3]

Обычные LCD-телевизоры без слоя квантовых точек передают спектры красного, зеленого и синего цвета с меньшей интенсивностью и большим смешением оттенков , что мешает точной цветопередаче. Чтобы компенсировать это, обычным жидкокристаллическим телевизорам часто требуются многослойные цветовые фильтры, что в итоге снижает яркость.

Детальный разбор показывает, что QLED-телевизоры Samsung создаются с использованием сложных технологий, которые требуют более глубокого понимания. Все компоненты передачи цвета работают в гармонии, создавая яркое и реалистичное изображение. Слой квантовых точек (QD) усиливает насыщенность и глубину оттенков, а продуманная технология дисплея в целом определяет исключительное качество картинки.

^[1]AI, Artificial Intelligence – искусственный интеллект.

^[2]Смоделированное изображение, основанное на реальных измерениях.

^[3]Смоделированное изображение, основанное на реальных измерениях.

В заключительной части серии материалов Samsung «Лидерство в области ИИ» редакция Samsung Newsroom рассказывает, как технологический опыт и исследовательские инициативы Samsung помогают совершенствовать взаимодействие пользователей с ИИ.

Приоритет — работа с пользовательским опытом

Samsung использует решения на базе ИИ для устройств и облачных технологий. Эта стратегия подкрепляется развитием гибридного ИИ, который объединяет сильные стороны обеих технологий для создания контекстно-ориентированных решений, отвечающих различным потребностям пользователей. Решение о том, какой тип или сочетание технологий использовать, опирается на конечную цель — «Как мы можем наилучшим образом помочь пользователю?».
 

ИИ на устройствах обеспечивает безопасную и эффективную работу нейросетей на смартфонах и телевизорах, используя только данные и ресурсы самого устройства. Поскольку ИИ на устройстве не взаимодействует с облаком, ответы на запросы поступают практически мгновенно. А так как данные не покидают устройство, технология более надежна для конфиденциальных данных, связанных, например, с личной информацией.

Аналогичным образом технология edge AI работает независимо от облачных сервисов и полагается исключительно на конкретные внутренние ресурсы для выполнения функций ИИ. Во взаимосвязанной домашней среде, где бытовая техника и IoT-устройства работают в связке, обработка данных в технологии edge AI может осуществляться либо устройствами с более высокими техническими характеристиками, либо устройствами, находящимися поблизости, не зависящими от облака. Таким образом, технология edge AI обеспечивает преимущества в скорости и безопасности по сравнению с ИИ на устройствах.
 

В то время как ИИ на устройствах и технология edge AI основаны на технологиях, использующих небольшие модели и меньшее количество вычислений в ограниченных условиях аппаратного обеспечения, облачный ИИ поддерживает работу с обширной онлайн-информацией и высокопроизводительными вычислениями. Технология использует большие массивы данных и крупномасштабные модели ИИ, размещенные на серверах, для предоставления ряда расширенных возможностей. Для достижения высокой производительности и сохранения эффективности и безопасности Samsung проводит масштабные исследования в таких областях, как минимизация задержки данных, оптимизация эффективности моделей и внедрение анонимности и шифрования данных.
 

Благодаря опыту в различных видах ИИ — на устройствах, на периферийном оборудовании и в облаке — Samsung делает еще один шаг вперед и комбинирует различные форматы для наилучшего удовлетворения потребностей каждого пользовательского сценария. В гибридном ИИ конфиденциальные данные и данные, требующие быстрого реагирования, могут обрабатываться с помощью моделей ИИ на устройстве, в то время как облачные технологии могут управлять обработкой, требующей внешних ресурсов, таких как актуальная информация или высокопроизводительные модели. Например, Galaxy AI использует как ИИ на устройствах, так и облачный ИИ — независимо или одновременно, по мере необходимости, — чтобы предоставлять пользователям оптимальные решения.
 

▲ Дэхён Ким, исполнительный вице-президент международного центра изучения ИИ (Global AI Center) Samsung Research, объясняет стратегию Samsung в области ИИ.

Генеративный ИИ, интегрированный в повседневную жизнь

Samsung продолжает внедрять инновации в области генеративного ИИ, расширяя возможности своих продуктов и сервисов. Например, Galaxy AI предлагает набор функций^[1], включая функцию «Чат-ассистент» (Chat Assist), которая поддерживает письменный и устный перевод в некоторых приложениях для обмена сообщениями; функцию «Ассистент для заметок» (Note Assist), которая помогает обобщать заметки и генерировать обложки для них; и функцию «Фото-ассистент» (Photo Assist), которая редактирует изображения с помощью генеративного ИИ.

Генеративный ИИ также поддерживается в некоторых телевизорах и бытовой технике Samsung благодаря функции Generative Wallpaper.^[2]Пользователи могут наслаждаться 4K-изображениями, соответствующими их вкусам, на телевизоре Samsung Neo QLED 2024 или преобразить свою кухню с помощью генерируемых ИИ обоев на холодильнике Family Hub.

▲ Генерируемые обои на телевизоре Samsung с поддержкой ИИ

Чтобы предложить пользователям наилучшие возможности генеративного ИИ в своих устройствах, Samsung не только сотрудничает с партнерами, но и разрабатывает собственные модели ИИ. Начиная с фундаментальных технологий, включая разработку базовой модели, сбор данных и обучение, а также разработку моделей ИИ в упрощенном варианте, Samsung использует свой обширный опыт в области ИИ, чтобы оптимизировать решения и удовлетворить специфические требования каждого продукта.
 

Например, компания Samsung разработала собственные базовые модели для создания, редактирования и преобразования изображений, чтобы обеспечить широкий спектр возможностей визуального творчества. Это было непросто, поскольку в отличие от текстовых данных, которые состоят из дискретных значений, данные изображений состоят из непрерывных значений, что предоставляет практически безграничные возможности для их генерации. Чтобы решить эту непростую задачу, компания применила специальные методы обучения моделей изображений, уменьшив при этом их размер для эффективной работы на устройстве. Разработчики усовершенствовали алгоритмы глубинного обучения и методы дополнения данных, чтобы обеспечить быстрые вычисления и беспрепятственное создание изображений с минимальными требованиями к обработке.

Данные базовые модели затем были доработаны для конкретных приложений. Например, функция «Атмосферные фотографии» (Photo Ambient) в последних смартфонах Samsung объединяет модель изображения с данными в режиме реального времени для создания динамических обоев, которые визуально отражают текущие условия, например снегопад или звездную ночь, в зависимости от времени и погоды.

Samsung Gauss2: Генеративный ИИ от Samsung

Применение генеративного ИИ стремительно выходит за рамки личного повседневного использования и становится все более распространенным в корпоративной среде. Samsung разработала собственную модель генеративного ИИ, чтобы укрепить свою конкурентоспособность в области технологий ИИ, безопасно работать с конфиденциальной внутренней информацией и оптимизировать производительность и масштабируемость для конкретных целей. Собственный генеративный ИИ позволяет компании создавать модели, подходящие для широкого спектра продуктов и услуг, повышая при этом внутреннюю производительность в более безопасной среде.
 

Компания Samsung недавно представила обновленную модель генеративного ИИ Samsung Gauss2, которая отличается более высокой производительностью и эффективностью по сравнению со своей предыдущей моделью Samsung Gauss1, представленной в прошлом году. Samsung Gauss2 – это мультимодальная^[3] модель, способная одновременно обрабатывать и воспринимать различные типы данных.

Samsung Gauss2 выпускается в трех моделях, предназначенных для разных целей — Compact, Balanced и Supreme. Модель Compact — это облегченный вариант, оптимизированный для ИИ на устройстве. Модель Balanced, облачный вариант среднего размера, предназначена для решения таких задач, как генерация текста и кода. Модель Supreme, облачный вариант большого размера, создана для поддержки высокопроизводительных задач с особым вниманием к повышению производительности труда. 

▲ Samsung представила обновленную собственную модель генеративного ИИ

Для эффективной реализации больших моделей, подобных Supreme, Samsung применила технику Mixture of Experts (MoE), позволяющую выборочно активировать только «экспертные модели», наиболее подходящие для решения конкретных задач в рамках масштабной нейронной сети.

MoE значительно сокращает количество вычислений во время обучения и вывода, активируя только необходимые компоненты, а не запуская все экспертные модели одновременно в ответ на каждый запрос. Такая избирательная активация не только повышает эффективность, но и облегчает развитие модели для решения более сложных задач путем добавления новых экспертных моделей. Samsung тщательно обучила все эти модели работать точно и без помех.
 

▲ MoE оптимизирует вычисления для более эффективной работы с объемными моделями ИИ.

 
Samsung Gauss2 уже применяется во многих сферах деятельности Samsung. Например, подразделение Device eXperience (DX) использует ассистент кодирования Samsung Gauss2 для поддержки исследований и разработок. Данная технология использует специализированную модель, обученную на запатентованных данных, коде и процессах Samsung, для создания кода, необходимого для разработки продуктов и услуг. Полностью интегрированный во внутреннюю среду разработки ПО компании, ассистент кодирования поддерживает взаимодействие на языке естественного общения и различные языки программирования, что позволяет оптимизировать рабочие процессы разработчиков.
 

Портал Samsung Gauss Portal, сервис разговорного ИИ, широко используется для решения таких рабочих задач, как обобщение и перевод документов, составление электронных писем и т. д. В будущих обновлениях планируется расширить возможности использования естественного языка в вопросах и ответах, а также мультимодальные функции портала, включая интерпретацию таблиц и графиков и создание изображений.

Развитие возможностей ИИ за счет вовлечения пользователей

Используя широкие линейки своих продуктов, Samsung разрабатывает технологии, поддерживающие ИИ на устройствах, в облаке и генеративный ИИ, чтобы обеспечить конкурентное преимущество в возможностях ИИ.

Взаимодействуя с пользователями через свои продукты, компания узнает об их поведении и потребностях, что позволяет разрабатывать практические решения в области ИИ. Таким образом, создается непрерывный цикл, в котором данные пользователей служат основой для развития ИИ, который, в свою очередь, приносит пользу потребителям.
 

Samsung объединяет это глубокое понимание продуктов с собственными разработками и стратегическими партнерствами для внедрения наиболее оптимальных технологий ИИ. Например, нейронные процессоры (NPU) — специализированные ускорители для вычислений ИИ — должны соответствовать специфическим требованиям конкретных продуктов, а не применяться одинаково в разных устройствах. Samsung не только разрабатывает NPU для собственных продуктов, но и применяет программные оптимизации в партнерских чипсетах, обеспечивая поддержку функций ИИ и максимальную производительность в устройствах Samsung.

Кроме того, для решения вопросов безопасности компания использует опыт и мнения специалистов по конкретным продуктам, что способствует оперативному внедрению решений в продукцию и непрерывному технологическому совершенствованию. Решение Knox Matrix для обеспечения безопасности нескольких устройств на основе блокчейна — яркий пример того, как такой комплексный подход позволяет создать среду, в которой подключенные устройства проверяют друг друга на наличие угроз для повышения уровня защиты.

▲ Благодаря знаниям потребителей о различных продуктах Samsung лидирует в области ИИ.

Внедряя специальные технологии ИИ, Samsung продолжает открывать новые возможности для пользователей. В будущем компания планирует предоставить еще больше разнообразных решений с ИИ, которые будут расширять возможности пользователей благодаря полноценному и глубокому взаимодействию.

^[1]Доступность функций Galaxy AI может зависеть от региона, страны, версии ОС или One UI, модели и оператора.

^[2]Функция «Генеративные обои» может отличаться в зависимости от региона и модели.

^[3]Способность одновременно распознавать и обрабатывать различные типы данных (модальности), включая текст, изображения, аудио и видео.

Возможности подхода Data Intelligence в персонализированном ИИ

Создание персонализированного ИИ начинается с изучения пользователя. Интеллектуальный анализ данных (Data Intelligence) определяет потребности пользователя в конкретный момент, основываясь не только на истории использования устройства, но и на текущем контексте. Это позволяет своевременно предоставлять необходимые услуги. Однако существуют и сложности — например, пользователи не предоставляют точных отчетов о своих потребностях и желаниях; сопоставление ожидаемых потребностей и потенциальных услуг должно осуществляться в режиме реального времени; и самое главное — личная информация должна быть постоянно в безопасности.
 
Взаимодействие с пользователями практически во всех ежедневных задачах, включая работу, развлечения, домашние дела, заботу о здоровье и обеспечение безопасности, позволяет обрабатывать обширные сведения о пользовательском поведении и предпочтениях. 
 
Чтобы воспользоваться этим, Samsung расширяет свои технологические возможности, исследуя пользовательские данные, ежегодно собираемые с сотен миллионов устройств и сервисов — и все это в строгом соответствии с внутренними и внешними регламентами. По мере того как модели ИИ лучше понимают пользователей благодаря сбору, обработке и анализу данных, они могут использовать генерацию с расширенным поиском (RAG) для предоставления более персонализированных услуг в различных запросах. Благодаря технологиям, обеспечивающим связь надежных, логически обоснованных баз знаний с большими языковыми моделями (LLM), эти модели ИИ получают доступ к самой актуальной и достоверной информации и находят наиболее подходящие ответы.

 
Samsung также уделяет особое внимание технологиям, обеспечивающим связь между данными для совершенствования персонализированного ИИ-опыта. Ключевой вопрос заключается в том, как можно более эффективно управлять такими обширными и сложными данными и адаптировать их к индивидуальным потребностям? Ответ на этот вопрос отчасти кроется в графах знаний.
 

▲ Юнсу Ли, вице-президент, руководитель группы по анализу данных, Samsung Research, рассказывает об анализе данных.

Совершенствование опыта работы с ИИ с помощью графов знаний

Граф знаний — это система представления знаний, объединяющая информацию по всем графам, делая ее доступной для понимания как людьми, так и компьютерами. Определив отдельные части данных и связав их, можно представить их отношения в виде «тройки» по схеме «субъект – предикат – объект». Например, «столица Южной Кореи — Сеул» может быть представлена в виде следующего графа: «Южная Корея — столица — Сеул». Различные типы знаний, такие как люди, объекты, время и места, могут быть структурированы очень тонким образом путем соединения множества сущностей в этом тройном формате.

В отличие от традиционных баз данных, заполняющих таблицы информацией, графы знаний эффективно хранят данные и быстро извлекают информацию или новые выводы по мере необходимости.

▲ (справа) Графы знаний хранят данные эффективнее, чем реляционные базы данных (слева).

Samsung активно занимается исследованиями в области графов знаний. Если раньше использование данных ограничивалось отдельными приложениями, то теперь технология позволяет свободно искать и использовать информацию за пределами приложений или сервисов, обеспечивая максимально персонализированный опыт, как если бы устройство было настроено исключительно под пользователя.
 
В сочетании с ИИ Samsung, встроенным в устройство, графы знаний позволяют пользоваться максимально адаптированными ИИ-сервисами, защищая конфиденциальные персональные данные от внешнего воздействия. Данную технологию планируют применять в различных продуктах и устройствах.
 
Ключевым моментом при внедрении графов знаний является возможность быстрого поиска конкретных ответов на основе информации, представленной в графе. Для преобразования в графы данных постоянного меняющегося мира и эффективного извлечения информации требуются сложные вычислительные действия, а по мере роста графов быстрый поиск информации становится все более сложным.
 
Чтобы укрепить позиции в этой области, в июле Samsung приобрела компанию Oxford Semantic Technologies. Oxford Semantic Technologies — это стартап из Великобритании, известный своей технологией графов знаний, специализируется на оптимизации обработки данных и расширенных выводах, чтобы облегчить быстрое понимание и точное извлечение информации.
 

С 2018 года Samsung сотрудничает с Oxford Semantic Technologies в области баз данных графов и онтологий^[1], что позволит создать синергию в исследованиях персонализированного ИИ во всей экосистеме продуктов Samsung. Компания планирует разрабатывать приложения, предлагающие ценный опыт для потребителей, и изучать новые направления исследований в различных областях, включая интеграцию генеративного ИИ и графов знаний.

Расширение возможностей повседневной жизни с помощью анализа данных

Samsung стремительно внедряет персонализированные функции ИИ на основе интеллектуальных данных в широкий спектр продуктов и услуг, чтобы обогатить повседневную жизнь пользователей.
 

Одним из примеров является цифровое здравоохранение. Носимые устройства Galaxy Watch7 и Galaxy Ring всесторонне анализируют данные о состоянии здоровья пользователя, включая сон, физические нагрузки и частоту сердечных ритмов, чтобы предложить оценку состояния здоровья через приложение Samsung Health. Этот анализ, выходящий за рамки простого измерения данных, позволяет легко получить наглядную информацию о состоянии здоровья пользователя за день и персонализированную информацию по отдельным видам деятельности. Исследуя важность каждого фактора в Energy Score в зависимости от возраста и пола, Samsung разработала более индивидуальный подход к управлению здоровьем.
 
Развлекательный опыт также был улучшен благодаря анализу данных. В США Gaming Hub – игровая платформа Samsung для смартфонов —- использует алгоритм объяснимого искусственного интеллекта (XAI) для предоставления персонализированных рекомендаций по играм. Используя модель предпочтений пользователя, эта технология не только предлагает игры, но и обосновывает каждый вариант, чтобы помочь пользователям выбрать те игры, которые им больше всего подходят.

▲ Оценка энергопотребления

Усовершенствованный опыт работы с ИИ с помощью SmartThings

Персонализированный ИИ будет развиваться по мере подключения новых устройств друг к другу и получения данных о повседневной жизни пользователей. На октябрьской конференции Samsung Developer Conference 2024 (SDC24) компания Samsung представила Home Insight — сервис, позволяющий управлять своим умным домом и контролировать его с помощью SmartThings. Функция анализирует образ жизни пользователей, историю использования устройств и условия в доме, предоставляя отчеты в режиме реального времени и индивидуальные рекомендации, такие как отключение устройств или использование определенных функций в зависимости от ситуации.
 
Кроме того, Samsung предлагает персонализированную функцию ИИ для поддержки состояние и безопасности членов семьи, которые в этом нуждаются. Запущенная в июне функция SmartThings Family Care позволяет пользователям удаленно присматривать за членами семьи и принимать необходимые меры с помощью подключенных к SmartThings устройств и данных о местоположении. Компания планирует расширить эти возможности, связанные с ИИ, на устройства для здоровья, поддерживая здоровье семьи в таких вопросах, как сон и диета.
 
Samsung развивает технологию, позволяющую устройствам распознавать пользователей и обеспечивать бесшовный персонализированный опыт на всех подключенных устройствах. Например, компания планирует сделать так, чтобы пользователи, у которых на смартфоне активирован режим крупного текста, могли автоматически применять эту настройку на других устройствах с помощью одной голосовой команды. Кроме того, Samsung изучает возможности использования датчиков и устройств в доме для определения местоположения пользователя и настройки освещения, температуры и влажности в соответствии с индивидуальными предпочтениями.
 

▲ На выставке SDC24 компания Samsung представила новые возможности ИИ.

Персонализированный ИИ нуждается в надежной защите

Безопасность — одно из основных требований для создания надежного, персонализированного ИИ. Чтобы обеспечить защиту личной информации и устранить погрешности в системах ИИ, необходим многогранный подход, включающий совершенствование процессов обработки данных и обучения моделей, а также внедрение тщательного процесса проверки результатов.

При сборе внутренних и внешних данных для обучения моделей ИИ Samsung проводит предварительную обработку данных, чтобы проверить и исключить возможность нарушения конфиденциальности. Кроме того, компания усиливает проверку безопасности результатов работы ИИ, устраняя риски, связанные с вредом, предвзятостью, конфиденциальностью и наличием угроз джейлбрейка (взлома)^[2]. 
 
Технология Knox Matrix от Samsung повышает уровень защиты в условиях подключения нескольких устройств. Используя технологию блокчейн, подключенные устройства могут контролировать друг друга на предмет угроз с помощью Trust Chain; безопасно обмениваться пользовательскими данными, передавая на серверы только зашифрованную информацию с помощью Credential Sync; и применять общие стандарты безопасности для операционных систем, таких как Android, Tizen и Windows, с помощью Cross Platform. Samsung планирует распространить Knox Matrix на свои мобильные устройства, телевизоры и бытовую технику.
 

▲ Knox Matrix

Samsung продолжает расширять свою пользовательскую базу благодаря передовым технологиям передачи данных и возможностям подключения нескольких устройств, используя данные для проведения исследований и укрепления конкурентных преимуществ. Благодаря этим усилиям компания способствует быстрому развитию персонализированного ИИ и предоставляет пользователям инновационные возможности под рукой. В третьей части этой серии новостей Samsung Newsroom расскажет о том, как различные методы стратегии Samsung в области ИИ существенно меняют жизнь пользователей.

^[1]Метод поиска, при котором объекты находятся с помощью логических добавлений, таких как отношения связи и отношения включения.
^[2]Способы атаки, позволяющие обойти меры безопасности и этические нормы моделей ИИ для создания вредоносного контента.

В этом материале подробно рассказываем, как проходят всесторонние проверки качества, которые отличают бытовую технику Samsung.

Холодильники: долговечность и стабильность температур 

Холодильник – это наиболее часто используемое устройство на кухне. Для того чтобы убедиться в том, что холодильники Samsung способны работать в самых сложных условиях, проводится тест Door Slam Test^[1], имитирующий процесс открывания и закрывания дверей десятки тысяч раз в зависимости от модели. Так инженеры проверяют петли на предмет провисания, выявляют необычные шумы и определяют, насколько плавно двери продолжают функционировать в условиях повышенной нагрузки.

Также проводятся тестирования для оценки эффективности работы холодильников в течение всех четырех времен года. Проверка соблюдения температурного режима заставляет холодильники работать на пределе своих возможностей, воспроизводя различные сезонные погодные условия – от морозной зимы до знойной летней жары свыше 40 градусов по Цельсию. Благодаря этому можно гарантировать поддержание необходимой мощности системы охлаждения при экстремальных температурах.

Сохранение свежести продуктов питания зависит от стабильной температуры внутри. Используя термопары, размещенные во всех тестируемых холодильниках и морозильных камерах, проверка отсеков изменяет настройки и имитирует колебания влажности и температуры, чтобы проверить, равномерно ли охлаждаются отделения и полки.

Для моделей холодильников, оснащенных автоматическими льдогенераторами, проводится тест производительности льдогенератора, проверяющий возможности производства льда и его качество путем изменения давления воды, температуры и расположения насечек.

▲ Контроль захлопывания дверцы (слева) и проверка защиты от протечек (справа)

Стиральные машины: готовность к суровым зимам и влажной среде

Стиральные машины часто устанавливают в местах с неблагоприятными условиями, например, в ванной комнате, где есть риск попадания влаги, или на даче, где зимой возможно воздействие пониженных температур. Так, Samsung проводит интенсивные стресс-тестирования, чтобы убедиться в надежности работы своих устройств в подобных условиях.

Тест на морозоустойчивость оценивает долговечность стиральных машин Samsung в зимний период, многократно подвергая приборы воздействию низких температур, как в Арктике, и очень высоких, как в знойное лето. Кроме того, инженеры проводят проверку на герметичность для оценки устойчивости стиральных машин к протечкам. Cпециалисты заполняют барабаны водой, устанавливают машины под углом и наблюдают за протечками в течение 24 часов или дольше при различном уровне влажности и температуре.

Проверка водонепроницаемости, с другой стороны, показывает, насколько эффективно функционируют стиральные машины во влажной среде. Вращающиеся форсунки под высоким давлением распыляют воду на приборы в течение длительного времени, при этом инженеры внимательно следят за тем, не попадает ли вода на электрические компоненты и не образуется ли конденсат под воздействием влажности.

Кухонная бытовая техника: разработано с учетом сроков эксплуатации 

▲ Тест на долговечность (слева) и тест на загрузку и разгрузку корзины (справа)

Срок службы электрических варочных панелей Samsung в реальных условиях можно оценить с помощью теста на долговечность. В этом симуляторе инженеры проверяют износостойкость десятков кухонных плит в течение нескольких месяцев, многократно нагревая и охлаждая на них стандартные емкости, которые при этом автоматически наполняются водой.

Помимо этого, посудомоечные машины Samsung проходят тест на загрузку и разгрузку корзин, чтобы выявить дефекты в их роликах. Инженеры целенаправленно нагружают корзины посудомоечных машин сверх стандартной нормы вместимости и задвигают и выдвигают их десятки тысяч раз, чтобы убедиться в качестве роликов, рейлингов и форсунок.

Вся бытовая техника Samsung создается с одной главной целью – обеспечить спокойствие пользователей. Samsung продолжит усиливать контроль и проверку качества во всех линейках своей продукции с целью достижения беспрецедентного уровня надежности и долговечности.

^[1] «Дор Слэм Тест»

Облако больше не требуется: трансформация возможностей ИИ на устройствах

Стремясь к скорости и безопасности, многие представители технологической индустрии сосредоточились на развитии сложного генеративного ИИ в системе устройств. Благодаря долгосрочным инвестициям в течение более десяти лет, компания Samsung уже разработала функции искусственного интеллекта для многих своих устройств и заняла лидирующее положение в области предоставления возможностей ИИ на устройствах для повседневной жизни.
 
Например, Samsung Galaxy AI предлагает встроенные возможности на новейших мобильных устройствах и планшетах компании^[1]. Теперь Galaxy AI поддерживает в общей сложности 20 языков^[2], что позволяет общаться без языковых барьеров, делать перевод разговоров, а также сообщений и веб-страниц в режиме реального времени.
 
В производстве телевизоров Samsung использует свой мировой опыт как лидера рынка ТВ для обучения моделей искусственного интеллекта. С 2020 года компания постоянно совершенствует свой процессор для телевизоров со встроенным NPU (блоком нейронной обработки). Процессор NQ8 AI Gen3 модели Neo QLED 8K 2024 года оснащён 512 нейронными сетями для улучшения качества изображения и звука. Где каждая сеть отвечает за определённую группу задач. Анализируя и изменяя пиксели, кадры и источники звука, процессор обеспечивает превосходное масштабирование, плавность движения и четкость передачи диалогов для комфортного просмотра в любых ситуациях.
 
Ключом к внедрению ИИ на устройстве является минимизация размера модели при сохранении производительности. Для этого Samsung сосредоточилась на эффективной реализации и использовании специализированных обучающих данных ИИ, адаптированных под конкретные задачи.

▲ СонМин Ким (Sunmin Kim) и Чулхи Хам (Cheulhee Hahm), руководители подразделения визуальных дисплеев Samsung Electronics, рассказывают об искусственном интеллекте на устройствах.

Меньше и быстрее: исследование Samsung по оптимизации искусственного интеллекта

По мере развития технологий ИИ и повышения требований к обработке данных оптимизация моделей приобретает решающее значение. Другими словами, высокопроизводительные модели искусственного интеллекта должны быть способны эффективно работать в рамках ресурсов устройств, включая их процессоры, память и аккумуляторы, сохраняя при этом уровень производительности и надёжности для повседневного использования. Ключевыми технологиями для этого выступают сжатие моделей, аппаратная оптимизация и ускорение обработки данных.
 
Samsung разработала различные технологии в области сжатия для уменьшения размера моделей ИИ. Компании удалось создать лёгкие и быстрые модели ИИ с помощью таких методов, как квантование, которое повышает скорость отклика за счёт упрощения алгоритмов и оптимизации вычислительных процессов; обрезка, которая удаляет несущественные элементы из более крупной модели; и дистилляция знаний, которая переносит данные из крупных моделей в меньшие модели.
 
Samsung также продолжает внедрять инновации в области оптимизации аппаратного обеспечения и ускорения обработки данных для быстрой и эффективной работы ИИ. Например, технология использования флэш-памяти позволяет разделять большие модели ИИ и значительно сокращает использование памяти. Кроме того, компания разработала запатентованную технологию, которая будет способствовать быстрому выводу данных на низкоуровневых устройствах без NPU, что позволит расширить сферу применения ИИ в различных продуктах. В настоящее время проводятся дальнейшие исследования по увеличению скорости вывода данных с помощью спекулятивного декодирования — технологии, которая прогнозирует результаты работы модели ИИ, — и повышению вычислительной мощности за счёт одновременной работы различных устройств.
 

▲ Процесс обрезки и дистилляции знаний.

Комплексная экспертиза: от внутренней разработки до внедрения

Благодаря широкому опыту в области аппаратного и программного обеспечения, разработки компонентов и конечных продукты, Samsung выступает лидером инноваций в сфере искусственного интеллекта в устройствах, начиная с исследований и разработок и заканчивая внедрением продуктов.
 
С точки зрения оценки устройств, лидерство Samsung на рынке смартфонов, телевизоров, бытовой техники подтверждает ее превосходство как в аппаратном, так и в программном обеспечении. Samsung интегрирует ИИ в свои устройства, что позволяет использовать как собственные разработки, так и открытое сотрудничество с отраслевыми партнёрами для создания оптимизированных для аппаратного обеспечения моделей искусственного интеллекта.
 
Экспертиза Samsung также включает в себя системное программное обеспечение, обеспечивающее связь между аппаратным и прикладным ПО. Например, операционная система Tizen и NPU в телевизорах Samsung обеспечивают работу искусственного интеллекта на устройстве для более качественного просмотра. Компания предоставляет разработчикам SDK для Vision AI и Language AI, а также API для машинного обучения, чтобы облегчить обучение и вывод моделей ИИ.
 
Samsung Research, центр передовых исследований и разработок компании, сосредоточен на повышении конкурентоспособности за счет использования экспертных данных из глобальной сети лабораторий — от разработки структуры моделей ИИ и сжатия моделей в Великобритании и США до создания решений для ускорения ИИ в Индии и Польше.
 
Что касается компонентов, то Samsung, как ведущий производитель полупроводников, непрерывно добивается прогресса в производительности NPU и планирует продолжать сотрудничество со своими партнерами для разработки новых способов использования искусственного интеллекта в устройствах.
 

▲ Samsung представила новые возможности AI TV на конференции Samsung Developer Conference 2024 в октябре.

 
В дальнейшем возможности искусственного интеллекта в устройствах, будут распространяться на все большее количество продуктов и сервисов. Samsung является инициатором революционных изменений, в результате которых технологии искусственного интеллекта изменят повседневную жизнь. Во второй части серии новостей об искусственном интеллекте Samsung Newsroom расскажет об инновациях компании в области персонализированного ИИ.
 
^[1]Galaxy AI поддерживается на устройствах Galaxy Z Fold6, Flip6, Fold5, Flip5, Fold4, Flip4, S24 серии, S23 серии, S22 серии, S24 FE, S23 FE, Tab S10 серии, Tab S9 серии, Tab S8 серии и других.
^[2]Galaxy AI поддерживает следующие языки: английский, арабский, корейский, упрощенный китайский, голландский, вьетнамский, индонезийский, испанский, итальянский, польский, португальский, румынский, русский, тайский, турецкий, французский, немецкий, хинди, шведский и японский.

▲ Показатели сна

▲ Режим Мультиспорт

Для пользователей, которые любят активный отдых, такой как бег или езда на велосипеде, Galaxy Watch Ultra предлагает максимальную производительность и функции, подходящие для использования в суровых условиях. Среди них представлены режим Мультиспорт^[1] для тренировок по триатлону, отслеживание функциональной пороговой мощности (FTP)^[2] при занятиях велоспортом с использованием анализа данных на основе искусственного интеллекта и персональные зоны пульса для определения оптимальной интенсивности тренировок. Galaxy Watch7 предоставляют различные сведения о состоянии здоровья пользователей, независимо от того, создают ли они свои собственные программы тренировок с помощью функции сценарий тренировки или отслеживают параметры более 100 различных видов упражнений с запястья.

▲ Индекс конечных продуктов гликирования (AGE)

Особого внимания заслуживает обновленный датчик BioActive, представленный в Galaxy Watch Ultra и Galaxy Watch7. Оптический сенсор позволяет измерять индекс конечных продуктов гликирования (AGE)^[3] — показатель метаболического состояния здоровья и биологического старения, зависящих от образа жизни и режима питания, что помогает пользователям принимать более взвешенные решения и меры профилактики для заботы о своем здоровье.

▲ Показатель жизненных сил

Новая функция Показатель жизненных сил (Energy Score) оценивает состояние здоровья пользователей, отслеживая такие параметры, как уровень активности, сон, частота сердечных сокращений во время сна и другие. Благодаря этому пользователи могут своевременно принять решение в пользу хорошего самочувствия: стоит ли сделать перерыв или повысить уровень физической активности.

Подробнее о новейших функциях Galaxy AI для мониторинга здоровья в видеоролике ниже:

^[1] Доступно на устройствах Galaxy Watch Ultra.

^[2] Доступно на устройствах Galaxy Watch Ultra и Galaxy Watch7.

^[3] Конечные продукты гликирования (AGE) — это токсичные вещества, образующиеся, когда избыточное количество сахара в крови соединяется с белками или жирами в результате неправильного питания и образа жизни. Эти соединения часто встречаются в продуктах, подвергающихся воздействию высоких температур при приготовлении, например, в вареной или жареной во фритюре пище. При избыточном потреблении AGE могут накапливаться в организме и оказывать негативное влияние на здоровье.

▲ Ассистент для заметок

Функция наложения перевода (PDF Overlay Translation) автоматически определяет содержимое PDF-файлов и отображает переведенный текст поверх верстки. Эта функция помогает пользователям быстро понять сложные материалы или документы на иностранных языках.  

▲ Функция наложения перевода

Раскрыть творческий потенциал пользователей поможет функция AI Рисунок (Sketch to image). Cделайте простой набросок с помощью S Pen или пальца и наблюдайте, как Galaxy AI превращает его в готовое изображение, добавляя графические элементы и цвета на основе исходного эскиза. Упростив творческий процесс, пользователи могут сосредоточиться на своих идеях, а Galaxy AI поможет воплотить их в жизнь.

▲ AI Рисунок

Функция Galaxy Обвести и найти (Circle to Search) с помощью Google, управляемая жестами, поможет прочитать вывески или меню кафе на иностранных языках, находясь за рубежом. Даже в случае смешения языков, например, английского, китайского и французского, функция автоматически определит каждый из них, и перевод сразу же отобразится поверх изображения. Обвести и найти открывает дополнительные возможности на большом экране Galaxy Z Fold6, поскольку пользователи могут повысить эффективность выполнения задач благодаря расширенным результатам поиска.

▲ Обвести и найти

Посмотрите видео ниже, чтобы познакомиться с универсальными возможностями серии Galaxy Z Fold.   

▲ «Автозум» в режиме Flex

Теперь можно с легкостью сделать идеальное селфи на фоне Эйфелевой башни с помощью Galaxy Z Flip6. Благодаря функции «Автозум» (Auto Zoom) в режиме Flex пользователям больше не нужно постоянно настраивать параметры съемки и отходить назад, чтобы успеть принять подходящую позу. Камера создает оптимальную композицию, автоматически определяя объект съемки и приближая или удаляя его, что позволяет одновременно увидеть на внешнем Flex Экране, как выстроен кадр. 

▲ Алгоритмы «ProVisual» в Galaxy Z Flip6 выводят качество фотографии на новый уровень.

Оснащенный 50-мегапиксельной широкоугольной камерой и обновленными алгоритмами «ProVisual» (ProVisual Engine) на основе искусственного интеллекта Galaxy Z Flip6 предлагает невероятные возможности съемки и улучшенное качество фотографий. Galaxy AI^[1] распознает объекты с большей точностью, благодаря чему оттенки кожи выглядят более естественными, а мелкие детали, такие как ресницы, получаются более четкими. Даже в условиях слабого освещения качество кадров остается на высоком уровне.

▲ Студия Портретов

Подходите к созданию портретов более творчески с инновационной функцией Galaxy AI для редактирования изображений «Студия Портретов» (Portrait Studio). Просто откройте фотографию в галерее, а затем найдите функцию, нажав на иконку карандаша, чтобы применить различные стили и шаблоны, включая комиксы, 3D-скетчи, акварель и эскиз. Персонализируйте селфи в одно касание.

▲ Мгновенная замедленная съемка

Функция «Мгновенной замедленной съемки» (Instant Slow–mo) позволяет запечатлеть особые моменты в замедленном режиме. При длительном нажатии на экран пользователь может плавно переключиться в режим замедленной съемки и насладиться важными мгновениями кадр за кадром. С Galaxy Z Flip6 и Galaxy Z Fold6 эти видео можно моментально сохранить в галерее или поделиться с близкими.

Узнайте больше о новых возможностях для творчества Galaxy AI, из видео ниже:

^[1]Artificial Intelligence – искусственный интеллект.

▲ Переводчик

Благодаря функции Galaxy AI^[1] «Переводчик» (Interpreter) пользователи больше не будут чувствовать себя потерянными в чужом городе. Впервые представленный в смартфонах серии Galaxy S24 «Переводчик» был оптимизирован для использования на складных устройствах. С Galaxy Z Flip6 в режиме Flex пользователи могут в реальном времени общаться с людьми, говорящими на другом языке, с помощью перевода, отображаемого как на внешнем, так и на основном экране. В режиме разговора (Conversation) общение лицом к лицу становится более естественным, поскольку фразы на родном языке каждого собеседника видны на дисплее.

▲ Режим прослушивания

Используйте возможности режима прослушивания на лекциях по иностранным языкам или в путешествиях по другим странам. При активации этой функции прослушиваемая лекция или рассказ гида будут переведены в текст в режиме реального времени. Подключив наушники Galaxy Buds3 Pro или Buds3 к смартфону, вы получите наилучший опыт и максимальный комфорт от использования функции синхронного перевода. Теперь язык не должен быть барьером при общении с людьми, говорящими на другом языке.

▲ Рекомендованные ответы

Затрудняетесь придумать содержательный ответ на сообщение или ответить на письмо на ходу? Функция Galaxy AI «Рекомендованные ответы» (Suggested replies) предлагает подходящие формулировки на основе последних сообщений в чате, которые можно легко отправить c Flex Экрана.

▲ Генератор текста

Чат-ассистент (Chat Assist) позволяет скорректировать грамматику, орфографию, пунктуацию и общий стиль письма при отправке сообщений коллегам или публикации в социальных сетях. Galaxy AI анализирует текст и вносит правки и предложения для различных контекстов и ситуаций. В случаях, когда нет времени писать длинное сообщение, можно использовать Генератор текста (Composer). Просто откройте электронную почту, введите лаконичные ключевые слова или фразы, например, «забронировать билет на поезд в Сеул в эти выходные» и нажмите «Создать». Генератор текста составит подробное письмо с приветствием и основной частью.

В видео ниже показываем, как Galaxy AI меняет возможности коммуникации:

^[1]AI, Artificial Intelligence – искусственный интеллект.

Речь идет не только о шифровании: процессор Samsung KnoxVault максимально оберегает всю важную информацию, необходимую для работы таких сервисов, как Samsung Pay. Все данные, хранящиеся в Samsung Knox Vault, изолированы от основной операционной системы для надежной защиты, в том числе от атак с использованием напряжения, температуры и лазеров.

Подробнее о том, как Samsung Knox Vault обеспечивает безопасность самой важной информации, – в этом видео.

1 В настоящее время доступно только для серии Galaxy S21, при этом в будущем Samsung Knox Vault может появиться и на других устройствах Galaxy.