A Samsung Newsroom reforça a importância da data destacando o trabalho contínuo da Samsung Research na detecção precoce da demência.

A importância do diagnóstico precoce

A doença de Alzheimer é incurável e irreversível. Quando os sintomas aparecem, a função cognitiva entra em declínio contínuo — impactando a vida diária de forma profunda.

O comprometimento cognitivo leve (CCL), muitas vezes considerado um estágio precursor da demência, é motivo particular de atenção. Testes clínicos revelam declínio cognitivo mensurável em pessoas com CCL, embora elas ainda sejam capazes de realizar atividades cotidianas. Segundo estudos citados pela Alzheimer’s Association, cerca de 12% a 18% das pessoas com 60 anos ou mais vivem com CCL, e 10% a 15% delas progridem para demência a cada ano. Como resultado, a detecção precoce e o gerenciamento do CCL tornaram-se uma prioridade crescente para a comunidade médica^1,2.

Múltiplos estudos mostram que mudanças no cérebro podem começar 10 a 20 anos antes do surgimento da demência causada pelo Alzheimer³. Portanto, detectar esses sinais iniciais é fundamental. Embora avanços recentes em terapias tenham gerado esperança de tratamento, o diagnóstico precoce combinado com acompanhamento contínuo continua sendo a abordagem mais eficaz hoje.

Os benefícios da detecção precoce incluem:

• Implementar mudanças no estilo de vida — como melhorar a dieta, praticar exercícios e estimular a cognição — para ajudar a retardar a progressão da doença.
• Iniciar intervenções medicamentosas e não medicamentosas mais cedo, preservando as habilidades cognitivas.
• Ter acesso a novas terapias, incluindo medicamentos recém-aprovados ou em fase de testes clínicos.

Acompanhando mudanças com tecnologia de biomarcadores digitais

Smartphones e wearables se tornaram essenciais no dia a dia, registrando informações detalhadas sobre os hábitos e comportamentos dos usuários. Esses dados capturam mudanças sutis de rotina com alta sensibilidade.

Reconhecendo esse potencial, os pesquisadores da Samsung Research desenvolveram tecnologia de biomarcadores digitais que rastreia alterações na função cognitiva analisando dados multimodais de smartphones e wearables — incluindo uso de aplicativos, velocidade de digitação, padrões de mensagens, frequência de chamadas, sono e voz.

Os pesquisadores propuseram que os biomarcadores digitais poderiam medir sintomas de declínio cognitivo identificados em estudos anteriores. Ao analisar dados multimodais, estimaram estados cognitivos e confirmaram que os algoritmos de biomarcadores digitais acompanham efetivamente as mudanças cognitivas.

Relembrar e repetir frases curtas pode avaliar regiões cerebrais relacionadas à memória de curto prazo, enquanto a fluência e precisão da fala revelam o estado da capacidade linguística. Da mesma forma, a regularidade e a variedade no uso de apps e mensagens, junto com a frequência de chamadas, fornecem insights sobre redes sociais e funções executivas do cérebro.

Em resumo, o estudo demonstrou que regiões do cérebro responsáveis pela linguagem e pela memória de curto prazo — normalmente afetadas pela doença de Alzheimer — podem ser avaliadas por meio de dados de voz. As descobertas também indicam que o declínio das habilidades sociais e comportamentais está associado a padrões de uso de apps, mensagens e ligações.

Detectando o declínio com dados do cotidiano

Em julho, a equipe da Samsung Research apresentou estudos sobre tecnologias baseadas em dispositivos inteligentes para detecção do declínio cognitivo na Conferência Internacional da IEEE EMBS (Engineering in Medicine and Biology Society) em Copenhague, Dinamarca.

Um dos estudos apresentou tecnologia que analisa padrões de digitação no teclado do smartphone para detectar sinais iniciais de comprometimento cognitivo. A pesquisa priorizou a análise de recursos não verbais, como velocidade de digitação e padrões de correção, em vez de examinar o conteúdo inserido, reduzindo riscos de privacidade. Essa abordagem independente de idioma demonstrou potencial global significativo, e o artigo ficou entre os 7% melhor classificados da conferência.

Outro estudo analisou dados de smartphones e sensores do Galaxy Watch para monitorar padrões de caminhada — incluindo velocidade da marcha, comprimento do passo e equilíbrio — com o objetivo de detectar precocemente o declínio cognitivo.

Ambos os estudos mostraram desempenho comparável a testes hospitalares de triagem de demência, aproveitando dados comportamentais do cotidiano, eliminando a necessidade de entradas adicionais do usuário e revelando o potencial de rastrear mudanças cognitivas por meio de dados de rotina.

Melhorando a qualidade de vida com tecnologia

A tecnologia de biomarcadores digitais é projetada para aprimorar a detecção precoce de sinais sutis da doença de Alzheimer que poderiam passar despercebidos no dia a dia. A Samsung Research pretende continuar validando o desempenho de seus modelos, ao mesmo tempo em que avança ainda mais na tecnologia.

Embora a colaboração contínua com a academia e a comunidade médica seja necessária para refinamento e maior precisão, espera-se que os avanços na detecção precoce da demência melhorem a saúde pessoal, aumentem a qualidade de vida e reduzam a pressão sobre os sistemas de saúde.

* A doença de Alzheimer é uma patologia subjacente em que as proteínas beta-amiloide e tau se acumulam no cérebro.

** A demência causada pela doença de Alzheimer é a demência provocada pela própria doença.

¹ Petersen RC et al., “Mild cognitive impairment: clinical characterization and outcome,” Archives of Neurology (1999). Disponível em: https://pubmed.ncbi.nlm.nih.gov/10190820/

² Petersen RC et al., “Current concepts in mild cognitive impairment,” Archives of Neurology (2001). Disponível em: https://jamanetwork.com/journals/jamaneurology/article-abstract/781015

³ Jack CR Jr, et al., “NIA-AA Research Framework: Toward a biological definition of Alzheimer’s disease,” Alzheimer’s & Dementia (2018). Disponível em: https://pubmed.ncbi.nlm.nih.gov/29653606/

A Samsung Newsroom deu uma olhada mais de perto na tecnologia por trás do Eclipsa Audio e como ele oferece áudio espacial 3D realista.

Imagem meramente ilustrativa.

Desenvolvimento da tecnologia de áudio espacial 3D

Em 2023, a Alliance for Open Media (AOM) – um consórcio global que inclui Samsung, Google, Netflix, Meta e outras empresas líderes – adotou oficialmente o Immersive Audio Model and Formats (IAMF) como o padrão do setor para áudio 3D. Desenvolvido pela Samsung e pelo Google, esse formato inovador de áudio 3D está atualmente disponível para os criadores de conteúdo sob a marca Eclipsa Audio.

O Eclipsa Audio estabelece um protocolo compartilhado entre diferentes tipos de conteúdo de mídia e os dispositivos que os reproduzem. O formato proporciona uma experiência auditiva profundamente imersiva ao otimizar e adaptar o posicionamento do áudio, a intensidade, os reflexos espaciais e outros elementos sonoros a vários ambientes de reprodução, como cinemas, sistemas de home theater, consoles de jogos e dispositivos móveis.

Dependendo do dispositivo de saída, a tecnologia pode reproduzir o som de várias direções – inclusive da frente, de trás, da esquerda, da direita, de cima e de baixo – para criar uma sensação de profundidade espacial e presença na cena que está sendo assistida. Em um vídeo de show, por exemplo, o Eclipsa Audio apresenta a performance do artista em detalhes cristalinos e, ao mesmo tempo, capta a energia do público, fazendo com que o espectador se sinta como se estivesse fisicamente presente.

Projetado para otimizar o áudio 3D na vida cotidiana

Entre a crescente variedade de tecnologias que aprimoram o som 3D – incluindo som surround, áudio imersivo e áudio espacial – o Eclipsa Audio foi projetado especificamente para oferecer uma experiência de áudio 3D otimizada para a audição cotidiana.

Tradicionalmente, o conteúdo de áudio 3D é criado com a suposição de que será reproduzido em ambientes equipados com vários alto-falantes surround. Entretanto, a maioria das configurações de entretenimento doméstico consiste basicamente em uma TV e uma soundbar, o que torna difícil reproduzir com precisão os efeitos de áudio espacial pretendidos pelo criador do conteúdo. O Eclipsa Audio supera essa limitação analisando automaticamente os elementos sonoros em cada segmento de um filme – desde o diálogo sussurrado até o rugido dos aviões de caças ao fundo – e fornecendo um efeito de áudio dinâmico em 3D ajustado para o ambiente doméstico do espectador.

Criação de um ecossistema de áudio 3D com tecnologia de código aberto

A estrutura de código aberto do Eclipsa Audio o diferencia de outras tecnologias de áudio 3D, pois permite que qualquer pessoa crie conteúdo sem pagar royalties. Após sua estreia na CES 2025, a tecnologia foi recebida com entusiasmo pelos criadores de conteúdo e ganhou impulso em plataformas de mídia e comunidades online.

Dessa forma, o Eclipsa Audio funciona como um recipiente aberto no qual os criadores de conteúdo podem integrar elementos de áudio 3D de todas as direções, sem restrições. Ao democratizar o áudio espacial, o Eclipsa Audio capacita os criadores e garante que os consumidores experimentem o som como pretendido – independentemente da sua configuração de áudio.

Eclipsa Audio nas TVs Samsung

O som imersivo do Eclipsa Audio tem seu melhor desempenho quando combinado com um hardware excepcional. Para tornar esse desempenho máximo uma realidade, a Samsung e o Google trabalharam incansavelmente para oferecer aos consumidores conteúdo de áudio 3D compatível com o Eclipsa Audio.

A maioria das TVs Samsung é equipada com alto-falantes estéreo na parte inferior da tela e, nos modelos QLED 4K e superiores, alto-falantes adicionais são posicionados na parte superior. Os modelos topo de linha, no entanto, vêm com benefícios extras. Além dos alto-falantes surround adicionados à parte traseira das laterais, os alto-falantes posicionados na parte superior são especialmente projetados para percepção de altura. O Eclipsa Audio reflete o som no teto com esses alto-falantes especiais, criando um efeito que permite que os espectadores sintam o áudio direcionado para cima – como a sensação de um objeto voando sobre a cabeça. O emparelhamento da TV com uma soundbar aprimora ainda mais a experiência, produzindo um áudio espacial 3D mais rico e expansivo.

O Eclipsa Audio estabeleceu a base para um ecossistema de conteúdo de áudio 3D, reunindo líderes do setor – de fabricantes de dispositivos a plataformas de conteúdo – em um padrão unificado. Em uma era em que os serviços de streaming obscurecem a linha entre a criação e o consumo de conteúdo, o Eclipsa Audio abre novas possibilidades para o som imersivo que a Samsung está determinada a expandir ainda mais.

Para saber mais sobre as tecnologias da Samsung, fique ligado na Newsroom Brasil.

¹O cronograma de lançamento e os detalhes do serviço podem variar de acordo com o modelo da TV.

A Samsung Electronics está acelerando os preparativos para comunicações futuras integrando a tecnologia de Inteligência Artificial em toda a Rede de Acesso de Rádio (RAN, na sigla em inglês), desde unidades de rádio (responsáveis pela conversão entre sinais analógicos e digitais em estações base, antenas) e unidades digitais (incluindo modems para modulação e demodulação de sinal digital, programadores para alocação de recursos), até a operação do sistema, avançando assim a convergência das tecnologias de telecomunicações e AI.

Em redes de comunicação móvel, a RAN, que conecta telefones celulares à rede principal, é um componente crítico que determina a experiência do usuário em termos de velocidade de transmissão e qualidade de comunicação. Como responsável pela maior parcela do uso de energia entre toda a rede de comunicação, incluindo redes principais e data centers, a necessidade de tecnologia de economia de energia também é alta.

A Samsung está conduzindo pesquisas sobre a tecnologia AI-RAN, que integra a tecnologia de AI à RAN. Em particular, no Silicon Valley Future Wireless Summit realizado em novembro do ano passado, as tecnologias AI-RAN foram demonstradas em colaboração com parceiros da indústria, mostrando capacidades para melhorar o rendimento de dados da estação base (ou seja, a quantidade de dados transmitidos com sucesso por uma estação base durante um determinado período), cobertura de comunicação (equivalente ao alcance geográfico onde os serviços de comunicação fornecidos por uma estação base estão disponíveis) e eficiência energética, entre outros.

Um exemplo é utilizar a tecnologia de AI para melhorar o desempenho da tecnologia de estimativa de canal para estimar o estado dos canais sem fio onde os dados são transmitidos entre estações base e telefones celulares. O resultado mostrou que o rendimento de dados de downlink da estação base para o telefone celular e o rendimento de dados de uplink do telefone celular para a estação base foram significativamente aprimorados em comparação com a 5G RAN.

Além disso, foi demonstrado que a eficiência energética foi aprimorada pela aplicação adaptativa de energia de acordo com a intensidade dos sinais transmitidos.

Essas demonstrações pioneiras do setor mostradas a operadoras de telecomunicações com resultados da Prova de Conceito (PoC, na sigla em inglês) aplicando AI em toda a RAN identificaram o potencial da Inteligência Artificial para melhorar significativamente o desempenho da comunicação, a experiência do usuário e a eficiência energética em futuras redes de comunicação.

“Agradecemos aos nossos parceiros pela colaboração nessas inovações sem fio de AI inovadoras”, disse Charlie Zhang, Vice-presidente Sênior da Samsung Research América (SRA) e Head da Equipe de Pesquisa 6G da Samsung Research. “A Samsung Electronics continuará trabalhando com nossos parceiros do ecossistema para liderar a inovação para tornar a AI-RAN uma realidade nos próximos anos”.

Líderes das principais operadoras sem fio globais ficaram muito satisfeitos com os resultados promissores da integração da mais recente tecnologia de AI no design da futura RAN e apreciaram os esforços da Samsung em liderar os avanços do setor na tecnologia sem fio AI-Nativo.

“Ficamos impressionados com os resultados da Samsung Research e valorizamos os insights de nossos parceiros fornecedores e operadores globais”, disse Steven Rice, Vice-Presidente de Planejamento de Rede da Verizon Wireless. “Melhorar constantemente o desempenho da rede para aprimorar a experiência de nossos clientes é nossa prioridade e apresentar pesquisas por meio de demonstrações como esta é importante para impulsionar o setor”.

“As demonstrações da Samsung destacaram o potencial significativo da AI para RAN”, disse Satoshi Konishi, Vice-presidente Executivo e Head dos Laboratórios de Pesquisa de Tecnologia Avançada da KDDI Research, Inc., “Estamos ansiosos para avançar ainda mais na integração de comunicação e AI juntos”.

“Foi uma grande honra participar do evento da Samsung”, disse Takehiro Nakamura, Chief Standarization Officer da NTT DoCoMo. “Foi muito impressionante ver as demonstrações de AI-RAN produzirem ganhos significativos em relação às soluções existentes. Acredito que as tecnologias avançadas de AI-RAN da Samsung podem promover a implantação comercial antecipada de AI-RAN na rede 5G e ajudar a iniciar as discussões de AI-RAN em preparação para 6G”.

“Aproveitando a tecnologia de AI da Samsung, antecipamos uma melhoria substancial em nosso orçamento de link de uplink e estabilidade de comunicação aprimorada para downlink e uplink”, disse Ryuji Wakikawa, Vice-presidente e Head do Instituto de Pesquisa de Tecnologia Avançada da SoftBank Corp. “À medida que olhamos para o futuro, espera-se que essa abordagem orientada por IA evolua ainda mais e se torne um alicerce da tecnologia 6G. O SoftBank reconhece o papel fundamental dessa tecnologia baseada em AI na transformação do futuro do cenário de telecomunicações e aguarda ansiosamente sua comercialização.”

Além disso, os líderes dos parceiros globais da Samsung, que também foram colaboradores dessas demonstrações, ficaram entusiasmados por fazer parte do esforço coletivo para liderar o caminho em direção a uma rede de próxima geração nativa de AI e compartilharam sua visão sobre como a AI pode ajudar a moldar o futuro das comunicações sem fio.

“As redes sem fio serão nativas de AI, com a capacidade de aproveitar a AI para as melhorias necessárias no desempenho de RAN e eficiência espectral”, disse Ronnie Vasishta, Vice-presidente Sênior de Telecomunicações da NVIDIA. “Nossa colaboração profunda com a Samsung e outros parceiros de pesquisa ao redor do mundo está demonstrando que a infraestrutura de AI-RAN acelerada pela plataforma NVIDIA AI Aerial pode trazer ganhos significativos de desempenho no processamento de sinais de rádio ao hospedar AI e RAN juntos na infraestrutura comum”.

“Foi uma honra trabalhar em estreita parceria com a Samsung Research e mostrar o poderoso impacto da AI no aprimoramento da capacidade celular na rede futura”, disse Giampaolo Tardioli, VP de Estratégia 6G da Keysight. “As colaborações com esses parceiros de classe mundial são a parte empolgante e necessária de trazer a AI para enfrentar alguns dos nossos desafios sem fio mais difíceis”.

“A VIAVI tem o prazer de ter apoiado a Samsung com uma demonstração conjunta de interface aérea projetada por AI continuando a parceria estratégica entre líderes do setor”, disse o Dr. Ian Wong, Diretor Sênior de RF e Arquitetura sem fio da VIAVI. “A VIAVI e a Samsung têm orgulho de liderar o caminho para mostrar o enorme potencial da AI para melhorar significativamente a eficiência espectral e energética da 6G”.

Christina Gessner, Vice-presidente Executivo da Divisão de Teste e Medição da Rohde & Schwarz, afirma: “O processamento de sinais baseado em aprendizado de máquina tem o potencial de levar o desempenho sem fio além do que é possível. Nossa parceria com a Samsung Research de um receptor neural que usa transmissão de constelação não uniforme, alavancando nossas soluções de teste avançadas, é um marco na confirmação do papel da AI nas futuras comunicações sem fio 6G”.

“A Emerson tem o prazer de trabalhar ao lado da Samsung e da indústria para explorar como a AI generativa pode transformar as redes 5G e 6G”, disse Ritu Favre, Presidente do Grupo de Negócios de Teste e Medição da Emerson. “Nosso compromisso com a inovação e a parceria da indústria é um trunfo no avanço das redes nativas de AI. Juntos, estamos trabalhando em direção a um futuro mais inteligente e sustentável para as comunicações globais.”

As demonstrações bem-sucedidas são amplamente reconhecidas como um ponto de partida promissor de parceria da indústria para levar o AI-Nativo Wireless para futuras redes de acesso de rádio. A Samsung planeja aproveitar o momento de inovação e continuar trabalhando com parceiros no ecossistema por meio de associações da indústria, como a AI-RAN Alliance, da qual a Samsung é membro fundador, para aprimorar as experiências do usuário ao tornar a promessa de AI em RAN uma realidade.

O Galaxy AI agora oferece suporte a 16 idiomas, permitindo que mais pessoas expandam suas habilidades linguísticas, mesmo offline, graças à tradução no dispositivo em recursos como Tradução Simultânea², Intérprete, Notas Inteligentes³ e Assistente de Navegação.

Mas o que está envolvido no desenvolvimento da linguagem de Inteligência Artificial? Na quarta parte desta série, visitamos a China para aprender sobre a importância da parceria com outros líderes em IA. Desta vez, estamos no Brasil para explorar como as equipes trabalham através de culturas e fronteiras para levar a Inteligência Artificial do Galaxy a mais pessoas.

Sendo um país diversificado com mais de 203 milhões de habitantes e que incorpora uma ampla gama de culturas e tradições, o Brasil usa o português brasileiro como língua oficial. Enquanto isso, 22 países vizinhos usam o espanhol latino-americano.

Embora o português brasileiro e o espanhol latino-americano sejam amplamente falados, as variações intrincadas de ambos os idiomas apresentaram vários desafios ao ensinar o Galaxy AI a discernir e distinguir diferenças regionais. É por isso que o Samsung R&D Institute Brasil (SRBR) colaborou com especialistas da Samsung do México — bem como com parceiros terceirizados, como os institutos de ciência e tecnologia SiDi e Sidia — para montar uma equipe multidisciplinar e altamente qualificada que pudesse enfrentar a tarefa.

Obstáculos menores, compreensão aprofundada

A equipe usou milhares de fontes e uma combinação de aprendizado de máquina e linguagem para melhorar o reconhecimento de fala, textos escritos e variações regionais do modelo de Inteligência Artificial. Mas os dialetos locais e os nomes de figuras famosas – incluindo equipes desportivas, celebridades e bandas – variam amplamente entre as regiões.

Além disso, o mesmo significado pode ser expresso em muitas palavras diferentes. Embora os modelos linguísticos necessitem de dados localizados para obter uma compreensão abrangente dos diferentes idiomas necessários para traduzir, tais variações apresentam obstáculos.

Por exemplo, a palavra piscina é “alberca” no México, mas é “pileta” na Argentina, Paraguai e Uruguai. Enquanto isso, na Colômbia, Bolívia e Venezuela, piscina é “piscina”, que também é usada no Brasil, mas com uma pequena diferença na pronúncia. E apesar de os colombianos dizerem “chévere” para se referir a algo legal, os mexicanos dizem “padre”.

Estas diferenças representam enormes desafios para a compreensão e aprendizagem de línguas através da Inteligência Artificial, mas a equipe superou os obstáculos construindo modelos linguísticos maiores, refinando ferramentas de processamento e colaborando através de fronteiras e fusos horários.

“Tivemos que considerar gírias locais e diferentes formas de falar antes de adaptar e testar o modelo em conformidade, o que exigiu uma estreita colaboração entre a equipe de garantia de qualidade (QA) da SRBR e as equipes de desenvolvimento”, afirma Mateus Pedroso, Senior Manager e Head of Software Quality Lab na SRBR. “Como a SRBR está localizada três horas à frente da equipe de QA no México e 12 horas atrás da equipe de gestão na Coreia, tivemos que criar novos canais e processos de comunicação para alinhar resultados e compartilhar o progresso. Esta colaboração multicultural gerou uma festa de ideias e soluções para o Galaxy AI”.

Comunicando o sucesso

A filosofia de colaboração aberta da Samsung ganhou vida durante este projeto regional, pois foi um processo iterativo que alavancou a evolução da tecnologia em escala global. Para superar as barreiras linguísticas e culturais, a equipa do SRBR precisava de recolher, gerir e desenvolver enormes quantidades de dados, refinando e melhorando continuamente as fontes de áudio e texto.

As equipes definiram áreas chave de responsabilidade para garantir que todos pudessem se beneficiar dos conjuntos de habilidades coletivas nos escritórios da empresa na América Latina.

A equipe de desenvolvimento do SRBR serviu como parte interessada intermediária do projeto, recebendo instruções da sede da Samsung e desenvolvendo novas atualizações para melhorar o modelo de Inteligência Artificial enquanto realizava testes para vários casos de uso.

“A fase de testes exigiu ampla comunicação e colaboração com as equipes de QA para otimizar a experiência do usuário, e cada ajuste exigiu mais testes e revisões”, afirma Leandro Flores de Moura, Gerente de Desenvolvimento de Software do SiDi.

“O sucesso dos recursos de linguagem do Galaxy AI se baseia tanto na comunicação e colaboração quanto no conhecimento técnico”, acrescenta Nathan Castro, desenvolvedor de testes de controle de qualidade da SiDi.

Um caminho para a cultura

O que torna o Galaxy AI particularmente interessante para todos os envolvidos é o fato de que este não foi apenas um projeto de linguagem. Para eles, a língua é um guia cultural que fornece informações valiosas sobre a herança e a identidade das pessoas.

“Para a equipe de QA do SiDi, este foi um empreendimento que mudará o mundo ao permitir que culturas se unam e superem a dificuldade de comunicação em diferentes idiomas”, acrescenta Estefanía Castro Suárez, Desenvolvedora de Testes do SiDi. “Saber que fizemos parte disso nos enche de orgulho e motivação”.

“A forma como a equipe do SRBR colaborou exemplifica o que o Galaxy AI pretende alcançar: tornar o mundo um lugar mais próximo através da comunicação, compartilhamento e interação com pessoas, mesmo aquelas que falam línguas diferentes”, conclui Pedroso. “Essa capacidade só crescerá à medida que mais idiomas forem incorporados ao Galaxy AI”.

¹ Galaxy AI é a inteligência artificial da Samsung. A Samsung não faz promessas ou garantias quanto à precisão, completude ou confiabilidade das saídas fornecidas pelas funcionalidades de IA. O login na conta Samsung pode ser necessário para usar determinadas funcionalidades de IA da Samsung.

² Tradução Simultânea requer uma conexão de rede e login na conta Samsung. A Tradução Simultânea está disponível apenas no aplicativo Samsung Phone pré-instalado. Certos idiomas podem exigir o download de pacotes de idiomas. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

³ O recurso Notas Inteligentes requer uma conexão de rede e login na conta Samsung. Existe um limite de caracteres. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

A Samsung inova em experiências móveis premium de Inteligência Artificial. Para saber como o Galaxy AI¹ está maximizando o potencial das pessoas, a Samsung Newsroom tem visitado os centros da Samsung Research em todo o mundo.

Com suporte para 16 idiomas, o Galaxy AI permite que mais pessoas expandam seus recursos linguísticos, mesmo estando off-line, graças à tradução no dispositivo em recursos como Tradução Simultânea², Intérprete, Notas Inteligentes³ e Assistente de Navegação.

Recentemente, a Samsung Newsroom foi até a Jordânia para aprender as complexidades do desenvolvimento de um modelo de Inteligência Artificial para o árabe, uma língua com muitos dialetos. Desta vez, fomos ao Vietnã para explorar como os dados são preparados para treinar modelos de IA.

Qual é a diferença entre um fantasma, um túmulo e uma mãe em vietnamita? Resposta: muito pouca, especialmente para uma língua falada por 97 milhões de pessoas em todo o mundo. Cada palavra se traduz como “ma”, “mả” e “má”, respectivamente – e só pode ser distinguida pelo tom. Isto ilustra como pode ser difícil para os modelos de Inteligência Artificial aprender uma língua, considerando que não conseguem reconhecer em primeira mão o contexto e as emoções das conversas, nem as intenções de quem fala.

O Instituto Samsung P&D Vietnã (SRV) usou dados refinados para ajudar seu modelo de Inteligência Artificial a reconhecer adequadamente até mesmo as diferenças mais sutis do idioma.

A qualidade dos dados usados afeta diretamente a precisão do reconhecimento automático de fala (ASR), da tradução automática neural (NMT) e da conversão de texto em fala (TTS) — processos que auxiliam os recursos do Galaxy AI, como Tradução Simultânea, Intérprete, Assistente de Digitação e Assistente de Navegação a quebrar as barreiras linguísticas.

Um tufão de desafios

“O vietnamita é uma língua complexa e diversificada, com expressões ricas, muitas das quais são difíceis de capturar”, afirma Ngô Hồng Thái, Líder NMT no SRV. Dos 16 idiomas habilitados pelo Galaxy AI, o vietnamita foi particularmente difícil de desenvolver.

“Particularmente, criar um modelo de IA para os vietnamitas foi mais assustador do que os nossos tufões!”, acrescenta, antes de explicar os obstáculos enfrentados durante o processo de desenvolvimento.

O vietnamita é uma língua tonal com seis tons distintos. Como é evidente no exemplo “ma” acima, pequenas nuances na vocalização podem alterar drasticamente o significado das palavras. Portanto, era necessária uma abordagem meticulosa e detalhada.

“Quando palavras com sons semelhantes são divididas, uma palavra consiste em vários segmentos curtos, ou ‘conjuntos de quadros’”, diz Bui Ngoc Tung, Líder ASR do SRV. “O modelo de Inteligência Artificial diferencia os quadros de áudio curtos de cerca de 20 milissegundos para reconhecer quais palavras correspondem a um determinado conjunto de quadros consecutivos. Assim, é fundamental colocar um grande esforço nas fases iniciais do processo de aprendizagem da IA”.

Além disso, homófonos e homônimos são comuns em vietnamita. As pessoas normalmente podem confiar no contexto e em elementos não-verbais nas conversas para diferenciar palavras que têm o mesmo som ou são escritas da mesma forma, mas têm significados diferentes. No entanto, os modelos de Inteligência Artificial precisam ser ensinados a identificar e diferenciar com precisão tons e palavras semelhantes.

“Esta não é uma tarefa simples”, explica Thái. “Além da quantidade, os dados precisam ser precisos para garantir que sejam capazes de reconhecer as nuances linguísticas que existem no idioma vietnamita”.

Uma preparação exigente

O processo de refinamento de dados consiste em três etapas. Primeiro, o áudio e o texto usados para treinar o modelo de Inteligência Artificial devem ser revisados e corrigidos. Em seguida, esse conjunto de dados passa por verificações aleatórias de qualidade geral. Finalmente, o conjunto de dados é normalizado e limpo antes de ser usado no treinamento.

“Realizamos minuciosamente uma série de testes para verificar a precisão do nosso conjunto de dados”, disse Nguyen Manh Duy, Líder TTS no SRV que supervisiona a criação do banco de dados. “Enfrentamos uma série de problemas inesperados, incluindo palavras com erros ortográficos em scripts e ruído de fundo ou pronúncia incorreta durante gravações de áudio. Passamos um tempo significativo refinando e melhorando nossos dados de treinamento”.

Além dos desafios linguísticos únicos no vietnamita, há uma falta de dados universalmente acessíveis em comparação com as línguas mais faladas. “Esta é outra razão pela qual a etapa de refinamento dos dados é tão importante”, acrescenta. “Como tínhamos fontes limitadas, todos os dados tinham que ser totalmente confiáveis. Não havia margem para erro”.

Além disso, o modelo de Inteligência Artificial para vietnamitas deve considerar diferenças tonais e regionais. Para melhorar a precisão do modelo de IA, a equipe coletou grandes quantidades de dados com os sotaques do norte, centro e sul do Vietnã — resultando em uma enorme quantidade de informações para refinar e verificar.

Aperfeiçoamento contínuo

Os desenvolvedores do SRV concluíram o projeto após meses de trabalho árduo, e o vietnamita se tornou um dos primeiros idiomas a ser habilitado pelo Galaxy AI. Apesar deste sucesso, a equipe está trabalhando incessantemente para melhorar a experiência vietnamita do Galaxy AI.

“Continuamos a aprimorar o modelo de Inteligência Artificial incorporando feedback das pessoas sobre a relevância de palavras e frases no Galaxy AI”, disse Tran Tuan Minh, Líder do Projeto de Desenvolvimento de Linguagem de IA no SRV. “Acabamos de dar os primeiros passos em direção a um mundo mais aberto – e temos muito mais para explorar juntos”.

No próximo episódio da série “A Curva de Aprendizagem”, iremos à China para nos aprofundarmos em como os modelos de Inteligência Artificial são treinados e ajustados.

¹ Galaxy AI é a inteligência artificial da Samsung. A Samsung não faz promessas ou garantias quanto à precisão, completude ou confiabilidade das saídas fornecidas pelas funcionalidades de IA. O login na conta Samsung pode ser necessário para usar determinadas funcionalidades de IA da Samsung.

² Tradução Simultânea requer uma conexão de rede e login na conta Samsung. A Tradução Simultânea está disponível apenas no aplicativo Samsung Phone pré-instalado. Certos idiomas podem exigir o download de pacotes de idiomas. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

³ O recurso Notas Inteligentes requer uma conexão de rede e login na conta Samsung. Existe um limite de caracteres. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

A primeira parte desta série mostrou como é possível determinar quais dados são necessários na construção da IA. Agora, vamos analisar a complexa tarefa de lidar com diversos dialetos.

Ensinar um idioma a um modelo de Inteligência Artificial é um processo complexo. Porém, como seria se o idioma não for singular, e sim um conjunto de diversos dialetos?

Esse foi o desafio enfrentado pela equipe do Samsung R&D Institute Jordan (SRJO). Embora o árabe tenha sido adicionado como opção de idioma para recursos do Galaxy AI, como Tradução Simultânea², a equipe teve que lidar com os diversos dialetos árabes que abrangem o Oriente Médio e o Norte da África, cada um com variações de pronúncia, vocabulário e gramática.

O árabe é um dos seis idiomas mais falados em todo o mundo, usado diariamente por mais de 400 milhões de pessoas³. O idioma é classificado de duas formas: Fus’ha (árabe padrão moderno) e Ammiya (os dialetos do árabe). Fus’ha é empregado normalmente em eventos públicos e oficiais, bem como em transmissões de notícias, enquanto Ammiya é mais comum em conversas cotidianas. Mais de 20 países usam o árabe e, atualmente, existem cerca de 30 dialetos na região.

Regras não escritas

Reconhecendo a variação apresentada por esses dialetos, a equipe do SRJO empregou uma série de técnicas para discernir e processar as características linguísticas únicas inerentes a cada um. Essa abordagem foi crucial para garantir que o Galaxy AI conseguisse compreender e responder de forma precisa às nuances regionais.

“Em contraste com outros idiomas, a pronúncia do objeto em árabe varia dependendo do sujeito e do verbo na frase”, explica Mohammad Hamdan, líder do projeto da equipe de desenvolvimento de idiomas árabes. “Nosso objetivo é desenvolver um modelo que entenda todos esses dialetos e consiga responder em árabe padrão”.

O TTS é o componente do recurso de Tradução Simultânea do Galaxy AI que permite às pessoas interagir com falantes de diferentes idiomas, traduzindo palavras faladas em texto escrito e, em seguida, reproduzindo-as por voz. A equipe de TTS enfrentou um desafio único, devido à peculiaridade de trabalhar com o árabe.

O árabe usa diacríticos, que são guias para a pronúncia de palavras em alguns contextos, como artigos religiosos, poesia e livros para alunos de idiomas. Os diacríticos são amplamente compreendidos pelos falantes nativos, mas estão ausentes na escrita cotidiana. Isso torna difícil para uma máquina converter texto bruto em fonemas, as unidades básicas de som que são os blocos de construção da fala.

“Há uma escassez de conjuntos de dados confiáveis e de alta qualidade que representem com precisão como os diacríticos são usados corretamente”, explica Haweeleh “Tivemos que projetar um modelo neural capaz de prever e restaurar os diacríticos ausentes com alta precisão”.

Os modelos neurais funcionam de forma semelhante aos cérebros humanos. Para prever diacríticos, um modelo precisa estudar muitos textos em árabe, aprender as regras do idioma e entender como as palavras são usadas em diferentes contextos. Por exemplo, a pronúncia de uma palavra pode variar muito dependendo da ação ou do gênero que ela descreve. O treinamento extensivo da equipe foi fundamental para melhorar a precisão do modelo TTS árabe.

Melhorando a compreensão

A equipe do SRJO também precisou coletar diversas gravações de áudio dos dialetos de várias fontes, que tiveram que ser transcritas, com foco específico em capturar os sons, palavras e frases únicas de cada dialeto.

“Reunimos uma equipe de falantes nativos dos dialetos com um profundo conhecimento das nuances e variações”, explicou Ayah Hasan, cuja equipe foi responsável pela criação do banco de dados. “Eles ouviram as gravações e converteram manualmente as palavras faladas em texto”.

Este trabalho foi fundamental para aprimorar o processo de Reconhecimento Automático de Fala (ASR), permitindo que o Galaxy AI lidasse de forma eficaz com a rica diversidade de dialetos árabes. O ASR desempenha um papel crucial ao possibilitar recursos de compreensão e resposta em tempo real da Galaxy AI.

“Desenvolver um sistema ASR que suporte vários dialetos em um único modelo é uma tarefa exigente”, afirma Hamdan. “Isso requer um entendimento profundo das complexidades linguísticas, uma seleção criteriosa de dados e o uso de técnicas avançadas de modelagem”.

O ápice da inovação

Após meses de planejamento, construção e testes, a equipe estava pronta para lançar o árabe como opção de idioma para o Galaxy AI, permitindo que um número significativamente maior de pessoas se comunicasse além das fronteiras linguísticas.

Essa equipe pioneira tornou os serviços Galaxy AI acessíveis aos falantes de árabe, diminuindo as barreiras linguísticas e culturais entre eles e as pessoas ao redor do mundo. Ao fazê-lo, estabeleceram novas e melhores práticas que podem ser implementadas globalmente. Entretanto, este sucesso é apenas o começo: a equipe continua a refinar seus modelos e a melhorar a qualidade dos recursos linguísticos do Galaxy AI.

No próximo episódio da série “A Curva de Aprendizagem”, iremos ao Vietnã para ver como a equipe está aprimorando os dados linguísticos. Além disso, o que é necessário para treinar um modelo de IA eficaz?

O árabe é apenas uma parte dos idiomas e dialetos recentemente suportados pelo Galaxy AI e disponíveis para download nas Configurações do smartphone. Os recursos linguísticos do Galaxy AI, como Tradução Simultânea e Intérprete, estão acessíveis em dispositivos Galaxy que tenham a atualização One UI 6.1⁴ da Samsung.

¹ Galaxy AI é a inteligência artificial da Samsung. A Samsung não faz promessas ou garantias quanto à precisão, completude ou confiabilidade das saídas fornecidas pelas funcionalidades de IA. O login na conta Samsung pode ser necessário para usar determinadas funcionalidades de IA da Samsung.

² Tradução Simultânea requer uma conexão de rede e login na conta Samsung. A Tradução Simultânea está disponível apenas no aplicativo Samsung Phone pré-instalado. Certos idiomas podem exigir o download de pacotes de idiomas. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

³ UNESCO, Dia Mundial do idioma Árabe 2023, https://www.unesco.org/en/world-arabic-language-day.

⁴ A atualização One UI 6.1 foi lançada pela primeira vez em dispositivos da linha Galaxy S24 com uma implementação mais ampla para outros dispositivos Galaxy, incluindo linha S23, S23 FE, linha S22, linha S21, Z Fold5, Z Fold4, Z Fold3, Z Flip5, Z Flip4, Z Flip3, linha Tab S9 e linha Tab S8.

À medida que a Samsung segue inovando em experiências móveis premium de Inteligência Artificial, visitamos centros da Samsung Research em todo o mundo para saber como o Galaxy AI¹ está permitindo a todos maximizar o seu potencial.

O Galaxy AI oferece atualmente suporte a 16 idiomas, para que mais pessoas possam expandir seus recursos linguísticos, mesmo off-line, graças à tradução no dispositivo em recursos como Tradução Simultânea², Intérprete, Notas Inteligentes³ e Assistente de Navegação.

Mas o que implica o desenvolvimento da linguagem de Inteligência Artificial? Nesta série, “A Curva de Aprendizagem”, vamos examinar os desafios de trabalhar com IA móvel e como superamos essas limitações. Nesta primeira parte, fomos para a Indonésia saber como se começa a ensinar a Inteligência Artificial a falar um novo idioma.

O primeiro passo é estabelecer metas, segundo a equipe do Samsung P&D Institute Indonesia (SRIN). “Uma Inteligência Artificial excelente começa com dados relevantes e de boa qualidade. Cada idioma exige uma maneira diferente de processar, então nos aprofundamos para entender as necessidades linguísticas e as condições únicas do nosso país”, diz Junaidillah Fadlil, Head de IA da SRIN, cuja equipe recentemente habilitou suporte ao Bahasa Indonesia (língua indonésia) para o Galaxy AI. “O desenvolvimento de idiomas locais deve ser liderado por insights e ciência. Portanto, todo processo para adicionar idiomas ao Galaxy AI começa com o planejamento de quais informações precisamos e podemos obter de forma legal e ética”.

Os recursos do Galaxy AI, como Tradução Simultânea, executam três processos principais: reconhecimento automático de fala (ASR, sua sigla em inglês); tradução automática neural (NMT, sua sigla em inglês); e conversão de texto em fala (TTS, sua sigla em inglês). Cada processo precisa de um conjunto distinto de informações.

O ASR, por exemplo, precisa de gravações extensas de fala em vários ambientes, cada uma acompanhada de uma transcrição de texto precisa. Os níveis variados de ruído de fundo ajudam a explicar os diferentes ambientes.

“Não basta apenas adicionar ruídos às gravações”, explica Muchlisin Adi Saputra, líder de ASR da equipe. “Além dos dados de idioma que obtivemos de parceiros terceirizados autorizados, devemos ir a cafeterias ou ambientes de trabalho para gravar nossas próprias vozes. Isso nos permite capturar autenticamente sons únicos da vida real, como pessoas gritando ou o barulho de teclados”.

A natureza de constante mudança das línguas também deve ser considerada. Saputra acrescenta: “Precisamos nos manter atualizados com as gírias mais recentes e como elas são usadas, e principalmente as encontramos nas redes sociais”.

Em seguida, a NMT exige dados de treinamento de tradução. “Traduzir Bahasa Indonesia é um desafio”, diz Muhamad Faisal, líder da equipe de NMT. “Seu uso extensivo de significados contextuais e implícitos depende de indicativos sociais e situacionais, por isso precisamos de numerosos textos traduzidos para que a IA possa consultar novas palavras, palavras estrangeiras, nomes próprios e expressões idiomáticas– qualquer informação que ajude a IA a compreender o contexto e as regras de comunicação”.

A TTS requer gravações que cubram uma variedade de vozes e tons, com contexto adicional sobre como partes das palavras soam em diferentes circunstâncias. “Boas gravações de voz poderiam fazer metade do trabalho e cobrir todos os fonemas (unidades de som na fala) necessários para o modelo de IA”, acrescenta Harits Abdurrohman, líder de TTS. “Se um dublador fez um ótimo trabalho na fase anterior, o foco muda para refinar o modelo de IA para pronunciar palavras específicas com clareza”.

Juntos somos mais fortes

São necessários vastos recursos para planejar muitos dados e a SRIN trabalhou em estreita colaboração com especialistas em linguística.

“Este desafio requer criatividade, desenvoltura e experiência tanto em Bahasa Indonesia quanto em aprendizagem automática”, reflete Fadlil. “A filosofia de colaboração aberta da Samsung desempenhou um papel importante na realização do trabalho, assim como a nossa escala de operações e história de desenvolvimento de IA”.

Trabalhando com outros centros da Samsung Research em todo o mundo, a equipe da SRIN conseguiu adotar rapidamente as melhores práticas e superar as complexidades do estabelecimento de metas de dados.

Além disso, a colaboração foi benéfica para o avanço não só da tecnologia, mas também da cultura. Quando a equipe do SRIN se juntou aos seus correspondentes em Bangalore, na Índia, observaram os costumes locais de jejum, criando ligações mais profundas e expandindo a sua compreensão de diferentes culturas.

Para a equipe, o projeto de expansão linguística do Galaxy AI assumiu um novo significado. “Estamos particularmente orgulhosos das nossas conquistas aqui, pois este foi o nosso primeiro projeto de IA e não será o último, à medida que continuemos refinando os nossos modelos e melhorando a qualidade dos resultados”, conclui Fadlil. “Esta expansão não só reflete os nossos valores de abertura, mas também respeita e incorpora as nossas identidades culturais através da linguagem”.

No próximo episódio desta série “A Curva de Aprendizagem”, iremos ao Samsung P&D Institute Jordan para falar com a equipe que liderou o projeto de língua árabe do Galaxy AI.

Fique ligado na Samsung Newsroom Brasil para conhecer mais sobre as complexidades de construir e treinar um modelo de Inteligência Artificial para um idioma com diversos dialetos.

¹ Galaxy AI é a inteligência artificial da Samsung. A Samsung não faz promessas ou garantias quanto à precisão, completude ou confiabilidade das saídas fornecidas pelas funcionalidades de IA. O login na conta Samsung pode ser necessário para usar determinadas funcionalidades de IA da Samsung.

² Tradução Simultânea requer uma conexão de rede e login na conta Samsung. A Tradução Simultânea está disponível apenas no aplicativo Samsung Phone pré-instalado. Certos idiomas podem exigir o download de pacotes de idiomas. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

³ O recurso Notas Inteligentes requer uma conexão de rede e login na conta Samsung. Existe um limite de caracteres. A disponibilidade do serviço pode variar conforme o idioma. A precisão dos resultados não é garantida.

Juho Lee, membro da Samsung Research, ganhou o Prêmio de ‘Excelência em apoio à padronização das comunicações’ do IEEE ComSoc, durante a conferência GLOBECOM 2023, em 5 de dezembro

Juho Lee, membro do Centro de P&D Avançado Samsung Research (SR) da Samsung Electronics, recebeu um Prêmio de Carreira por sua notável liderança e contribuições técnicas na padronização de comunicação sem fio do Instituto de Engenheiros Elétricos e Eletrônicos (IEEE) — um dos maiores centros técnicos do mundo em organização profissional dedicada ao avanço da tecnologia para o benefício da humanidade.

Em reconhecimento à sua liderança e papel fundamental no desenvolvimento e padronização de tecnologias globais de comunicação móvel, Lee ganhou o prêmio inaugural de ‘Excelência em apoio à padronização das comunicações’ estabelecido este ano pela IEEE Communications Society (ComSoc). Lee foi o único ganhador do prêmio que homenageou suas contribuições notáveis para o setor.

Os vencedores do Prêmio IEEE ComSoc Career são selecionados através de um rigoroso processo de julgamento, com 14 juízes deliberando sobre os candidatos durante dois meses. Os ganhadores foram reconhecidos em uma cerimônia de premiação em 5 de dezembro na conferência IEEE Global Communications (GLOBECOM) de 2023, em Kuala Lumpur, Malásia.

Lee lidera pesquisas e padronização de tecnologia de comunicação móvel desde 2000, quando começou a comercialização de smartphones 3G. De fevereiro de 2003 até agosto de 2009, Lee atuou como vice-presidente do Grupo de Trabalho de Rede de Acesso por Rádio 1 (RAN WG1) no Projeto de Parceria de 3ª Geração (3GPP) – uma organização global de padronização de comunicações móveis – na qual contribuiu para a padronização da tecnologia 4G LTE. Em 2018, Lee foi eleito membro IEEE, uma distinção reservada apenas a aqueles que alcançaram conquistas extraordinárias.

“É uma honra ser nomeado o primeiro vencedor do prêmio ‘Excelência em apoio à padronização das comunicações’ do IEEE ComSoc”, disse ele. “No futuro, continuarei a pesquisar, desenvolver e padronizar tecnologias avançadas de comunicações móveis, como a tecnologia 5G e 6G”.

Lee se junta ao prestigiado grupo de executivos anteriores da Samsung que também receberam o Prêmio IEEE ComSoc Career. O ex-vice-presidente da Samsung, Ki-Tae Lee, que desempenhou um papel fundamental no desenvolvimento da série de celulares Anycall da Samsung, recebeu o prêmio de ‘Líder de destaque da indústria’ do IEEE ComSoc em 2004. O ex-vice-presidente da Samsung, Jong-Kyun Shin, que fez o primeiro celular colorido do mundo, recebeu o mesmo prêmio em 2016.

Líder na padronização de tecnologia de comunicação móvel, a Samsung Research detém um total de seis funcionários no 3GPP: dois presidentes e quatro vice-presidentes. Em julho de 2020, a Samsung publicou “A próxima experiência hiper conectada para todos”, um white paper da tecnologia 6G que descreve a visão da empresa para a próxima era da comunicação. Os especialistas da Samsung e da Samsung Research estão trabalhando vigorosamente para concretizar a comercialização da tecnologia 6G por volta de 2030.

Imagem meramente ilustrativa

A Samsung Electronics Co., Ltd. anunciou durante a conferência e exposição anual da Healthcare Information and Management Systems Society (HIMSS) 2023, realizada de 17 a 21 de abril em Chicago (EUA), o Samsung Health Stack 1.0, um avanço na pesquisa de saúde digital.

Desenvolvido pela Centros de Pesquisa e Desenvolvimento da Samsung na Coreia do Sul e Estados Unidos, o Samsung Health Stack é um projeto de código aberto completo que auxilia a pesquisa de saúde digital, permitindo que os pesquisadores criem facilmente aplicativos, servidores de backend e ferramentas de análise para wearables baseados nos sistemas operacionais Android e Wear OS.

Os avanços em smartphones e wearables têm o potencial de revolucionar a pesquisa em saúde e o desenvolvimento de biomarcadores baseados em dados. No entanto, a utilização desses dispositivos para pesquisa geralmente requer novos serviços e aplicativos móveis de saúde. Isso exige que os pesquisadores da área médica invistam quantias significativas de tempo e dinheiro em áreas que podem ser desconhecidas para eles, criando obstáculos para a expansão de tecnologias inovadoras.

A Samsung desenvolveu o Samsung Health Stack para ajudar a superar esses obstáculos. O App SDK² incluído no projeto, o portal e o sistema de backend simplificam a construção do sistema, permitindo que os pesquisadores se concentrem nas pesquisas. Os desenvolvedores podem criar os aplicativos necessários de forma rápida e fácil, assegurando aos participantes que os dados que fornecem são gerenciados com segurança³.

“Visando tornar a aquisição de dados digitais de saúde mais fácil e segura, o Samsung Health Stack diminuirá as barreiras entre pesquisadores da área médica e especialistas em tecnologia digital, servindo como base para a inovação no setor de saúde digital”, declarou Yunsu Lee, vice-presidente e chefe da equipe de inteligência de dados da Samsung Electronics. “Ao promover o desenvolvimento de serviços digitais de saúde, esperamos melhorar a qualidade de vida das pessoas em todo o mundo. Também esperamos que o Samsung Health Stack, por ser um projeto de código aberto, seja útil para muitas pessoas da área e agradecemos a participação de desenvolvedores e pesquisadores interessados”.

Ao realizar estudos com wearables sobre enfermidades como diabetes e hipertensão, o Samsung Health Stack permite que os pesquisadores simplifiquem o processo de coleta de dados inserindo apenas informações relevantes no portal.

Os aplicativos desenvolvidos com o App SDK podem oferecer suporte à comunicação frequente entre pesquisadores e participantes, levando a melhores resultados de pesquisa. Tornar o processo mais rápido permite que os pesquisadores assumam projetos de saúde mais variados e proativos, ajudando a criar um ambiente onde os consumidores desfrutem de uma vida mais saudável.

Desde o lançamento da versão alfa na Samsung Developer Conference (SDC) de 2022, a Samsung fez progressos contínuos no Samsung Health Stack, lançando a versão beta em março deste ano. Os participantes do HIMSS 2023 terão a chance de conhecer a versão 1.0, programada para ser lançada em junho.

Imagem meramente ilustrativa

O Samsung Health Stack 1.0 melhora a introdução da pesquisa da versão alfa, a integração de participantes, a coleta de dados por wearables e as funções básicas de pesquisa, e sua segurança e estabilidade foram aprimoradas para confiabilidade em pesquisas reais de saúde. Além de oferecer suporte à coleta de dados básicos, o Samsung Health Stack 1.0 oferece um recurso de tarefa de atividade que monitora o progresso dos participantes de estudos clínicos em tarefas específicas relacionadas à pesquisa. O recurso de pesquisa, que permite aos pesquisadores adquirir dados diretamente dos participantes, também foi aprimorado com uma função de pesquisa dinâmica que reflete o objetivo da pesquisa e as intenções dos pesquisadores com base nas respostas dos participantes, permitindo que ações de acompanhamento sejam realizadas posteriormente.

Ao aprimorar a usabilidade das ferramentas de gerenciamento de pesquisa, o Samsung Health Stack 1.0 permite que os pesquisadores se concentrem mais no design da pesquisa. Ele também apresenta vários métodos para oferecer aos participantes informações relevantes para minimizar atrasos. A documentação fornecida aos desenvolvedores também foi aprimorada significativamente para facilitar a construção de sistemas de pesquisa.

Os visitantes do estande da Samsung no HIMSS 2023 podem testar os novos recursos do Samsung Health Stack por meio de um aplicativo móvel criado usando o App SDK. Eles também podem experimentar o processo de conduzir pesquisas de saúde e coletar dados com wearables usando o aplicativo móvel, dispositivos wearable integrados e um portal. Pesquisadores que contribuíram para o desenvolvimento do Samsung Health Stack estarão presentes no estande para explicar os métodos de utilização e detalhes técnicos.

Embora ainda esteja nos estágios iniciais como um projeto de código aberto, muitas empresas de saúde estão considerando a utilização do Samsung Health Stack. Startups como SALTED⁴ e All Round Doctors⁵ estão coletando dados para fins de pesquisa e consideraram usar esses dados para fornecer serviços de saúde. Espera-se que o Samsung Health Stack seja utilizado em várias áreas no futuro.

¹ A Samsung Research, centro avançado de P&D da Samsung Electronics, lidera o desenvolvimento de tecnologias futuras para a divisão Device eXperience (DX) da empresa.

² Visite https://developer.samsung.com/health/s-healthstack para obter mais informações e fazer o download.

³ O Samsung Health Stack fornece recursos de gerenciamento de dados para garantir a separação e armazenamento de dados, criptografia e anonimização.

⁴ Fornece palmilhas digitais e serviços aplicáveis; trabalha com a Samsung desde 2022. Visite https://www.salted.ltd/eng/main/index.html para obter mais informações.

⁵ Fornece soluções terapêuticas digitais para aliviar os efeitos colaterais da quimioterapia; trabalha com a Samsung desde 2022. Visite https://ards.co.kr/ para mais informações.

Como tantas grandes inovações, a UDC mais recente foi um esforço em grupo – impulsionado pelos especialistas da Samsung e pelo feedback valioso dos consumidores. Para saber mais sobre a câmera abaixo da tela aprimorada para o Galaxy Z Fold4 5G, a Newsroom da Samsung conversou com especialistas da Samsung Research que colaboraram na tecnologia.

Leia a entrevista abaixo para entender como John Seok-Jun Lee, Líder da parte de Câmeras Computacionais da Samsung Research America (SRA), e Alok Shukla, Líder da parte de Soluções de Visão de IA do Samsung R&D Institute India-Bangalore (SRI-B), têm a dizer sobre suas colaborações por trás da tecnologia aprimorada do UDC.

O que é a câmera abaixo da tela (UDC)?

[Seok-Jun] A câmera abaixo da tela (UDC) é uma solução de câmera inovadora que permite uma experiência de visualização ininterrupta em um dispositivo móvel, ocultando a câmera sob a tela e dedicando a tela inteira aos usuários enquanto os aplicativos estão em execução. Não só requer inovação de hardware ao colocar uma câmera sob um painel de exibição, mas também requer inovação de algoritmo para restaurar a qualidade da imagem – um dos problemas de restauração de imagem mais complexos.

Como funciona a UDC?

[Alok] Na UDC, uma câmera frontal fica embaixo da tela. A densidade de pixels da tela é reduzida nesta área, permitindo que a tela exiba imagens sem impedimentos – mas ao mesmo tempo, não bloqueando a luz de alcançar a câmera quando estiver em uso. À medida que a câmera é colocada sob a tela, a UDC pode sofrer diminuição na qualidade de imagem causada por artefatos de difração, o que resulta em reflexos, saturação, desfoque e névoa. Portanto, embora a UDC traga uma melhor experiência de exibição, ele também afeta a qualidade da imagem da câmera e outras tarefas de visão. Essas distorções complexas e diversas tornam a restauração de imagens UDC extremamente desafiadora.

Por que a UDC é uma tecnologia importante quando se trata do Galaxy Z Fold4? Que valor ele oferece aos clientes?

[Seok-Jun] Os dobráveis ​​da Samsung foram projetados para serem novos e diferentes, combinando smartphones e experiências de visualização imersivas em um dispositivo móvel por meio de uma tecnologia de exibição inovadora. Quando dobrado, oferece uso semelhante ao de um smartphone e, quando desdobrado, a tela oferece uma experiência mais imersiva e produtiva. Nossa pesquisa com consumidores mostrou que os usuários da linha Galaxy Z Fold preferem a câmera da tela externa para capturar fotos e selfies e a tela principal imersiva para tarefas mais produtivas, como assistir a vídeos, jogar e trabalhar em documentos. Portanto, pensamos que a tecnologia UDC seria perfeita para atender às necessidades de uma tela ininterrupta e ainda ser capaz de tarefas como chamadas de vídeo. A Samsung lançou a primeira solução UDC dobrável no Galaxy Z Fold3 5G^{1 3} e melhorou ainda mais sua qualidade no Galaxy Z Fold4 5G.

[Alok] O Galaxy Z Fold4 5G mostra um mundo de tela imersiva. A tecnologia UDC está no centro da busca pela real exibição em tela cheia. Ao combinar a inovação líder em tecnologia de exibição com técnicas avançadas de IA para restauração de imagens, o Galaxy Z Fold4 5G oferece o equilíbrio perfeito entre a qualidade da tela e a qualidade da imagem da câmera.

Como a qualidade da imagem da câmera melhorou desde o Galaxy Z Fold3 5G?

[Alok] O Samsung Galaxy Z Fold3 5G apresentou a primeira UDC do mundo em um smartphone dobrável. Após o lançamento do Galaxy Z Fold3 5G no mercado, um dos principais feedbacks dos consumidores foi tornar a UDC menos visível. No Galaxy Z Fold4 5G, o arranjo de subpixels foi otimizado para ocultar ainda mais a UDC.

Como mencionado anteriormente, quando a câmera é colocada sob a tela, isso pode resultar em diminuição da qualidade de imagem causada por artefatos de difração, que causam reflexos, saturação, desfoque e névoa.

É por isso que, no Galaxy Z Fold4 5G, aproveitamos o poder da IA, apoiado no processamento de vários quadros, para desenvolver um novo fluxo de imagem computacional para restauração de imagens da UDC.

A SRI-B, juntamente com o Grupo de P&D de Visual SW da MX Business, concentrou-se no desenvolvimento de Inteligência Artificial de Restauração de Imagem para captura e visualização de fotos para compensar a difração óptica na UDC. Ao mesmo tempo, o Laboratório de Inovação de Processador Móvel (MPI) da SRA melhorou o algoritmo de fotografia computacional de vários quadros. A câmera abaixo da tela do Galaxy Z Fold4 5G resolve os principais desafios técnicos em qualidade de imagem para oferecer uma experiência única às pessoas.

Falem mais da parceria SRA-SRI. Por que suas duas equipes colaboraram?

[Seok-Jun] O laboratório da SRA MPI tem trabalhado com a SRI-B ao longo de toda a história da MPI na Samsung, desde a comercialização do Galaxy Note4 de 2014 até o Galaxy Z Fold4 5G e Z Flip4 de 2022. A SRA MPI tem liderado a pesquisa e desenvolvimento da tecnologia de processamento multiquadro (MFP) MX para UDC, Modo Noturno, Expert RAW e outras tecnologias. A SRI-B contribuiu para todos os MFPs da SRA MPI comercializados, fornecendo software incrível de incrível, ajuste de qualidade de imagem e recursos para comercialização, bem como P&D de câmeras de IA. Nossa colaboração de 3 vias com o grupo de P&D de MX, SRA MPI e SRI-B tem sido um sucesso – especialmente quando a equipe mundial usou as diferenças de fuso horário de forma eficaz para concluir objetivos dentro do prazo deste projeto tão complicado. É sempre um prazer trabalhar com eles e entregar os sucessos das câmeras dos dispositivos Galaxy juntos para atingir nosso objetivo mútuo de ser a melhor experiência de câmera de smartphone do mundo.

Por favor, explique sua função e as contribuições de sua equipe para a UDC. Como você contribuiu para desenvolver a melhor experiência possível para o usuário?

[Alok] A UDC do Samsung Galaxy Z Fold4 5G era um projeto complexo de P&D e o papel da SRI-B era pensar em termos de ponta a ponta para a melhor experiência do consumidor. Isso exigia experiência em vários domínios e colaboração profunda entre várias equipes. Especialistas do Grupo P&D de SRI-B, SRA-MPI Lab e MX Visual trabalharam perfeitamente para realizar uma experiência UDC de ponta a ponta.

A SRI-B também desempenhou um papel fundamental na utilização de uma Unidade de Processamento Neural (NPU) para executar o modelo de IA, alcançando desempenho em tempo real em visualizações e tempo de processamento de captura significativamente mais rápido do que na UDC do Samsung Galaxy Z Fold3 5G. Pré-visualizações de câmeras, gravações de vídeo e cenários de chamadas de vídeo precisam de desempenho em tempo real sem perder nenhum quadro. A restauração da UDC baseada em IA acelerada com NPU para processamento de visualização foi aplicada pela primeira vez no Samsung Galaxy Z Fold4 5G. Embora o processamento em tempo real não fosse necessário, uma vez que a captura da câmera requer uma qualidade de imagem mais alta do que uma visualização, era desejável obter melhor qualidade de imagem com menos tempo de processamento para a experiência do usuário.

Quais foram alguns desafios que você enfrentou ao desenvolver essa tecnologia e como você os superou?

[Seok-Jun] Baixa transmissão de luz e difração de luz são os principais desafios para a tecnologia de câmera abaixo da tela. Ainda assim, mais um desafio, que é diferente de um fluxo de imagem de câmera perfurada, é que a qualidade de captura da UDC é afetada não apenas pelo módulo da câmera, mas também pelo painel de exibição. O algoritmo 3D ISP baseado em IA da SRA MPI foi projetado com a flexibilidade necessária para ajustar a qualidade da imagem de saída com as diferentes características de exibição. Ter essa flexibilidade no 3D ISP ajudou a superar esses desafios.

[Alok] O foco principal da SRI-B foi desenvolver um módulo de restauração de imagem de IA para a UDC do Samsung Galaxy Z Fold4 5G. Essas restaurações são necessárias para o modo de captura de fotos e também para o modo de vídeo. Os cenários de gravação de vídeo e chamadas de vídeo têm requisitos rigorosos para o processamento em tempo real dentro das restrições de consumo de corrente.

A restauração de UDC baseada em IA foi aplicada pela primeira vez na UDC do Samsung Galaxy Z Fold4 5G para vídeo. Para obter uma experiência de qualidade de vídeo melhor do que o Galaxy Z Fold3 5G, tivemos que tornar o modelo de IA mais leve e ainda obter uma boa qualidade de restauração. Múltiplos experimentos foram conduzidos em design e treinamento de rede para obter boa qualidade em tempo real. A SRI-B utilizou extensivamente NPU e técnicas avançadas de quantização para preparar um modelo de IA mais leve e altamente otimizado que alcança desempenho em tempo real com baixo consumo de corrente.

Qual é a sua visão para futuras iterações de UDC na Samsung?

[Alok] A UDC do Samsung Galaxy Fold4 5G abriu uma nova dimensão para o formato da câmera do smartphone. As câmeras abaixo da tela do futuro permitirão colocar sensores de câmera maiores e várias câmeras em posições flexíveis sem comprometer a experiência de visualização. Outro grande desafio é a adoção em massa da tecnologia UDC em mais produtos como a câmera frontal principal. Para que isso aconteça, será necessário melhorar significativamente a qualidade da imagem da câmera, o tempo de processamento e a experiência de exibição.

[Seok-Jun] Como a UDC do Galaxy Z Fold4 5G oferece uma experiência muito melhor em termos de ocultar a câmera sob a tela e melhorar a qualidade da imagem, a direção de P&D para os próximos dispositivos principais trabalhará para tornar a UDC completamente invisível. Isso fornecerá a melhor experiência de exibição móvel imersiva ininterrupta, ao mesmo tempo em que obtém a mesma qualidade de imagem de uma câmera perfurada.

¹ Habilitado para tecnologia 5G. A velocidade real pode variar, dependendo do país, da operadora e do ambiente do usuário. Verifique com sua operadora a disponibilidade e os detalhes. As velocidades de download e streaming podem variar de acordo com o provedor de conteúdo, a conexão do servidor e outros fatores.

² É possível notar um vinco no centro da tela principal. Isso é uma característica natural do smartphone. O carregador de tomada é enviado na caixa do Z Flip4 5G e do Z Fold4 5G.

³ Conectada às questões de inovação tecnológica e consumo sustentável, a Samsung não fornece mais o carregador de tomada na caixa do produto (apenas o caso USB-C), porém, na compra dos aparelhos elegíveis, o consumidor tem direito a resgatar gratuitamente um carregador de tomada. O resgate poderá ser solicitado em até 30 dias a partir da emissão da Nota Fiscal. A entrega será feita no endereço do consumidor. Consulte o regulamento completo em www.samsungparavoce.com.br.