Im vergangenen Jahr sprach ich auf der Samsung Developer Conference über vernetztes Denken und einige der unglaublichen Möglichkeiten, die durch die einheitliche Vernetzung zwischen Geräten realisiert werden können. Mit SmartThings sind wir diesem Ziel einer nahtlos vernetzten Zukunft einen großen Schritt nähergekommen.

Seitdem ist viel passiert. Wegweisende Technologien wie 5G, die einst experimenteller Natur waren, sind mittlerweile kommerziell verfügbar. Bahnbrechende KI-Fähigkeiten, die früher noch scheinbar unmöglich waren, sind jetzt in greifbarer Nähe. SmartThings hat sich zur weltweit umfassendsten offenen IoT-Plattform entwickelt.

Das bringt uns an die Schwelle einer neuen Ära voller Entdeckungen und Erfindungen. Eine Zeit, in der sich Menschen mit intelligenten Diensten und Tools vernetzen, um das zu machen, was sie sich wirklich wünschen. Eine Zeit mit einem unglaublichen wirtschaftlichen Potenzial, das auf neuen Kenntnissen basiert, wie die Welt funktioniert und was Kunden wollen. Und eine Zeit, in der die Allgegenwärtigkeit einer IoT-Plattform wie SmartThings uns von der Ära des vernetzten Denkens hinaus in die Ära des vernetzten Lebens treibt.

Mit großem Stolz kann ich sagen, dass Samsung mit all seinen Errungenschaften eine Vorreiterrolle einnimmt und mit vielen Innovationen den Grundstein für diese neue Ära legt. Neben SmartThings haben wir KI-Innovationen entwickelt, die Konnektivität und Automatisierung neu definieren. Bei der Entwicklung von 5G-Technologien leisteten wir nicht nur entscheidende Pionierarbeit, sondern führten auch den weltweit ersten 5G-Service für Privatkunden in den USA ein.

Mit unseren Partnerschaften – und natürlich der Unterstützung der Entwicklergemeinschaft – schaffen wir eine künstliche Intelligenz, die lern- und anpassungsfähig ist. 5G-Konnektivität, intelligente Städte, intelligente Häuser und autonome Fahrzeuge werden zur Realität. Darauf basierend entwickeln wir Geräte, die so leistungsstark und sicher sind, dass sie die Art und Weise, wie wir miteinander und mit der Welt um uns herum interagieren, verändern.

Die diesjährige Samsung Developer Conference (SDC18) steht für einen gigantischen Fortschritt, der diese einst weit entfernten Technologien zum Leben erweckt. Oder, wie wir gerne bei Samsung sagen: der Schritt vom What‘s Next hin zum What’s Now.

Bei der Samsung Developer Conference 2018 stellen wir neue Entwickler-Tools für die SmartThings-Plattform vor. Sie veranschaulichen den echten Mehrwert des vernetzten Lebens und demonstrieren die Verbesserungen unserer Bixby-Plattform, die das Potenzial Künstlicher Intelligenz aufzeigen. Und wir liefern mit neuen Hardware- und Schnittstellenkonzepten eine aufregende Zukunft für mobile Dienste.

Jede Innovation stärkt das leistungsstärkste Technologie-Ökosystem der Welt und wird gleichzeitig eine neue Welt der Erfahrungen und Erlebnisse schaffen, die mit den Menschen verknüpft ist, während sie ihr Leben managen und sich durch ihren Alltag bewegen.

Ich glaube fest daran, dass wir an einem Wendepunkt in unserer Branche stehen. Die technologischen Innovationen haben die Weichen für den Wandel gestellt – in einem Tempo, das wir noch nie zuvor erlebt haben. Dabei entstehen neue und vielfältige Möglichkeiten, die unsere bisherigen Vorstellungen übersteigen und auf eine spannende Zukunft hindeuten. Das Potenzial, das Leben der Menschen zu verändern, war noch nie so groß wie heute.

Beim SDC18 geht es darum, diese Chancen zu nutzen. Unsere Partner und Entwickler teilen unser Engagement für Innovationen, die vom Menschen inspiriert sind. Zusammen werden wir ein offenes Innovations-Ökosystem fördern, das alle Aspekte des Lebens umfasst. Ich kann es kaum erwarten zu sehen, wie die von uns entwickelten und auf der SDC18 präsentierten Technologien in Zukunft verwendet werden und dabei neu zu entdecken, was als Nächstes kommt.

*Dieser Artikel basiert auf DJ Kohs Keynote bei der SDC18.

Der Universal Guide passt den Smart TV den Vorlieben der Nutzer an

Samsung Electronics hat den Universal Guide auf den 2018er Smart TVs eingeführt um Nutzern eine Funktion zur Verfügung zu stellen, die dabei hilft Inhalte zu finden, die den persönlichen Vorlieben entsprechen. Möglich wird dies durch künstliche Intelligenz, die das Nutzerverhalten analysiert und darauf aufbauend Vorschläge für Serien und Filme macht.

Der Universal Guide ist ein Programmführer der neuen Art. Innerhalb weniger Wochen analysiert er die Vorlieben des Nutzers. Aufbauend auf den Analysedaten aus zwei Wochen schlägt das Programm geeignete Inhalte auf dem Smart TV vor. Obwohl es bereits ähnliche Dienste gibt, ist der Universal Guide der erste Dienst, der die Innovationskraft von KI nutzt, um intelligente Empfehlungen zu machen.

Der Universal Guide besteht aus den fünf Kategorien „Für Sie“, „Serien“, „Filme“, „Sport“ und „Musik“. In der Kategorie „Für Sie“ werden die Inhalte vorgeschlagen, welche die KI des Geräts, auf Grundlage der Sehgewohnheiten des Nutzers, für besonders geeignet hält. In den anderen Reitern zeigt der Universal Guide Inhalte, die allgemein im Trend liegen sowie Over-the-top Content.

Die Suche nach passenden Serien wird einfacher

Der durchschnittliche Fernsehzuschauer verändert sich. Die Auswirkungen von Over-the-top Streaming-Diensten wie Netflix und Amazon Prime Video sind unübersehbar. Diese Anwendungen haben eine Generation an Fernsehnutzern hervorgebracht, die das traditionelle Kabelfernsehen kaum noch nutzen. Durch diverse Streaming-Dienste erleben diese Nutzer ganz neue Freiheiten. So können sie beispielsweise alle Folgen ihrer Lieblingsserie hintereinander schauen – wann und wo sie wollen.

Im Zuge dieser Entwicklung hat auch der Fernseher selbst, der nach wie vor das beliebteste Medium für Bewegtbildkonsum ist, sein Angebot erweitert. Die Smart TVs von Samsung bieten Video- und Streaming-Dienste wie YouTube und Netflix an und unterstützen auch Musikservices wie Spotify. Dank der TV PLUS-Funktion der Samsung Smart TVs können Nutzer zudem Videos auf Abruf ansehen, ohne dabei zusätzliche Apps installieren zu müssen. Alle Funktionen gehen nahtlos ineinander über. Der KI-gesteuerte Universal Guide lässt die Suche nach Inhalten innerhalb einer riesigen Auswahl intuitiv werden.

Weltweit immer die beste Auswahl

Der Universal Guide unterscheidet sich von anderen Empfehlungs-Algorithmen dadurch, dass er die Inhalte, die aktuell im Trend liegen, mit den persönlichen Vorlieben des Nutzers kombiniert und auf dieser Grundlage Empfehlungen zusammenstellt. Mit dem Universal Guide sind die aktuellsten Inhalte immer leicht zu finden, dabei ist es egal wo sich der Nutzer gerade aufhält. Nachdem der Samsung Smart TV angeschlossen wurde, kann ein Regionalcode eingegeben werden. Auf Grundlage dieses Codes ermittelt der TV dann die aktuellsten Inhalte. Durch die Kombination der Sehgewohnheiten des Nutzers mit allgemeinen Trends, stellt der TV Inhalte zusammen, die dem Geschmack des Nutzers entsprechen.

Die nächste Stufe von KI

Samsung verbessert die Technologie stetig. Der Universal Guide nutzt schon heute KI um die Auswahl von Inhalten auf dem TV zu vereinfachen und die Anwendung intuitiv zu gestalten. In naher Zukunft wird Samsung Electronics diese Technik weiter verbessern, sodass auch Over-the-top Content vom Universal Guide berücksichtigt wird. Zudem soll der Algorithmus so weiterentwickelt werden, dass er die Vorlieben jedes einzelnen Nutzers erkennt und nicht etwa die einer ganzen Familie. Samsung plant außerdem das TV-Erlebnis dahingehend zu optimieren, dass TV-Inhalte auf dem Smartphone wiedergegeben werden können. Samsung arbeitet auch daran, eSport und Home Shopping in die Smart TVs zu integrieren.

Warum wird ein Kühlschrank personalisiert?

In vielen Haushalten ist der Kühlschrank das meistgenutzte aller Geräte. Natürlich wünschen sich Familienmitglieder, je intelligenter ihre Küchengeräte werden, auch vom Kühlschrank unterschiedliche Anwendungsmöglichkeiten, die ihrem individuellen Geschmack und ihren Bedürfnissen entsprechen. In naher Zukunft nutzt der Family Hub künstliche Intelligenz, um individueller auf die Familie einzugehen.

Eine Funktion, an der derzeit gearbeitet wird, ist der Meal Planner, der dem Nutzer auf Grundlage seiner bevorzugten Zutaten und der Haltbarkeit der vorhandenen Lebensmittel Rezepte vorschlägt. Die bereits eingeführte Spracherkennungsfunktion soll dahingehend weiterentwickelt werden, dass der Family Hub Nutzer individuell anhand ihrer Stimme identifizieren kann.

Für jeden Geschmack in der Familie wird gesorgt

Die Stimmerkennung (Voice ID) kann bald weit mehr, als nur zu erfassen, was der Nutzer sagt. Wo zuvor Informationen wie Kalender oder Wetter manuell aufgerufen werden mussten, können künftig nutzerspezifische Informationen direkt durch die Identifikation der Stimme geöffnet werden.

Die kommenden Generationen des Family Hub analysieren die Stimmdaten jedes aufgezeichneten Familienmitglieds, um alle Nutzer zu unterscheiden und individuell identifizieren zu können. Diese Informationen sollen in der Cloud gespeichert und abgerufen werden, wenn der Nutzer den Kühlschrank anspricht. Auf diese Weise sollen automatisch die Einstellungen und Präferenzen des aktuellen Nutzers aktiviert werden.

Ernährungsoptimierung per Algorithmus

Geschmäcker und Essgewohnheiten unterscheiden sich. Deshalb wird der Family Hub künftig vorhandene Daten zu individuellen Präferenzen des Nutzers und zum Zustand der Zutaten im Kühlschrank nutzen, um personalisierte Ernährungsvorschläge zu ermitteln.

Der Family Hub soll Informationen über die Vorlieben aller Familienmitglieder speichern und die Haltbarkeit der Lebensmittel nachverfolgen. Der Nutzer selbst erhält die Möglichkeit, Haltbarkeitsdaten am Family Hub, über die zugehörige Smartphone-App oder per Sprachsteuerung einzugeben.

Samsung entwickelt Algorithmen, mit deren Hilfe der Kühlschrank aus diesen Informationen ein abwechslungsreiches Menü passender Rezepte zusammenstellen und dem Nutzer personalisiert vorschlagen kann.

Datenanalyse als Grundlage personalisierter Rezepte

Die KI-Technologie, die für den Family Hub entwickelt wird, analysiert Nutzerdaten, um passende Rezepte für jede Familienkonstellation anbieten zu können: einzeln, in unterschiedlichen Kombinationen, oder vollzählig – auf jede Situation soll sich das Rezeptangebot des Kühlschranks selbstständig einstellen, um einen gesunden und abwechslungsreichen Speiseplan für die ganze Woche zu erstellen.

Eine Beispielfamilie: Die Mutter mag gerne Rindfleisch, aber keine Karotten, während ihre Kinder keinen Lachs mögen, dafür aber Tomaten. Auf Grundlage dieser Informationen soll der Meal Planner Rezeptoptionen entwickeln, mit denen alle satt und zufrieden werden und dabei unnötigen Müll vermeiden. Rindfleisch und Tomaten werden bevorzugt, Lachs und Karotten werden vermieden, weitere Zutaten werden je nach Verfallsdatum priorisiert.

In Zukunft wird Samsung weitere Hausgeräte mit KI-Technologie ausrüsten, um ihre Funktionen bestmöglich an den Lebensstil jedes einzelnen Nutzers anzupassen.

Der Family Hub wird mit gutem Beispiel vorangehen: Als erster Kühlschrank, der seine Anwender versteht, soll er die Gemeinschaft in der Familie fördern, den Haushalt erleichtern und das alltägliche Leben bereichern.

Das Potential von künstlicher Intelligenz ist riesig, und Forscher finden gerade erst heraus, welche Anwendungsmöglichkeiten KI bietet. Der HomeCare Wizard von Samsung ist eine Innovation, die zukünftig das Potenzial haben wird, mithilfe von KI das alltägliche Leben leichter zu machen. Smart-Home-Anwendungen werden schon bald mit dessen Hilfe ihren eigenen Zustand diagnostizieren können und nicht nur Systemfehler orten, sondern auch ihre eigene Effizienz steigern.

Wenn ein Kühlschrank heute defekt ist und das Gerät nicht mehr die gewohnte Leistung erbringt, muss in den meisten Fällen erst einmal ein Techniker gerufen werden. Dies geschieht in der Regel, wenn der Defekt offensichtlich ist und der Kühlschrank nicht mehr benutzt werden kann. Ein umständlicher Prozess, den der HomeCare Wizard schon bald ändern wird. Ein Beispiel: Wenn die Leistung eines Kühlschranks unerwartet schwächer wird, meldet der HomeCare Wizard den Fehler umgehend und liefert eine Diagnose über die Herkunft des Problems – ohne, dass ein Techniker gerufen werden muss. Durch die fortlaufende Analyse des Nutzerverhaltens hilft der HomeCare Wizard, Gerätefunktionen zu optimieren: Er erinnert beispielsweise daran, wenn es Zeit ist, die Trommel der Waschmaschine zu reinigen und gibt Tipps zur besseren Energie-Effizienz.

Was ist der HomeCare Wizard?

Gegenüber vergleichbaren Diagnosefunktionen, verbessert künstliche Intelligenz die Möglichkeiten maschinellen Lernens für Hausgeräte. Während sich Diagnosen normalerweise meist auf eindeutige Systemfehler beziehen, wird der fortschrittliche Algorithmus des HomeCare Wizard in der Lage sein, auch versteckte Mängel, die die Effizienz eines Gerätes schwächen, zu entdecken. Wenn zum Beispiel die Lüftung einer Klimaanlage lediglich aufgrund eines schadhaften Filters nicht genügend kühlt, wird eine korrekte Diagnose des HomeCare Wizard dem Nutzer ermöglichen, den Filter selbst zu reinigen oder auszutauschen.

Darin liegt einer der großen Vorteile der KI-Lösung: Wenn der HomeCare Wizard feststellt, dass eine Fehlfunktion keiner professionellen Reparatur bedarf, stellt er dem Nutzer einfache Instruktionen zur Verfügung, um das Problem selbst zu beheben. So werden Problemlösungen beschleunigt und der Bedarf an kostenintensiven Handwerkerleistungen verringert.

In schwierigen Fällen, die einen Kontakt zum Kundenservice erfordern, sendet der HomeCare Wizard die Diagnosedaten direkt zum Servicecenter, dessen Mitarbeiter so bereits über alle nötigen Informationen verfügen, wenn der Anruf des Kunden eingeht.

Was macht den HomeCare Wizard so besonders?

Wenn Geräte nicht so funktionieren, wie sie sollen, und schwer zu erkennen ist, warum, landen wir heute oft zur stundenlangen Recherche im Internet oder am Telefon des Kundenservice – und brauchen am Ende unter Umständen auch noch einen professionellen Techniker. Der HomeCare Wizard wird zukünftig dieses Muster mit Hilfe künstlicher Intelligenz durchbrechen: Smarte Geräte und Anwendungen werden mit seiner Hilfe die Fehlerdiagnose und sogar die Problemlösung weitgehend selbst übernehmen.

Die HomeCare Wizard-Technologie wird dazu verhelfen, die Effizienz von Hausgeräten zu optimieren, indem sie Nutzungsgewohnheiten erfasst und den Energieverbrauch überwacht. Nutzer werden über eine mobile App Diagnosen abrufen können und maßgeschneiderte Anwendungstipps erhalten. Eine Waschmaschine wird so beispielsweise ermitteln können, welche Programme am häufigsten verwendet werden und dem Nutzer so Optionen als Favoriten anbieten.

Wie funktioniert der HomeCare Wizard?

Zur Fehleranalyse vergleicht der HomeCare Wizard regelmäßig den aktuellen Status eines Gerätes mit vorangegangenen Einsätzen, um mögliche Probleme zu ermitteln. Samsung beschäftigt ein Entwicklerteam, das die eingesetzten Algorithmen kontinuierlich anpasst und verbessert, damit der HomeCare Wizard im laufenden Betrieb Daten erfassen und analysieren kann. Mit jeder Verwendung werden die Diagnosen und Lösungsvorschläge präziser.

Womit steht und fällt unser Fernsehvergnügen, wenn wir Fußball oder andere Sportereignisse im TV verfolgen? Können Bild- und Tonqualität so lebensecht werden, als ob wir live vor Ort dabei wären? Die neueste KI-Technologie von Samsung rückt solche Erlebnisse in greifbare Nähe. Erste Eindrücke dieser Technologie lieferte Samsung auf der diesjährigen CES, wo Prototypen mit einer extrem hohen Auflösung (7.680 × 4.320), die fast 8K entspricht, sowie verbessertem Sound für Liveübertragungen und andere Videoinhalte vorgestellt wurden.

Bisher wurden Steigerungen in der Bildqualität vor allem durch sogenanntes Upscaling erreicht, also die synthetische Hochskalierung der Videoauflösung. Dagegen basiert die von Samsung vorgestellte neue Technologie auf einer Künstlichen Intelligenz, die Bild und Ton nach den Charakteristika des konkreten Inhalts ausrichtet. Um zu verstehen, wie das genau funktioniert, müssen wir genauer hinsehen.

Die KI-Technologie, die Inhalte auf 8K-ähnliche Auflösungen hochrechnen kann, basiert auf maschinellem Lernen. Während die meisten Smartphones oder Computer bislang nach Richtlinien arbeiten, die von Menschenhand definiert sind, funktioniert maschinelles Lernen durch Erkenntnisprozesse einer Künstlichen Intelligenz, die auf Basis zahlloser Beispiele sukzessive Muster erlernt und so jeweils optimale Anpassungsmöglichkeiten findet.

Dementsprechend nutzt Samsung die Technologie der Machine Learning Super Resolution (MLSR), um mit künstlicher Intelligenz Inhalte in hoher und niedriger Qualität zu vergleichen und die technischen Unterschiede in einer stetig wachsenden Datenbank festzuhalten. Auf Grundlage der Analyse mehrerer Millionen Videos werden die passenden Filter gewählt, welche die Helligkeit optimieren, Schwarztöne definieren und Fehler im Input erkennen, um Ausgangsinhalte in niedriger Qualität in Auflösungen nahe 8K umzuwandeln.

Der Videoinput wird in Echtzeit Einstellung für Einstellung und Szene für Szene erfasst, sodass Bild- und Tonqualität unmittelbar verbessert werden können, unabhängig davon, ob die Quelle live oder over the top (OTT) sendet.

Wo liegt der Unterschied zu anderen Verfahren?

Andere Upscaling-Technologien benötigen menschlichen Input, um niedrig und hoch aufgelöste Szenen miteinander zu vergleichen und fehlende Bildinhalte zu rekonstruieren. Die KI-Technologie von Samsung dagegen ermöglicht eine eigenständige Prüfung von Millionen von Bildern durch MLSR und sorgt so für wesentlich höhere Genauigkeit als konventionelle Technologien.

Die Optimierung der Bildqualität besteht aus drei Elementen: Die „Detail Creation“ sorgt für schärfere Details und verbessert die Texturen in niedrig aufgelösten Arealen, die durch Kompression unscharf geworden sind. Als zweites definiert die „Edge Restoration“ die Kanten von Text, Menschen oder Objekten im Video, indem Pixel an den Rändern verschoben werden, um Sichtbarkeit und Lesbarkeit zu verbessern. In einem Video des Mondes beispielsweise optimiert Edge Restoration die Details des Mondschattens und verstärkt die Dunkelheit des Hintergrunds, um für eine klarere Unterscheidbarkeit der Bildelemente zu sorgen. Zuletzt entfernt die „Noise Reduction“ statisches Bildrauschen, das vor allem bei starker Kompression von Videoinhalten auftritt. Komprimierung ist notwendig, um Bilddaten übertragen zu können, zum Beispiel über das Internet; hierbei treten verschiedene Rauscheffekte auf, die durch die Rauschreduzierung effektiv verringert werden können.

Künstliche Intelligenz sorgt für immersiven Sound

Beim Film- oder Seriengenuss ist realistischer, immersiver Sound genauso wichtig wie Bildqualität. Deshalb optimiert die KI-Technologie von Samsung nicht nur Bildauflösungen, sondern auch die Klangqualität von Videoinhalten.

Konventionelle TVs bieten meist verschiedene Einstellungsmöglichkeiten auf Basis des Content-Genres, wie eine Film- oder eine Sport-Einstellung. Mit der KI-Technologie von Samsung können Inhalte automatisch szenengenau analysiert werden, um optimalen Sound zu gewährleisten.

Nehmen wir z. B. einen Film, in dem in einer Szene Musik aufgeführt wird: KI-Technologie kann die Musik so hervorheben, dass der Betrachter sie akustisch fast genau so erlebt wie die Figuren im Film. Wenn anschließend die Menge applaudiert, klingt das Klatschen, als stünde man mitten im Publikum. Und wenn Figuren im Film sprechen, justiert KI den Sound so, dass jedes Wort gut zu verstehen ist.

Oder nehmen wir die Übertragung eines Sportereignisses: KI kann die Stimme des Kommentators so priorisieren, dass dem Betrachter keine Informationen entgehen. Wenn der Wettkampf begonnen hat, kann KI wiederum die Hintergrundgeräusche verstärken, um die Atmosphäre vor Ort lebendig zu vermitteln. Dank dieser szenengenauen Sound-Anpassungen können Zuschauer in jeder Situation die bestmögliche Klangqualität genießen.

Entwickler bei Samsung arbeiten weiter daran, die Soundqualität den Bedürfnissen des einzelnen Zuschauers anzupassen, um ein individuell maßgeschneidertes TV-Erlebnis zu gewährleisten. Dass Lautstärkegewohnheiten sich individuell unterscheiden und das Umfeld des Seherlebnisses sich abhängig von der Tageszeit und anderen Faktoren ständig verändert, soll in den Ausprägungen des TV-Sounds detailliert berücksichtigt werden, um den größtmöglichen TV-Genuss für jeden Einzelnen zu schaffen.

Warum ist 8K-KI-Technologie wichtig?

Da die Nachfrage nach hochauflösenden Inhalten und hochauflösenden TVs kontinuierlich steigt, arbeiten etliche terrestrische Sender an UHD-Angeboten und verschiedene IPTV- und Kabel-Kanäle haben 4K-UHD-Dienste (3.840 × 2.160) gestartet. Aber obwohl die TV-Industrie inzwischen bereits 8K-TVs (7.680 × 4.320) einführt, sind 4K-Inhalte immer noch nicht großflächig in den Haushalten angekommen.

Deshalb stellt Samsung diesen neuen Ansatz vor, der 8K-UHD-Display-Technologie und Künstliche Intelligenz kombiniert. Der von Samsung entwickelte KI-Algorithmus optimiert Bildqualität automatisiert und löst so die Diskrepanz zwischen technischen Möglichkeiten und tatsächlicher Verfügbarkeit hochwertiger Inhalte auf. Eingesetzt wird die KI-Technologie bereits beim 85 Zoll 8K QLED TV, den Samsung auf der CES 2018 vorgestellt hat.

Ab der zweiten Jahreshälfte 2018 soll die Technologie in allen 8K QLED TVs implementiert werden und so Zuschauern UHD-Qualität in 8K-ähnlicherAuflösung und optimierten Sound für verschiedenste Videoinhalte bieten. Die 8K-Ära rückt in greifbare Nähe, und Samsung geht der Entwicklung mit großen Schritten voran.