StepX Neo: So funktioniert das erste Agenten-Smartphone

Das chinesische Unternehmen für künstliche Intelligenz (KI) StepFun hat am Montag das StepX Neo als das weltweit erste agentische Smartphone für den Massenmarkt vorgestellt. Das Unternehmen, das 2023 von ehemaligen Microsoft-Führungskräften gegründet wurde, behauptet, dass sein erstes Hardware-Produkt für Endverbraucher über einen integrierten KI-Agenten verfügt, der komplexe, mehrstufige Aufgaben über verschiedene Apps hinweg mit minimalem Eingriff des Nutzers erledigen kann. Das Gerät wird von StepFuns hauseigenem Basismodell Step Edge angetrieben und läuft auf dem eigens entwickelten Betriebssystem Step AOS. StepFun gibt an, dass das StepX Neo Live-Übersetzungen in 32 Sprachen unterstützt und zudem mit mehreren beliebten Drittanbieter-Diensten integriert ist.

Agentisches KI-Erlebnis auf dem StepX Neo

Zu den Highlights des StepFun StepX Neo zählt der hauseigene KI-Assistent namens Step Amoo. Statt als eigenständiger Chatbot zu funktionieren, ist er laut Unternehmensangaben direkt in das Betriebssystem integriert. Er soll dafür konzipiert sein, Arbeitsabläufe über Apps, Systemfunktionen und Web-Dienste hinweg mit nur wenigen natürlichsprachlichen Befehlen auszuführen.

Als Beispiel nannte das Unternehmen, dass Nutzer das Smartphone bitten können, eine komplette Reise zu planen. Der KI-Agent kann daraufhin Flüge suchen, Unterkünfte empfehlen, Buchungen abschließen, Reisedetails organisieren und den Reiseplan speichern, ohne dass Nutzer manuell zwischen Apps wechseln müssen. Zudem soll er in der Lage sein, die Vorlieben der Nutzer über die Zeit hinweg zu verstehen.

Für Vielreisende bietet das StepX Neo integrierte KI-Funktionen, darunter die Fähigkeit, Live-Gespräche zu übersetzen. StepFun behauptet, dass es Live-Gespräche, Telefonanrufe, Textnachrichten sowie durch den Kamerasucher erfassten Text in 32 unterstützten Sprachen und regionalen Dialekten übersetzen kann.

Zudem kann es lokale Fahrpläne des öffentlichen Nahverkehrs abrufen, nahegelegene Sehenswürdigkeiten empfehlen, gespeicherte Reisepläne offline aufrufen, Nutzer an den Check-in für Flüge erinnern, Visa-Anforderungen anzeigen und sogar bei Zolldokumenten helfen.

Angetrieben wird all das von Step AOS. Es handelt sich um ein eigens entwickeltes, agentisches Betriebssystem, das KI nicht einfach nur auf Android aufsetzt, sondern große Teile des Software-Stacks unter Verwendung von Android-, Linux- und RTOS-Komponenten neu aufgebaut hat. Das Betriebssystem nutzt das, was das Unternehmen eine „Atomic Capability Engine" nennt. Sie soll in der Lage sein, Gerätefunktionen mithilfe des MCP-Standards (Model Context Protocol) in die Bereiche Kommunikation, Apps, Dateien und Systemwerkzeuge zu unterteilen. Laut StepFun ermöglicht dies dem KI-Agenten, mehrere Funktionen zu kombinieren, um eine Aufgabe eigenständig zu erledigen.

Der Software-Stack umfasst zudem eine Natural User Interface (NUI), die Sprach- und visuelle Eingaben kombiniert und dabei das Verhalten der Nutzer über die Zeit lernt. Die KI-Verarbeitung findet direkt auf dem Gerät statt und nutzt ein hauseigenes Basismodell, das speziell für Smartphones optimiert sein soll. Das Unternehmen behauptet, das Modell führe in 29 Benchmark-Tests vor konkurrierenden Edge-KI-Modellen. Welche Benchmarks zur Leistungsmessung verwendet wurden, hat das Unternehmen bislang jedoch nicht bekannt gegeben.

StepFun hat Partnerschaften mit mehreren großen chinesischen Plattformen geschlossen, darunter Ctrip, Alipay, Didi, Meituan, WPS Office und CapCut, wodurch der KI-Agent auch über das Smartphone hinaus weitere Funktionen ausführen kann.

Holen Sie sich Ihre tägliche Dosis an Technik-News, Testberichten und Einblicken in unter 80 Zeichen auf Gadgets 360 Turbo. Tauschen Sie sich mit anderen Technik-Fans in unserem Forum aus. Folgen Sie uns auf X, Facebook, WhatsApp, Threads und Google News für sofortige Updates. Verpassen Sie nichts auf unserem YouTube-Kanal.