Microsoft Copilot Plus PC: Die wichtigsten KI-Funktionen

• Copilot+ PCs besitzen einen Snapdragon-Chipsatz mit NPU, der das Ausführen lokaler KI-Anwendungen ermöglicht.
• Mit dem KI-Feature Recall kannst du nach jeglichen Dingen suchen, die du jemals am PC gemacht hast. Recall ist vergleichbar mit einem Gedächtnis für einen PC.
• Das KI-Feature Cocreator erschafft Kunstwerke auf Basis deiner Skizzen und Text-Prompts.
• Liveuntertitel generiert in Echtzeit englische Untertitel für beliebige audiovisuelle Inhalte in 44 Fremdsprachen.
• Windows-Studioeffekte optimieren mithilfe von KI Audio- und Videokonferenzen.
• Die Funktion automatische Superauflösung sorgt dank KI-Upscaling für höhere Bildwiederholraten in Games.

Mit den Copilot+ PCs startet Microsoft ins neue KI-Zeitalter. Es handelt sich um Windows-11-Laptops, deren Chipsätze über einen leistungsstarken Neuralprozessor – kurz NPU – für lokale KI-Anwendungen verfügen. Nähere Infos zu NPUs erfährst du in unserem Beitrag KI-Prozessoren: Das bringen KI-PCs wirklich.

Bisher gibt es nur Copilot-Plus-PCs mit Snapdragon-Prozessoren. Später sollen auch Modelle mit Chips von AMD und Intel folgen. Beim Kauf eines Copilot+ PCs hast du die Wahl zwischen einem Snapdragon-X-Plus-Chipsatz und dem leistungsstärkeren Snapdragon X Elite. Die NPU des X Elite kann bis zu 45 Billionen Rechenoperationen pro Sekunde abarbeiten.

Diese hohe Rechenleistung ermöglicht spannende KI-Funktionen, die deine Produktivität steigern und dich kreativ werden lassen. Die wichtigsten KI-Features der Copilot+ PCs stellen wir dir nun im Detail vor.

Im folgenden Video geht unser Moderator Jens näher auf die erwähnten Snapdragon-Chipsätze und ihre ARM-Architektur ein.

Folgende KI-Funktionen kannst du mit Copilot+ PCs nutzen:

• Recall: ein fotografisches Gedächtnis für deinen PC
• Cocreator: Kreativität mithilfe von KI ausleben
• Liveuntertitel: Audio- und Videoinhalte aus 44 Sprachen ins Englische übersetzen
• Windows-Studioeffekte: Tool-Sammlung für optimierte Videoanruf- und Audioeffekte
• Automatische Superauflösung: höhere Bildwiederholraten in Games ohne Grafikeinbußen

Das KI-Feature Recall verleiht deinem PC ein fotografisches Gedächtnis. In regelmäßigen Abständen fertigt Windows Momentaufnahmen des Bildschirms von den Dingen an, die du gerade tust. Und bevor du dir Sorgen um deine Privatsphäre machst: Die Bilder werden lokal und verschlüsselt auf deinem PC gespeichert und landen nicht auf den Servern von Microsoft.

Diese Momentaufnahmen kannst du nach allen möglichen Dingen durchsuchen. Du hast eine wichtige E-Mail verbummelt? Gib dem Copilot+ PC ein paar Infos über die E-Mail, an die du dich erinnern kannst. Dann erhältst du verschiedene Vorschläge, um welche Mail es sich handeln könnte – übersichtlich dargestellt auf einem Zeitstrahl. Im folgenden Video siehst du Recall und weitere KI-Features in Aktion.

Das Ganze funktioniert nicht nur für E-Mails, sondern unter anderem auch für Bilder, Websites, Apps und Dateiordner. Hast du gefunden, wonach du gesucht hast, werden dir verschiedene Interaktionen mit dem Inhalt angeboten.

Aktuell (Stand: Juli 2024) hast du in Recall nur Zugriff auf die Momentaufnahmen, also die Screenshots. Das gefundene Objekt wird nicht direkt geöffnet, das musst du noch manuell erledigen. Zu einem späteren Zeitpunkt soll Recall aber das jeweilige Quelldokument bereitstellen können.

Hinweis: Recall ist derzeit noch nicht für Copilot+ PCs verfügbar, es erscheint zunächst als Preview für Windows Insider (Beta-Tester). Nach einer erfolgreichen Testphase soll das KI-Feature auf allen Copilot+ PCs verfügbar sein.

Du möchtest gern coole Bilder kreieren, aber (bisher) fehlen dir die Fähigkeiten dazu? Mit Cocreator für Copilot+ PCs kannst du deine Kreativität voll ausleben und eindrucksvolle Kunstwerke erschaffen. Dafür genügt deine Vision.

Diese teilst du Cocreator im Programm Paint mit: entweder als Text-Prompt oder als grobe Skizze. Cocreator interpretiert anschließend deinen Prompt oder deine Skizze und setzt den Auftrag künstlerisch um. Den Kunststil kannst du nach nachträglich unkompliziert anpassen. Wie bei der Bildgenerierung mit Copilot lässt sich das erschaffene Kunstwerk noch durch weitere Text-Prompts oder Pinselstriche verfeinern.

Das folgende Microsoft-Video demonstriert, wie Cocreator funktioniert.

Hinweis: Laut Angaben von Microsoft ist Cocreator für Text-Prompts in englischer Sprache optimiert. Prompts in anderen Sprachen können demnach zu weniger guten Ergebnissen bei der Bildgenerierung führen.

Du möchtest audiovisuelle Inhalte in einer bestimmten Fremdsprache verstehen? Die leistungsstarke NPU der Microsoft Copilot+ PCs kann 44 Sprachen in Echtzeit übersetzen. Bisher lassen sich allerdings nur Untertitel auf Englisch generieren. Wie das aussieht, zeigt das folgende Microsoft-Video.

Über welche Quelle die fremdsprachigen Inhalte abgespielt werden, spielt für die Liveuntertitel keine Rolle. Du kannst mithilfe des KI-Features somit Podcasts ebenso wie gestreamte Filme mit englischen Untertiteln versehen lassen.

Zu den 44 unterstützten Sprachen zählen Deutsch, Englisch und Französisch, aber auch weniger verbreitete Sprachen wie Walisisch und Mazedonisch.

Windows-Studioeffekte sind keine eigenständige KI-Funktion, sondern bezeichnen eine Sammlung von KI-basierten Videoanruf- und Audioeffekten. Dazu gehören unter anderem:

• Kreative Filter: Videofilter für unterhaltsame und verschönernde Effekte in Videokonferenzen.
• Porträtbeleuchtung: Optimiert die Belichtung einer Person im Video in schlecht beleuchteten Umgebungen.
• Blickkontakt-Teleprompter: Korrigiert den Augenfokus im Video auf die Kamera, wenn eine Person Inhalte von einem Teleprompter abliest.
• Porträtunschärfe: Generiert in einer Videokonferenz einen subtilen Bokeh-Effekt (Unschärfe) um eine Person herum.
• Sprachfokus: Schaltet Hintergrundgeräusche stumm, damit die eigene Stimme deutlicher übertragen wird.

Wie einige der Effekte aussehen, demonstriert Microsoft in diesem Video.

Die automatische Superauflösung (Auto SR) ist ein KI-Feature für Gaming, das mit Nvidias DLLS für RTX-Grafikkarten vergleichbar ist. Mehr zu DLLS liest du in unserem Beitrag KI und Grafikkarten: Das bringen sie für Gaming & Anwendungen.

Die Funktion ermöglicht höhere Bildwiederholraten beim Zocken, indem sie die native Auflösung des jeweiligen Spiels reduziert. Die niedrige Auflösung wird anschließend mithilfe der NPU der Snapdragon-Chipsätze hochskaliert, sodass kein optischer Unterschied im Vergleich zur nativen Auflösung besteht.

Die NPU der Snapdragon-Chipsätze kommt zusätzlich für weitere KI-Anwendungen in Programmen und Apps von Drittherstellern zum Einsatz. Darunter sind etwa Adobe-Apps wie Photoshop und Lightroom, DaVinci Resolve Studio und die DJ-App djay Pro. Weitere nützliche KI-Apps findest du in unserem Beitrag Die besten KI-Programme & -Tools für den PC.

Selbstverständlich brauchst du bei der Nutzung von Copilot+ PCs nicht auf Microsofts Chat-Assistenten Copilot zu verzichten. Er wird allerdings nicht von der verbauten NPU befeuert, sondern läuft über die Cloud.

Mit den Copilot+ PCs verzahnt Microsoft KI-Features noch enger mit Windows 11. Während der Fokus zuvor auf KI-Anwendungen aus der Cloud lag, können nun dank NPU auch lokale KI-Features effizient genutzt werden.

Diese Funktionen sind nicht mehr auf hauptsächlich generative Inhalte beschränkt, wie du sie von Copilot kennst: Die KI-Features steigern deine Produktivität, verbessern die Nutzererfahrung mit Windows oder eröffnen dir ganz neue Möglichkeiten, Medien zu konsumieren.

Microsoft weist jedoch darauf hin, dass einige Funktionen (wie Recall) bisher nur für Beta-Tester verfügbar und andere in der Nutzung noch eingeschränkt sind (nur englische Untertitel bei Liveuntertitel). Du solltest also noch nicht zu hohe Erwartungen an die KI-Funktionen haben. Zukünftig darfst du dich aber auf einen größeren Funktionsumfang und bestimmt auch auf weitere lokale KI-Funktionen auf Microsoft Copilot+ PCs freuen.

In diesem Video stellt TURN ON-Moderator Jens nochmal kurz die wichtigsten KI-Funktionen vor: