Googles KI-gestützter „magischer Zeiger“ ist die neueste Funktion in einem frustrierenden Trend

Es wird erwartet, dass Google auf der Google I/O-Veranstaltung Mitte Mai 2026 mehrere neue Gemini-KI-Funktionen vorstellen wird, aber das Unternehmen teilte seine KI-Innovationen bereits eine Woche zuvor mit und veranstaltete die I/O 2026-Ausgabe von „The Android Show“ auf YouTube, um neue Android 17-Funktionen und die Android-basierten Googlebook-Laptops anzukündigen, die Chromebooks ersetzen werden. Die Überarbeitung des AluminiumOS-Laptops wurde bereits erwartet, ebenso wie der Fokus auf KI.

Tatsächlich sagte Google auf der Bühne, dass Google Books „von Grund auf“ für Gemini Intelligence entwickelt wurde und einige wichtige Funktionen gemeinsam hat, die diese Computer von Mac- und Windows-Geräten unterscheiden sollten, darunter Magic Pointer und Unterstützung für die Erstellung benutzerdefinierter Widgets. Magic Pointer ist mit Sicherheit eine der besten Funktionen, die aus Googles Pre-I/O-Event hervorgegangen sind, einer Neuerfindung des Cursors für das KI-Zeitalter, die KI-Workflows beschleunigen kann. Leider ist die Neuerfindung des klassischen Mauszeigers durch KI die neueste Entwicklung in diesem etwas langweiligen Trend: KI überall auf Mobilgeräten und PCs einzusetzen und zu hoffen, dass einige dieser Funktionen funktionieren, während Bedenken hinsichtlich der Privatsphäre der Benutzer ignoriert werden.

Magic Pointer basiert auf der AI Pointer-Technologie von Googles DeepMind und ermöglicht Benutzern die direkte Interaktion mit KI in ihren Arbeitsabläufen, ohne Inhalte speichern und in die Gemini-App verschieben oder eine Eingabeaufforderung schreiben zu müssen. Um die KI an die Stelle zu rufen, an der sich der Mauszeiger befindet, schütteln Sie sie. An diesem Punkt versteht Gemini Ihren Kontext, unabhängig davon, ob Sie ein Bild oder einen Text betrachten, und macht Vorschläge. Der Benutzer kann weiterhin Eingabeaufforderungen verwenden und DeepMind-Demos zeigen, dass der AI Pointer mit Spracheingaben funktioniert. Am nächsten kommt Magic Pointer vielleicht die Google-Funktion „Circle to Search“ auf Android-Smartphones, mit der Benutzer verschiedene KI-basierte Suchen durchführen können, indem sie einfach einen Kreis auf dem Bildschirm zeichnen.

In der Ankündigung von Google zu Googlebooks fehlten die erwarteten Details zu einer neuen Produktkategorie, die voraussichtlich dieses Jahr in die Läden kommen wird. Google hat keine Spezifikationen für Googlebook-Geräte verschiedener PC-Hersteller genannt und auch keine Preise bekannt gegeben. Das sind im Hinblick auf die Konkurrenz wichtige Details. Das MacBook Neo für 599 US-Dollar war dieses Jahr ein großer Erfolg für Apple. Gleichzeitig war Microsoft gezwungen, die Preise für einige seiner Surface-Geräte zu erhöhen. Zur Erinnerung: Der mit der Nachfrage nach KI verbundene Mangel an Speicher- und Speicherchips schadet den Smartphone- und Laptop-Anbietern.

In diesem Zusammenhang kann Magic Pointer ein großartiges Tool sein, um die Arbeit auf einem Laptop zu beschleunigen, ohne dass Hardware-Ressourcen wie ein schnellerer Chip und mehr RAM erforderlich sind. Tatsächlich ruft eine Bewegung der Maus Gemini auf, das sieht, was der Benutzer sieht, und den Kontext um den Cursor herum versteht. KI kann erkennen, dass Sie mit einem Textverarbeitungsprogramm arbeiten, Bilder betrachten (und was sie zeigen) oder programmieren. Danach kann die KI Vorschläge machen und Ihren Cursorbewegungen folgen, um Aktionen auszuführen.

Zu den Demonstrationen von Google gehörte es, den Magic Pointer auf eine E-Mail zu richten und Gemini dazu aufzufordern, Aktionen für Google Kalender, Gmail und Google Maps vorzuschlagen. Durch die Verwendung des magischen Zeigers zur Auswahl mehrerer Bilder auf dem Bildschirm wurde Gemini darüber informiert, dass der Benutzer möglicherweise alle drei Bilder zusammen anzeigen möchte. Als der Benutzer auf diesen Vorschlag klickte, erstellte die KI eine Textaufforderung für die Aufgabe und begann mit der Generierung des Bildes. „Um dies auf heutigen Laptops zu tun, muss man mit der rechten Maustaste klicken, Bilder speichern, sie in einen Chatbot hochladen und dann fragen“, sagte Google. „Stattdessen kann Ihr Googlebook den Kontext verstehen und sofort mit der Arbeit beginnen.“

Das Google DeepMind-Team hat gezeigt, wie einfach es ist, mit Gemini per Sprache zu interagieren und dabei die AI-Pointer-Funktionalität zu nutzen, ohne spezifisch zu sein wie bei Textaufforderungen. Vage Interaktionen wie „Repariere das“ oder „Was bedeutet das?“ » würde in der Mensch-zu-Mensch-Kommunikation funktionieren, weil Menschen mit Gesten auf ihre Umgebung zeigen. Die von DeepMind für AI Pointer und Magic Pointer entwickelte Technologie funktioniert ähnlich. In einem Beispiel zeigt der Benutzer auf ein Bild mit dem Namen eines Bahnhofs und einem Foto, das einen interessanten Ort zeigt, und weist die KI an, zwischen den beiden Orten zu navigieren. Gemini erkennt beide Adressen und öffnet ein Google Maps-Fenster, das Wegbeschreibungen zwischen den beiden Standorten anzeigt. Diese Erfahrung ist viel schneller als die manuelle Ausführung der Schritte.

Aber Menschen, die sich auf Geräten, die KI in den Vordergrund stellen, Sorgen um ihre Privatsphäre machen, haben Recht, wenn sie die Auswirkungen von Magic Pointer auf die Privatsphäre in Frage stellen. Google hat noch nicht erklärt, was die KI sehen kann, wenn man den Schieberegler schüttelt oder wann die Datenerfassung startet und stoppt. Darüber hinaus gibt Google nicht an, ob die Datenverarbeitung durch Magic Pointer auf dem Gerät erfolgt oder ob die Daten an die Cloud gesendet werden. Schließlich erklärt Google nicht, ob diese Daten, die vertraulich und sehr persönlich sein können, jemals zum Trainieren zukünftiger Gemini-Modelle oder sogar zur Verbesserung von Magic Pointer verwendet werden.

Dies sind Dinge, die Sie im Hinterkopf behalten sollten, bevor Sie neue KI-Funktionen nutzen, egal wie cool sie auch sein mögen. Sie müssen jedoch nicht auf Googlebooks warten, um Magic Pointer zu testen, da eine eingeschränkte Version der Funktion in Gemini in Chrome auf Mac- und Windows-PCs funktioniert. Benutzer können AI Pointer auch in Google AI Studio testen.