AvvA

Die AvvA-App wurde so erstellt, dass sie von überall auf Android zugänglich ist. Nach der Aktivierung erstellt die App einen Screenshot der geöffneten App.

Der Benutzer hat sofortigen Zugriff auf diesen Screenshot und kann Text per Sprache oder Eingabe eingeben, um jede Aufgabe zu erledigen, die er Gemini stellen möchte. Wir haben die Gemini-API so konfiguriert, dass sie die Screenshots verarbeitet und im Chat-Modus antwortet, sodass der Benutzer eine Frage klären oder validieren kann Stellen Sie eine einfache Frage oder nehmen Sie sogar an einem tiefergehenden Gespräch teil, wenn Sie möchten.

Wir verwenden Gemini auch, um mögliche Benutzeraktionen zu interpretieren, beispielsweise um mögliche Aktionen zu identifizieren, beispielsweise um ein Lied zu identifizieren.

Die Antwort von Gemini fordert AvvA möglicherweise auf, andere Apps zu öffnen und Aktionen auszuführen. Sie kann beispielsweise YouTube öffnen und auf das von Gemini identifizierte Lied klicken.

Zu den weiteren Aktionen, die den Bildschirmkontext nutzen, gehören: Überprüfen von Social-Media-Nachrichten; Inhalte übersetzen; Nach Vorschlägen fragen, was man in einem Gespräch sagen könnte.

Alle Gemini-Antworten können einfach zur Verwendung in anderen Apps kopiert werden.

Die AvvA-App nutzt die Accessibility API, um automatisierte Aktionen zu unterstützen, die von Benutzern selbst vorprogrammiert werden. Dazu gehören Funktionen wie das Öffnen anderer Anwendungen und das Starten der Musikwiedergabe, was einen höheren Komfort und eine Personalisierung des Gerätenutzungserlebnisses ermöglicht.

Die Nutzung der Accessibility API ist optional und wird nur mit ausdrücklicher Zustimmung des Nutzers aktiviert. Diese Berechtigung wird verwendet, um automatisierte Aktionen direkt im System auszuführen und so die Produktivität und Effizienz bei der Ausführung häufiger Aufgaben mit geplanten Berührungen zu verbessern.

Die AvvA-App respektiert die Privatsphäre der Benutzer und ändert keine Geräteeinstellungen ohne entsprechende Genehmigung. Die App ist darauf ausgelegt, die Interaktion mit dem Gerät zu optimieren, greift jedoch nicht in die Datenschutzkontrollen ein und verwendet die Barrierefreiheits-API nicht, um Audio aufzuzeichnen oder Oberflächenelemente auf irreführende Weise zu ändern.