Apple macht es wieder: Hier sind die tollen Funktionen von Apple Intelligence

Die Apple-Konferenz war langweilig, bis Apple anfing, über das Apple Intelligence-System zu sprechen. Erstaunliche Funktionen und ein erstaunlicher Schritt in eine andere Zukunft. Apple Intelligence ist ein persönliches Intelligenzsystem für iPhone-, iPad- und Mac-Geräte, das die Leistungsfähigkeit generativer Modelle kombiniert mit persönlichem Kontext, um Informationen bereitzustellen, die sich durch ein erstaunliches Maß an ... Nutzen und Komfort auszeichnen.

Apple Intelligence wird tief in iOS 18, iPadOS 18 und macOS Sequoia integriert und nutzt die Leistungsfähigkeit von Apple-Chips, um Sprache und Bilder zu verstehen und zu erstellen, Aktionen über Apps hinweg zu ergreifen und Daten aus persönlichen Informationen zu extrahieren, um den Alltag zu beschleunigen und zu vereinfachen Aufgaben. All dies setzt gleichzeitig einen neuen Standard für den Datenschutz in der Welt der künstlichen Intelligenz durch die Einführung eines neuen Servertyps namens Private Cloud Compute, der die erforderliche Rechenleistung zwischen der Verarbeitung auf dem Gerät und größeren Modellen auf Basis dedizierter Server bereitstellen kann Apfelchips.

Neue Fähigkeiten, Sprache zu verstehen und zu erschaffen

Apple Intelligence bietet Benutzern neue Möglichkeiten, effektiver zu schreiben und zu kommunizieren. Benutzer warten im gesamten System auf die brandneue Schreibtools-Funktion, mit der sie Texte überall neu schreiben, Korrektur lesen und zusammenfassen können, einschließlich in Mail-, Notes- und Pages-Anwendungen sowie externen Anwendungen.

Unabhängig davon, welche Schreibaufgaben von der Organisation von Unterrichtsnotizen über das Korrekturlesen eines Blog-Beitrags bis hin zur Sicherstellung, dass eine E-Mail perfekt verfasst ist, reichen, werden sich Benutzer mit Writing Tools beim Schreiben sicherer fühlen. Mit dem Rewrite-Tool ermöglicht Apple Intelligence den Benutzern, aus verschiedenen Versionen ihres Geschriebenen auszuwählen und den Stil anzupassen, um das zu erreichen, was zur Zielgruppe und zur jeweiligen Aufgabe passt. Das Rewrite-Tool ermöglicht es außerdem, den richtigen Artikel an der richtigen Stelle zu präsentieren, ein Anschreiben zu verfeinern und einer Partyeinladung Humor und Kreativität zu verleihen. Das Korrekturlesetool überprüft, ob Grammatikregeln eingehalten, geeignete Wörter gewählt und Sätze richtig strukturiert sind. Gleichzeitig werden Änderungsvorschläge zusammen mit einer Erläuterung dieser Änderungen bereitgestellt, sodass der Benutzer diese schnell überprüfen oder akzeptieren kann. Mit dem Tool „Zusammenfassen“ können Benutzer Text auswählen und ihn in einem leicht lesbaren Absatz, einer Aufzählungsform für wichtige Punkte, einer Tabelle oder einer Liste zusammenfassen.

In der Mail-App verpassen Sie keine E-Mails mehr. Priority Messages führt oben in Ihrem Posteingang einen neuen Abschnitt ein, in dem Ihre dringendsten E-Mails, wie eine Einladung zum Abendessen am selben Tag oder eine Bordkarte für ein Flugzeug, angezeigt werden.

Über den Posteingang eines Benutzers können Benutzer, anstatt die ersten Zeilen jeder E-Mail anzuzeigen, Zusammenfassungen anzeigen, ohne die Nachricht öffnen zu müssen. Bei langen Threads können Benutzer relevante Details mit nur einem Klick anzeigen. Die Smart Reply-Funktion bietet außerdem Vorschläge für schnelle Antworten und identifiziert Fragen in der E-Mail, um sicherzustellen, dass alle beantwortet werden.

Das tiefe Sprachverständnis erstreckt sich auch auf Benachrichtigungen. Prioritätsbenachrichtigungen werden oben im Benachrichtigungsstapel angezeigt, um die wichtigsten hervorzuheben. Mithilfe von Zusammenfassungen können Benutzer lange oder unübersichtliche Benachrichtigungen schnell durchsehen und wichtige Details direkt auf dem Sperrbildschirm anzeigen, z. B. was in aktiven Gruppenchats passiert.

Die neue Fokusfunktion (Unterbrechungen reduzieren) hilft Benutzern, sich beim Erledigen von Aufgaben zu konzentrieren, indem sie nur Benachrichtigungen hervorhebt, die sofortige Aufmerksamkeit erfordern, wie z. B. Textnachrichten im Zusammenhang mit der Aufnahme von Kindern aus der Kindertagesstätte.

Benutzer können jetzt Audioclips in Notizen- und Telefon-Apps aufzeichnen, transkribieren und zusammenfassen. Wenn Sie mit der Aufzeichnung eines Anrufs beginnenDie Teilnehmer werden automatisch benachrichtigt, und wenn die Veranstaltung beendet ist, erstellt Apple Intelligence eine Zusammenfassung, um sich an die wichtigsten Punkte zu erinnern.

Zum Schluss können Sie Anrufe auf dem iPhone aufzeichnen

Image Playground-Funktion

Apple Intelligence unterstützt aufregende Bilderstellungsfunktionen, die Benutzern helfen, auf neue Weise zu kommunizieren und sich auszudrücken. Mit Image Playground können Benutzer in Sekundenschnelle unterhaltsame Bilder erstellen und dabei aus drei Stilen wählen: Animation, Illustration oder Skizze.

Die Image Playground-Funktion ist sehr einfach zu verwenden, da sie in Anwendungen einschließlich Messaging integriert ist, auch in einer speziellen Anwendung verfügbar ist und sich ideal zum Testen verschiedener Konzepte und Stile eignet. Alle Bilder werden auf dem Gerät erstellt, sodass Benutzer diese Funktion mit beliebig vielen Bildern testen können.

Mit Image Playground können Benutzer aus einer Reihe von Konzepten aus verschiedenen Kategorien wie Themen, Outfits, Accessoires und Orten auswählen, eine Beschreibung schreiben, um das Bild zu definieren, eine Person aus ihrer eigenen Bildbibliothek auswählen, die in das Bild aufgenommen werden soll, und ihre Person auswählen Lieblingsstil.

Das Image Playground-Erlebnis in Nachrichten gibt Benutzern die Möglichkeit, schnell lustige Fotos für ihre Freunde zu erstellen und sogar vorgeschlagene Charakterkonzepte anzuzeigen, die für ihre Gespräche relevant sind. Wenn ein Benutzer beispielsweise einer Gruppe eine Nachricht über das Wandern sendet, werden ihm Konzeptvorschläge zu Freunden, Ziel und Aktivität angezeigt, wodurch die Bilderstellung schneller und relevanter wird.

Notizenbenutzer können über das neue Image Wand-Widget in der Apple Pencil-Werkzeugpalette auf die Image Playground-Funktion zugreifen und so Notizen optisch ansprechender gestalten. Prioritätsdiagramme können auch in farbenfrohe Bilder umgewandelt werden, und Benutzer können einen leeren Bereich auswählen, um mithilfe des Kontexts aus der Umgebung ein Bild zu erstellen. Image Playground ist auch in Apps wie Keynote, Free Space und Pages sowie in Apps von Drittanbietern verfügbar, die die neue Image Playground API unterstützen.

Genmoji-Codes erstellen

Emoji wird ein völlig neues Upgrade erhalten, da Benutzer originelle Genmojis erstellen können, um sich auszudrücken. Durch einfaches Schreiben einer Beschreibung, die das Genmoji zusammen mit zusätzlichen Optionen zeigt, können Benutzer mithilfe ihrer Fotos auch Genmojis für ihre Freunde und Familie erstellen. Genmoji-Codes können genau wie Emoji-Codes zu Nachrichten hinzugefügt oder als Aufkleber oder interaktiver Antwortcode geteilt werden.

Neue Funktionen in Bildern

Die Suche nach Fotos und Videos ist mit Apple Intelligence jetzt noch einfacher, sodass natürliche Sprache verwendet werden kann, um nach bestimmten Fotos zu suchen, wie zum Beispiel „Maya läuft in einem Batik-Shirt Schlittschuh“ oder „Katy mit Aufklebern im Gesicht“. Auch die Suche in Videos ist leistungsfähiger geworden und bietet die Möglichkeit, bestimmte Momente in Clips zu finden, sodass Benutzer direkt zu der betreffenden Stelle gelangen können. Darüber hinaus kann das neue Clean-Up-Tool störende Elemente im Hintergrund eines Bildes identifizieren und entfernen, ohne das Element im Bild versehentlich zu ersetzen.

Mit Memories können Benutzer die Geschichte erstellen, die sie sehen möchten, indem sie einfach eine Beschreibung schreiben. Durch das Verstehen der Sprache und des Bildes kann Apple Intelligence die besten Fotos und Videos basierend auf der Beschreibung auswählen und eine Geschichte erstellen, die aus thematischen Kapiteln besteht Er lässt sich von den Bildern inspirieren und präsentiert daraus einen Film mit eigener Erzählkurve. Wie bei allen Apple Intelligence-Funktionen bleiben Fotos und Videos auf dem Gerät privat und werden weder mit Apple noch mit anderen geteilt.

Siri tritt in eine neue Ära ein

Mit umfassenderen Sprachverständnisfunktionen wird Siri natürlicher und bietet personalisiertere und kontextbezogenere Vorschläge sowie die Möglichkeit, alltägliche Aufgaben zu vereinfachen und zu beschleunigen. Es kann reagieren, wenn ein Sprecher stottert, und den Kontext von einer Anfrage zur nächsten beibehalten nächste. Darüber hinaus können Benutzer Siri schreiben und bei der Kommunikation mit ihm zwischen Text und Sprache wechseln, je nachdem, was sie gerade bevorzugen. In diesem Zusammenhang verfügt Siri über ein völlig neues Design mit einem elegant leuchtenden Licht, das sich um den Bildschirmrand legt, wenn Siri aktiv ist.

Siri kann Benutzern jetzt umfassende Geräteunterstützung bieten und Tausende von Fragen zur Erledigung von Aufgaben beantworten. Benutzer können alles lernen, von der Planung von E-Mails in der Mail-App bis hin zum Wechsel vom hellen Modus in den dunklen Modus.

Mit der Kenntnis darüber, was auf den Bildschirmen der Geräte passiert, wird Siri im Laufe der Zeit in der Lage sein, die Inhalte der Benutzer in mehr Apps zu verstehen und entsprechende Maßnahmen zu ergreifen. Wenn beispielsweise ein Freund seine neue Adresse in der Nachrichten-App sendet, kann der Empfänger sagen: „Fügen Sie diese Adresse zu Ihrer Kontaktkarte hinzu.“

Dank Apple Intelligence kann Siri Hunderte neuer Aktionen auf und über Apple-Geräte und Apps von Drittanbietern ausführen. Ein Benutzer kann beispielsweise sagen: „Nehmen Sie diesen Artikel über Zikaden von Ihrer Leseliste“ oder „. Senden Sie Malia Fotos von einem Grillfest.“ und Siri wird diese Aktion durchführen.

Siri wird in der Lage sein, auf den Benutzer und die Informationen auf seinem Gerät zugeschnittene Informationen bereitzustellen. Ein Benutzer kann beispielsweise sagen: „Spielen Sie den Podcast ab, den Jimmy empfohlen hat“, und Siri erkennt und spielt Episoden ab, ohne dass der Benutzer sich daran erinnern muss die Empfehlung wurde in einer SMS oder E-Mail erwähnt. Oder zu fragen: „Wann kommt das Flugzeug meiner Mutter?“ Siri findet die Flugdaten und nutzt diese, um den Flug in Echtzeit zu verfolgen und die Ankunftszeit zu beantworten.

Ein neuer Standard für den Datenschutz in der künstlichen Intelligenz

Apple Intelligence ist auf ein tiefes Verständnis des persönlichen Kontexts bei gleichzeitiger Wahrung der Privatsphäre angewiesen, um einen großen Nutzen zu erzielen. Die Verarbeitung auf dem Gerät ist die Grundlage von Apple Intelligence, und viele Modelle, die sie unterstützen, laufen vollständig auf dem Gerät. Um komplexere betriebliche Anforderungen zu erfüllen, die mehr Rechenleistung erfordern, erweitert Private Cloud Compute den Datenschutz und die Sicherheit von Apple-Geräten in die Cloud, um noch mehr Intelligenz bereitzustellen.

Private Cloud Compute ermöglicht es Apple Intelligence, seine Rechenleistung bereitzustellen und zu erweitern und größere serverbasierte Modelle für komplexere Anfragen zu nutzen. Diese Modelle laufen auf Servern, die mit Apple-Silizium betrieben werden, sodass Daten im Zusammenhang mit der Aufgabe des Benutzers nur auf den Servern von Apple verarbeitet und nicht gespeichert oder Apple zugänglich gemacht werden.

Integration von ChatGPT in Apple-Plattformen

Apple integriert ChatGPT in iOS 18-, iPadOS 18- und macOS Sequoia-Erlebnisse und bietet Benutzern Zugriff auf sein Fachwissen sowie seine Bild- und Dokumentverständnisfunktionen, ohne durch mehrere Tools navigieren zu müssen.

Siri kann auch die Expertise von ChatGPT nutzen, wenn es nützlich ist. Bevor eine Frage an ChatGPT gesendet wird, werden Benutzer zusammen mit allen Dokumenten oder Fotos benachrichtigt und Siri wird dann direkt die Antwort bereitstellen.

Darüber hinaus wird ChatGPT systemweit in den Schreibtools von Apple verfügbar sein und Benutzern dabei helfen, Inhalte für alles zu erstellen, worüber sie schreiben. Das Erstellungstool ermöglicht Benutzern auch den Zugriff auf die Bildtools von ChatGPT, um Bilder in einer Vielzahl von Genres zu erstellen, die das ergänzen, worüber sie schreiben.

Es gibt einen integrierten Datenschutz für Benutzer, die auf ChatGPT zugreifen, da ihre IP-Adressen maskiert sind und OpenAI keine Anfragen speichert. Die Datennutzungsrichtlinien von ChatGPT gelten für Benutzer, die sich für die Verknüpfung ihrer Konten entscheiden.

ChatGPT wird später in diesem Jahr mit Unterstützung von GPT-18o für iOS 18, iPadOS 4 und macOS Sequoia verfügbar sein. Benutzer können kostenlos auf den Dienst zugreifen, ohne ein Konto erstellen zu müssen, und ChatGPT-Abonnenten können ihre Konten verknüpfen und direkt auf kostenpflichtige Funktionen zugreifen aus diesen Erfahrungen.

Verfügbarkeit

Apple Intelligence ist für Benutzer kostenlos und wird diesen Herbst als Beta-Version als Teil von iOS 18, iPadOS 18 und macOS Sequoia auf Englisch (USA) verfügbar sein. Weitere Funktionen, Softwareplattformen und Sprachen werden im Laufe des nächsten Jahres verfügbar sein. Das Apple Intelligence-System wird auf iPhone 15 Pro, iPhone 15 Pro Max, iPad und Mac-Geräten verfügbar sein, die mit dem M1-Chip und höher ausgestattet sind, wobei Siri und die erforderliche Gerätesprache auf Englisch (USA) eingestellt sein müssen.