Bilderkennung mit KI: Tipps und Beispiele für Microsoft Copilot

Wofür kannst Du die Bilderkennung per KI einsetzen? Microsoft Copilot kann den Inhalt beliebiger Bilder erkennen, hochgeladene Fotos beschreiben, abgebildete Motive analysieren und passende Infos ergänzen.

In dieser Anleitung zeige ich Dir, wie Du die Bilderkennung per Copilot startest und für welche Zwecke diese KI-Funktion nützlich ist.

Aktuell benötigst Du ein persönliches Microsoft-Konto, um die Künstliche Intelligenz für die Bilderkennung nutzen zu können. Du kannst den KI-Assistenten Copilot dann auf drei verschiedenen Wegen aufrufen:

Die Option zum Hochladen von Bildern findest Du bislang nicht in Microsoft 365 Copilot, also wenn Du Dich mit einem schulischen oder geschäftlichen Benutzerkonto anmeldest.

Bild hochladen und Copilot dazu befragen

Auf allen Plattformen erscheint unten das übliche Eingabefeld für Deine Fragen an den Chatbot. Klicke bzw. tippe dort auf das Pluszeichen links daneben und wähle dann den Eintrag Bild hochladen aus.

Bild hinzufügen im Eingabefeld von Microsoft Copilot
Bild hinzufügen im Eingabefeld von Microsoft Copilot

Füge noch einen passenden Prompt hinzu, also eine textliche Anweisung an die KI. Bitte Microsoft Copilot zum Beispiel darum, das hochgeladene Foto zu beschreiben oder anderweitig zu analysieren.

Erfahrungsgemäß braucht die KI dann ein paar Sekunden oder länger, um das hochgeladene Bild zu verarbeiten und Deine Anfrage zu beantworten. Die generierte Antwort baut sich unter dem Bild im Chatverlauf auf. Wie üblich kannst Du bei Bedarf auch noch Nachfragen stellen.

Bildbeschreibung im KI-Chat von Microsoft Copilot
Bildbeschreibung im KI-Chat von Microsoft Copilot

Ich finde die Bildererkennung immer wieder beeindruckend. Die KI beschreibt selbst Details auf Deinem Foto ziemlich genau. Der Erfolg hängt aber natürlich auch von der Bildqualität sowie dem Schwierigkeitsgrad Deines Arbeitsauftrags per Prompt ab.

Vorab solltest Du noch wissen, dass sich Microsoft Copilot in der Regel weigert, Menschen auf hochgeladenen Bildern zu erkennen. Die KI reagiert zum Beispiel mit einem Hinweis wie diesem: „Das Gesicht der Person ist unscharf, um ihre Privatsphäre zu schützen.“

Darüber hinaus probierst Du am besten mal online aus, welche Befehle die KI bei der Bilderkennung gut versteht und sinnvoll umsetzt. Manchmal musst Du einen Prompt im Chat kreativ umformulieren, damit Copilot Deine Aufgabe besser erfüllt.


Wo ist das? – Orte auf Fotos erkennen

Manchmal ist unklar, wo ein Foto aufgenommen wurde. Vielleicht kannst Du eine Sehenswürdigkeit, ein Bauwerk, einen Platz oder eine Straße nicht sofort zuordnen. Je nach Motiv kann Dir die KI eventuell dabei helfen, den gezeigten Ort zu bestimmen.

Ort auf einem Foto erkennen
Ort auf einem Foto erkennen

Bei dieser und weiteren Aufgaben profitiert Microsoft Copilot davon, auf Online-Inhalte zugreifen zu können. Die KI wird im Hintergrund von der Suchmaschine Bing unterstützt. Deshalb kann sie nicht nur Orte auf Bildern erkennen, sondern auch direkt weitere Infos dazu ausspucken.

Was ist das? – Gegenstände erkennen

Ungewöhnliche Werkzeuge, elektronische Bauteile, merkwürdige Küchenhelfer: Manchmal stößt man auf Gegenstände, die man nicht kennt und nicht sofort einordnen kann. Bestimmt hast Du Dich auch schon mal gefragt, wofür sich übrig gebliebenes Technik-Zubehör oder bestimmte Kabel in Deiner Schublade denn eigentlich nochmal eignen.

Das ist eine typische Aufgabe für die Bilderkennung per KI. Fotografiere den Gegenstand mit Deinem Gerät und lade das Bild im Chat-Fenster hoch. Die Chance ist hoch, dass Microsoft Copilot das Motiv auf dem Foto erkennen und definieren kann.

Gegenstand erkennen mit KI
Gegenstand erkennen mit KI

Der KI-Assistent schlägt Dir sogar meist noch Nachfragen zum erkannten Gegenstand vor. Lasse Dir den Einsatzzweck genauer erklären. Dazu ergänzt der Copilot seine Antworten manchmal noch um hilfreiche Links zu passenden Online-Artikeln.


Pflanzen und Tiere bestimmen mit KI

Als typisches Stadtkind kenne ich mich in der Natur kaum aus. Weder Bäume noch Blumen noch Pilze noch Insekten kann ich zweifelsfrei benennen.

Auch deshalb bin ich sehr dankbar für die Bilderkennung per KI. Mithilfe von Microsoft Copilot lassen sich Tiere und Pflanzen nämlich schnell bestimmen. Lade Dein Foto dafür wieder im Chat hoch und stelle Deine Frage dazu.

Pflanze bestimmen mithilfe von Microsoft Copilot
Pflanze bestimmen mithilfe von Microsoft Copilot

Die Antworten sind meist ein guter Ausgangspunkt für die weitere Recherche. Verlasse Dich aber bloß nicht auf die Bilderkennung, wenn es ums Bestimmen giftiger Pflanzen oder gefährlicher Tiere geht. Copilot kann sich nämlich irren und dann falsche Ergebnisse ausspucken. Beim Definieren von Pilzen und Beeren sowie Spinnen und Schlangen würde ich jedenfalls keiner KI-Antwort blind vertrauen.

Erkennt die KI berühmte Gemälde und Kunstwerke?

„Ist das Kunst oder kann das weg?“ – Wenn es um solche Meinungen geht, äußern sich KI-Tools meist zurückhaltend und ausgewogen. Auf Wunsch kann Dir Microsoft Copilot aber Informationen zu einem berühmten Gemälde oder einem sonstigen Kunstwerk ausspucken.

Stelle der KI dafür ein Bild aus dem Internet oder eine Aufnahme aus einem Museum zur Verfügung. Die Bilderkennung gleicht Dein Foto dann mit online verfügbaren Abbildungen ab.

Kann Microsoft Copilot berühmte Gemälde erkennen?
Kann Microsoft Copilot berühmte Gemälde erkennen?

Eine Bildbeschreibung liefert der Chatbot in seiner Antwort meist schon mit. Wie oben beschrieben: Du kannst natürlich noch Nachfragen zu erkannten Gemälden stellen oder mehr über die Künstler*innen erfahren.


Diagramme und Schaubilder analysieren mit KI

Die Bilderkennung beschreibt nicht nur Fotomotive, sondern auch Grafiken mit Daten und Text. So kann Dir Microsoft Copilot dabei helfen, Diagramme und Schaubilder zu analysieren.

Bei meinen Tests hat die KI zum Beispiel problemlos zwischen Kreisdiagrammen und Balkendiagrammen unterschieden. Die Bilderkennung kann sogar Farben benennen und Beschriftungen auslesen.

Diagramm beschreiben lassen von Microsoft Copilot
Diagramm beschreiben lassen von Microsoft Copilot

Auch diese Möglichkeit finde ich oft beeindruckend und hilfreich. Du solltest aber unbedingt prüfen, ob die KI das erkannte Diagramm oder Schaubild wirklich korrekt beschreibt und dargestellte Zusammenhänge sinnvoll auswertet. Beim Interpretieren von Statistiken, Flussdiagrammen und Karikaturen ist die Qualität der Ergebnisse sehr unterschiedlich.

Im schlimmsten Fall zieht die automatische Bilderkennung unlogische Schlüsse und antwortet mit unglücklichen Falschaussagen, die Du niemals unkritisch übernehmen solltest.

Hausaufgaben von KI lösen lassen

Dass Künstliche Intelligenz auch Schule und Unterricht verändert, haben die meisten Lehrkräfte mittlerweile verstanden. Neben der Unterrichtsvorbereitung mit KI geht es in Diskussionen oft noch darum, wie Schüler*innen die neuen Möglichkeiten wohl nutzen: Eher als intelligente Lernhilfe – oder doch nur zum Betrügen bei Hausaufgaben?

Wie schnell die KI bestimmte Aufgaben lösen kann, zeigt dieses Beispiel. Die folgende Fragestellung aus dem Mathematik-Unterricht habe ich Microsoft Copilot als Screenshot zur Verfügung gestellt.

Hausaufgabe lösen lassen von der KI
Hausaufgabe lösen lassen von der KI

Die Textaufgabe auf dem Bild wurde korrekt erkannt und dann in wenigen Sekunden vorbildlich gelöst. Die KI erklärt sogar den Lösungsweg zur obigen Hausaufgabe.

Schüler*innen können also ihre Arbeitsblätter abfotografieren und den Chatbot per Bilderkennung um alle Antworten bitten. Das sollten Lehrer*innen zumindest wissen und ggf. über die Art ihrer Aufgabenstellungen nachdenken.

Verhindern lässt sich der Siegeszug der intelligenten Online-Tools wohl kaum noch – auch nicht in der Schule. Als Medientrainer kann ich deshalb nur empfehlen, die Risiken und Chancen der KI zu kennen.


Stilberatung per KI: Kleidung, Einrichtung und mehr

Mit einem nicht ganz ernst gemeinten Beispiel wollte ich diese Liste beenden: Eignet sich die KI für eine persönliche Stilberatung? Liefert Microsoft Copilot auch brauchbare Inspirationen, wenn es um meinen Kleidungsstil oder meine Wohnungseinrichtung geht?

Beim Ausprobieren war ich dann doch überrascht, wie hilfreich so manche Antwort klang. Ich habe verschiedene Fotos von mir und meiner Wohnung hochgeladen. Die Bilderkennung sollte die Aufnahmen zunächst beschreiben. Zusätzlich habe ich um verschiedene Styling-Tipps gebeten.

Stilberatung mit der KI von Microsoft Copilot
Stilberatung mit der KI von Microsoft Copilot

Die ersten Antworten der KI fielen recht oberflächlich aus. Die Kunst besteht dann halt auch wieder darin, kluge Nachfragen zu stellen – möglichst so formuliert, dass Microsoft Copilot um konkrete Tipps nicht mehr herumkommt. Du wirst schnell ein Gefühl dafür bekommen, wo die Technologie bei ihrer digitalen Stilberatung an Grenzen stößt.

Jetzt bin ich gespannt auf Deine Ideen und Vorschläge: Für welche Aufgaben nutzt Du die KI-gestützte Bilderkennung? Wie formulierst Du Deine Prompts, um Microsoft Copilot brauchbare Antworten zu Deinen Fotos zu entlocken? Schreibe Deine Tipps und Erfahrungen gerne als Kommentar unter diesen Beitrag!

Ich bin Stefan Malter, freiberuflicher Autor und Medientrainer aus Dortmund. Hier auf Malter365.de findest Du meine besten Tipps und Anleitungen für Microsoft 365 sowie Infos zu meinen beliebten Büchern, Videokursen und Fortbildungen.

Stefan Malter | Autor | Medientrainer | Moderator

2 Gedanken zu „Bilderkennung mit KI: Tipps und Beispiele für Microsoft Copilot“

  1. Klasse! Tolle Ideen. Ich verwende die KI auch bevorzugt und habe in der Vergangenheit auch Bilder hochgeladen. Besonders interessant war die künstlerische Auseinandersetzung mit Händen. Ich habe über Zeichnung von Dürrer mit der KI diskutiert und über „Support“.

    Anlässlich der Biennale in Venedig installierte Lorenzo Quinn die Skulptur „Support“. Es handelt sich um zwei riesige weiße Hände, die aus dem Canal Grande ragen und die Fassade des Ca’ Sagredo Hotels zu stützen scheinen.

    Ich wusste zum Beispiel nicht, dass er der Sohn von dem Schauspieler Anthony Quinn ist. Die Interpretationen und die Dialoge mit der KI sind eine wirkliche Bereicherung für mich. Auch lasse ich mir gerne Gedichte oder ähnliche Bilder erstellen.

    Viele Grüße

    Ralf

    Antworten

Schreibe einen Kommentar

Copilot Studio: Eigenen Chatbot mit KI erstellen [Update]

Copilot Studio: Anleitung für eigenen Chatbot...

Erstelle Deinen eigenen Chatbot mit KI - gefüttert mit individuellen Infos und Daten! So einfach klappt's mit Copilot ...
ChatGPT vs. Copilot: Vergleich der beiden KI-Tools

ChatGPT vs. Copilot: Vergleich der beiden KI-...

ChatGPT und Copilot sind wohl die bekanntesten KI-Tools. Welche Unterschiede zwischen den beiden Chatbots solltest Du kennen? ...
OneNote: Notizbuch teilen

Teilen in OneNote: Notizbuch für andere Person...

Wie kann man ein Notizbuch teilen und Inhalte online freigeben? So klappt die Zusammenarbeit mit Microsoft OneNote ...