Archiv der Kategorie: ARTigo

Wird Computervision Tagging-Anwendungen wie ARTigo überflüssig machen?

Eine besonders schnelle und damit effiziente Verschlagwortung von Bildern verspricht die automatisierte Bilderkennung – Computer Vision – mit dem Ziel, Bilder aufgrund ihrer Pixel inhaltlich zu erkennen. Objekte oder sogar Szenen sollen dabei semantisch erkannt werden. Durch diese Form der Bilderkennung können eines Tages große Mengen von Bildern in sehr kurzer Zeit erschlossen werden, schneller, als es Expertensystemen und Folksonomies möglich ist.

An der Ruprechts-Karls-Universität Heidelberg wird unter der Leitung von Prof. Björn Ommer Software entwickelt, die Maschinen befähigen soll, sowohl zu lernen als auch zu „sehen“. Das funktioniert derzeit für den Bereich der mittelalterlichen Buchmalereien gut, weil die einzelnen Bildobjekte Konturen und typische Stile aufweisen, die der Computer mittels eines Algorithmus lernen kann zu erkennen und zu unterscheiden.[1] Noch ist diese Art der Suche allerdings auf Objekte beschränkt, die von einer Kontur umgeben sind. Für die Forschung ist diese Arbeit bereits jetzt interessant, weil damit umfangreiche mittelalterliche Codices nach spezifischen Objekten wie Kronen oder Gesten automatisiert durchsuchbar geworden sind.

Wenn der Computer eines Tages Bildobjekte erkennt, kann er sie deshalb noch nicht bewerten und deuten. Er kennt keine Hierarchie, für ihn sind die Objekte und damit ihre Bezeichnungen gleichrangig. Die Aufgabe einer Differenzierung können jedoch Tags übernehmen: Es ist vorstellbar, dass sie durch Computer Vision nicht etwa überflüssig werden, sondern gerade durch ihr Mehrfachvorkommen Bilddaten mit einer Gewichtung anreichern können.

Als Beispiel soll das folgende Bild dienen. Es stammt aus der ARTigo-Datenbank und enthält gleiche Begriffe, die mehfach eingegeben wurden.

Vincent van Gogh, Vincents Schlafzimmer in Arles, 1889, Chicago (Illinois), The Art Institute of Chicago. Bildquelle: artigo.org

Diese Mehrfacheingaben sind nicht nur das Resultat der Wahrnehmung der Nutzer, sondern auch das Ergebnis ihrer Bewertung. Was sehen und erkennen sie im Bild? Was können sie benennen und taggen? Jeder Nutzer sieht das Bild mit anderen Augen an. Jedem fallen durchaus andere Bildobjekte ins Auge, die er taggt. Die Anzahl der vergebenen Tags veranschaulicht die folgende Tabelle: Weiterlesen

Wann ARTigo-Spieler „bunt“ taggen

Die folgende Grafik zeigt, wie „bunt“ die Bilder der untersuchten Künstler (siehe Beschriftung) wahrgenommen wurden. Bei dem von den ARTigo-Spielern eingegebenen Tag „bunt“ handelt es sich nicht um eine explizite Farbbezeichnung, sondern um den Gesamteindruck, den das Bild auf den Nutzer macht.

Um die Grafik verstehen zukönnen, muss man um die Wirkung von spannungssteigernden und -reduzierenden Farbwirkungen wissen, die Kreitler und Kreitler in ihrem Buch „Psychologie der Kunst“ (1980) beschrieben. Sie stellten fest, dass Komplementärkontraste oder Kontraste, die beinahe komplementär wirken, sowie zwei einander ähnliche Farbtöne als spannungsreich empfunden wurden. Grautöne oder Töne zwischen zwei spannungsreichen Farben vermittelten hingegen Entspannung.

Dargestellt werden in der Grafik oben neben den Bunt- auch die Gelb-, Rot- und Beige-Braun-Ocker-, sowie die Grau-Tags, die für ausgewählte Künstler von den ARTigo-Spielern eingegeben wurden.  Angegeben ist der prozentuale Anteil der Farb-Tags an der Gesamtmenge der Tags pro Künstler.

Für diese Grafik wurden die Rot- und Gelb-Tags deshalb ausgewählt, weil Gelb oft sehr hell, Rot eine Farbe mit Signalcharakter sein kann. Auf jeden Fall sind es auffällige Farben, die in Bezug auf Buntheit eine Rolle spielen können. Bei Marc, Monet, Signac und Macke sind jeweils mehr Rot- und Gelb-Tags als Braun-Tags vorhanden, was sich offensichtlich auf die erhöhte Wahrnehmung von „bunt“ durch die Spieler auswirkte.

Es ist erkennbar, dass ein hoher Anteil von Tags im Braun-Bereich sowie für Grau den Eindruck einer Buntheit mindert. Weiterlesen

Das wahrgenommene Farbprofil verschiedener Künstler

Die Untersuchung der Farb-Tags zu verschiedenen Künstlern wurde bereits im Blogpost Welche Beachtung schenken ARTigo-Spieler der Farbe im Bild? dargestellt. Diese Information lässt sich auch in einem Netzdiagramm darstellen, so dass man quasi eine Art „Palette“ erhält. Sie zeigt die Unterschiede in der Verteilung der wahrgenommenen Farbverwendung bei den untersuchten Künstlern.

Deutlich sieht man die Schwerpunkte, die die Tags bei den Bildern eines jeden Künstlers bilden. Die Formen der folgenden vier Grafiken, die sich für Giovanni Giacometti, van Gogh, Macke und Marc ergeben, haben gewisse Ähnlichkeit miteinander. Zwischen ihnen ergeben sich darüber hinaus Verbindungen: Weiterlesen

Welche Beachtung schenken ARTigo-Spielern der Farbe im Bild?

Eigentlich habe ich ja mein Blog abgeschlossen. Andererseits denke ich, dass zu einem „richtigen“ Abschluss auch ein paar Untersuchungsergebnisse gehören. Ich werde in den kommenden Wochen in loser Folge einige Auswertungen, die ich für meine Dissertation vorgenommen habe, auf das Blog stellen.

Die Wortarten in ARTigo

Die Wortarten in ARTigo verteilen sich hauptsächlich auf Substantive, die einen Anteil von 83,3 % aller vergebenen Tags ausmachen, Adjektive mit 12,4 % und Verben mit 3,5 %. Die meisten Adjektive bezeichnen Farben. Es gibt noch weitere Wortarten, aber deren Anteil ist zu gering, um Erwähnung zu finden. [1]

Weil die Farb-Tags in der Regel mehrfach zu einem Bild vorhanden sind, stellte sich mir die Frage, ob ich aus z.B. 20 Rot-Tags, 10 Gelb-Tags und 35 Blau-Tags eine Information herauslesen kann und wenn ja, welche. Ansonsten könnte man sich die Mehrfachspeicherung von gleichen Tags ja sparen, denn auch Speicherplatz kostet Geld.

Die Farb-Tags der Künstler

Die Farb-Tags zu Bildern folgender Künstler werden in dieser Berechnung genauer untersucht: Lovis Corinth, Paul Cézanne, Jaques-Louis David, Maurice Quentin de La Tour, Giovanni Giacometti, Vincent van Gogh, Jean-Auguste-Dominique Ingres, August Macke, Edouard Manet, Franz Marc, Adolph Menzel, Claude Monet, Paul Signac, Alfred Sisley, Georges Seurat und Henri de Toulouse-Lautrec. Exemplarisch werden nur einige von ihnen in den folgenden Abschnitten genauer dargestellt.

Ich möchte ermitteln, ob und welche Unterschiedlichkeiten aufgrund der Farb-Tags zwischen Künstlern bestehen.

In diesem Blog-Post wird ein erster Ausschnitt aus dieser Analyse gezeigt. Die Häufigkeit der Tags wird zunächst mit Balkendiagrammen dargestellt. Auf der y-Achse ist jeweils der prozentuale Anteil der Farb-Tags in Bezug auf die Gesamtzahl der Tags eines Künstlers aufgetragen.

In der Dissertation erkläre ich die Vorgehensweise, wie die Vorbereitung der Daten, Normalisierung etc. Wenn Sie dazu mehr wissen möchten, können Sie es dort nachlesen.[2]

Die Farb-Tags der Bilder Paul Signacs

Bei Signac wurden vorwiegend die Farben Blau (16,8 %), Gelb (12,4 %) und Rot (11,8 %) getaggt. Auch „weiß“ wurde mit einem Anteil von 10,6 % recht oft eingegeben. Die Bilder des Malers wurden von den ARTigo-Spielern mit einem Anteil von 8,8 % mit dem Tag „bunt“ versehen. Der Anteil der Tags im Braun-Bereich ist relativ hoch, jedoch scheint die Farbe sich nicht mindernd auf den Eindruck von „Bunt“ auszuwirken, wie das bei den weiteren untersuchten Künstlern der Fall ist. Es ist zu vermuten, dass dies zum einen an der pointillistischen Malweise liegt, zum anderen an den Komplementärkontrasten, für die Farben Gelb/Orange zu Blau und in etwas geringerem Maße Rot zu Grün.

Anteil der Farb-Tags in Werken von Paul Signac

Die Farb-Tags der Bilder August Mackes

Weiterlesen

Welches Wissen steckt in scheinbar nutzlosen Tags?

bildGupta et al. zeigen in “An Overview of Social Tagging and Applications” die Schwierigkeiten von Tags in spielebasierten Tagging-Anwendungen auf. Im Prinzip kann ich dem erstmal zustimmen:

“People tend to write very general properties of an image rather than telling about the specifics or details of the image. E.g., colors are great for matching, but often are not the most critical or valuable aspects of the image. The labels chosen by people trying to maximize their matches with an anonymous partner are not necessarily the most “robust and descriptive“ labels. They are the easiest labels, the most superficial labels, the labels that maximize the speed of a match rather than the quality of the descriptor. In addition, they are words that are devoid of context or depth of knowledge.” [1]

Aber sind die „superficial labels“ wirklich so oberflächlich, wie Gupta et al. beschreiben? Weiterlesen

Was ist schön? Eine Antwort von den ARTigo-Spielern

schönDie Frage „Was ist schön?“ ist alt und wurde vielfach diskutiert. Nicht nur Kunsthistoriker, auch Psychologen, Evolutionsbiologen und Philosophen trugen und tragen dazu bei, eine Antwort zu finden. Obwohl von vielen Disziplinen aus betrachtet – gibt es keine klare Antwort. Dafür viele Argumente aus zahlreichen Perspektiven.

Eine Perspektive kommt nun hinzu: die Tags der ARTigo-Spieler. Somit handelt es sich hier nicht um eine einzelne oder gar meine persönliche Meinung, sondern um ein crowdgescourctes Geschmacksurteil.

Ich habe spezifische Datensätze selektiert, Weiterlesen

ARTigo: Der Blick der Tagger auf die Bilder von gestern oder gab es 1897 bereits Laptops?

Schaut man sich die Tags der ARTigo-Bilder an, stößt man zwangsläufig auf „falsche“ Tags. Tags also, die den Inhalt des Bildes nicht korrekt benennen. Das aber macht sie interessant, denn es zeigt, wie prägnant bestimmte Aussagen sind, wie z.B. Gesten, die Form oder allgemein das Aussehen von Objekten. Diese Bildaussagen gehören stets in einen bestimmten Kontext. Werden sie aber mit einem anderen Kontext verbunden, wirken sie manchmal komisch und zeigen uns damit um so deutlicher, wie unterschiedlich unsere Sicht von der des zeitgenössischen Betrachters ist und mit welchen anderen Augen wir heute auf die Bilder schauen. Weiterlesen

Farbe vermittelt Spannung. Was sagen die ARTigo-Tags dazu aus?

DaumierGemälde sind statische Gegenstände und als Betrachter können wir sie über einen längeren Zeitraum studieren, den Blick darin schweifen lassen oder Objekte fixieren.

Schauen wir für einen längeren Zeitraum auf einen gleichmäßigen Farbfleck, kann dieser sich in unserer Wahrnehmung verändern und erscheint weniger gesättigt. Vertiefen wir uns in Linienzeichnung, erhält diese bei intensiver Betrachtung neue Aspekte. Ebenfalls tritt dieser Effekt bei der Betrachtung von vielschichtigen Formen auf. Daraus kann man schließen, dass Kunstbetrachtung im Betrachter psychologische und dynamische Prozesse auslöst.

Theorie3

In dem Artikel Das Psychologische in der Kunst: Über Spannung und Entspannung beim Kunsterlebnis habe ich bereits über die Spannung, die Kunstwerke vermitteln, berichtet. Ich möchte wissen, ob eine solche Spannung bei ARTigo-Spielern feststellbar ist. In der obigen Darstellung, die die These von Kreitler & Kreitler verdeutlichen soll, habe ich den für mich relevanten Anteil an Spannung mit einer grünen Ellipse gekennzeichnet. Den Grad dieser Spannung möchte ich ermitteln. Weiterlesen

Das Psychologische in der Kunst: Über Spannung und Entspannung beim Kunsterlebnis

Studienzeichnung Borghesischer Fechter - Friedrich von Gärtner - 1809Zur Analyse der ARTigo-Farbtags ist zunächst die Erläuterung folgender psychologischer Komponenten des Kunsterlebnisses nötig:

  • Theorien zum Kunsterlebnis
  • Das Modell der Homöostase
  • Die Theorie zum Kunsterlebnis von Kreitler & Kreitler (1972)

Danach werde ich in einem gesonderten Artikel darauf eingehen, wie sich der Aspekt der Spannung auf die ARTigo-Spieler und die von ihnen vergebenen Farbtags auswirkt. Um das richtig einordnen zu können, ist diese kurze Einführung in die Thematik nötig. Weiterlesen

Wie ARTigo-Spieler Farbe taggen: Eine abstrakte Betrachtung der Farbtags

Lovis Corinth - Selbstporträt im Atelier - Bayer. Staatsgemäldesammlung - 191412,5% der Begriffe, die die ARTigo-Spieler taggen, sind Adjektive. Davon sind die meisten Farbtags. In ARTigo haben wir also seeehr viele Farbtags. Da die Tags letztlich der Suche nach Bildern dienen sollen, fragt man sich, was man mit soviel Farbbegriffen machen soll. Zur Verbesserung der Suche scheinen sie zunächst nicht besonders wertvoll.  Aber man muss mit dem leben was man hat und deshalb gehe ich diesen Farbtags auf den Grund. Ein paar Erklärungen zur Grundlage dieser Analysen hatte ich bereits hier gegeben.

Wichtig zu erwähnen ist, dass die Farbtags immer auf den Wahrnehmungen der Spieler basieren. Wenn also die Bilder eines Künstlers besonders viele Rot-Tags haben, heißt das zunächst nur, dass die roten Farbbereiche von den Spielern als solche wahrgenommen und getaggt werden.

Ich habe die Farbtags von verschiedenen Künstlern extrahiert und in den folgenden Grafiken dargestellt. Auf der y-Achse ist der prozentuale Anteil der Farbtags von der Gesamtzahl der Tags eines Künstlers aufgetragen. Den Berechnungen liegen nur farbige Abbildungen der jeweiligen Künstler zugrunde. Durch Klicken können Sie die Grafiken vergrößern. Weiterlesen

Die Farbtags des Kunstgeschichtsspiels ARTigo unter der Lupe

giovanni giacomettiAllgemeines zu Form und Farbe

Ein Gemälde besteht aus Farben und Formen. Zwar haben Formen für uns eine primäre Bedeutung, aber von Seiten der Wahrnehmung ist Form ein sekundäres Merkmal. Farbe schafft Form. Wo unterschiedliche Farbflächen aneinandergrenzen, entsteht eine Kontur, bzw. ergibt sich eine Form [1].

Die Farbtags bei ARTigo

Die Wortarten in ARTigo verteilen sich hauptsächlich auf Substantive, die einen Anteil von 83,3% aller vergebenen Tags ausmachen, Adjektive von 12,5% und Verben von 3,5%. Es gibt noch weitere Wortarten, aber deren Anteil ist zu gering, als Erwähnung zu finden [2].

Bei den Adjektiven bezeichnet der überwiegende Teil Farbe. Das sind also Tags wie z.B. „rot“, „grün“ oder „gelb“. Was sollen die vielen Farbtags? Aus Sicht eines Kunsthistorikers sind sie – da die Tags ja zur Verschlagwortung der Bilder dienen – eher eine Enttäuschung. Was soll man mit 20 Rot-, 35 Blau-, 40 Weiß-, 38 Schwarz-, 15 Braun- und 18 Grün-Tags, die von mehreren Spielern für ein Bild vergeben wurden, denn anfangen? Weiterlesen

Ein Tweetup und was man mit ARTigo-Bildern noch so machen kann

Ich bin von den Kulturkonsorten zu einem Tweetup der Sonderklasse eingeladen worden: „Tweetup in einer Ausstellung, die es nicht gibt“. Also das macht mich doch neugierig! Und für mich ist eins klar: Ich nehme ein Bild, dass man mit ARTigo spielen kann, und zwar dieses: Weiterlesen

Blau, blauer, am blauesten. Welches ist das blaueste Bild?

Heute gehe ich der Frage nach, ob ein besonders häufig mit „blau“ getaggtes Bild blauer ist als eines, das über weniger Blau-Tags verfügt. Dazu habe ich zunächst blaue Bilder aus der ARTigo-Datenbank selektiert.

Beginnen möchte ich aber mit einem kleinen Rätsel: Welches Bild, glauben Sie, haben die ARTigo-Spieler am häufigsten mit dem Tag „blau“ versehen?

Dieses hier? Grossherzog Friedrich I. von Baden, gemalt von Hans Thoma aus dem Jahr 1909?

Grossherzog Friedrich I. von Baden, Hans Thoma

 

 

 

 

 

 

 

Weiterlesen

Schwarz auf Weiß: Die Farb-Tags der ARTigo-Bilder

farbtags_grafik_scherzSchaut man sich die Farb-Tags an, die die Spieler beim ARTigo Spielen eingegeben haben, kann man feststellen, dass Farben besonders häufig getaggt werden. Rot, blau, gelb, grün… welche Farbe wohl besonders häufig getaggt wird? Ich habe deshalb mal einen Blick auf die Farbtags geworfen.

Für die folgende Abbildung habe ich bereits bei den Abfragen auf die Datenbank einige Filter gesetzt. Es wurden nur Bilder berücksichtigt, Weiterlesen

Social Tagging bei ARTigo: Welche Tags stehen in Zusammenhang mit „Klassizismus“, welche mit „Expressionismus“?

Scherz-Expressionismus-ImpressionismusIch bin gerade dabei, die ARTigo-Datenbank auf Epochen hin zu analysieren. In einem ersten Schritt möchte ich feststellen, welche von den Spielern eingegebenen Begriffe, also welche Tags, mit dem Begriff „Klassizismus“ und welche mit dem Begriff „Expressionismus“ korrelieren, d.h. welche Begriffe dazu im Zusammenhang stehen.

Folgende Vorgehensweise ist hierzu nötig: Weiterlesen