Selbstorganisierende Karte

Als Selbstorganisierende Karten, Kohonenkarten oder Kohonennetze (nach Teuvo Kohonen; englisch self-organizing map, SOM bzw. self-organizing feature map, SOFM) bezeichnet man eine Art von künstlichen neuronalen Netzen. Sie sind als unüberwachtes Lernverfahren ein leistungsfähiges Werkzeug des Data-Mining. Ihr Funktionsprinzip beruht auf der biologischen Erkenntnis, dass viele Strukturen im Gehirn eine lineare oder planare Topologie aufweisen. Die Signale des Eingangsraums, z. B. visuelle Reize, sind jedoch multidimensional.

Es stellt sich also die Frage, wie diese multidimensionalen Eindrücke durch planare Strukturen verarbeitet werden. Biologische Untersuchungen zeigen, dass die Eingangssignale so abgebildet werden, dass ähnliche Reize nahe beieinander liegen. Der Phasenraum der angelegten Reize wird also kartiert.

Wird nun ein Signal an diese Karte herangeführt, so werden nur diejenigen Gebiete der Karte erregt, die dem Signal ähnlich sind. Die Neuronenschicht wirkt als topologische Merkmalskarte, wenn die Lage der am stärksten erregten Neuronen in gesetzmäßiger und stetiger Weise mit wichtigen Signalmerkmalen korreliert ist.

Anwendung finden selbstorganisierende Karten zum Beispiel in der Computergrafik (als Quantisierungsalgorithmus zur Farbreduktion von Rastergrafikdaten) und zur Clusteranalyse.

Laterale Umfeldhemmung

Ein allgemeines Arbeitsprinzip des Nervensystems ist, dass aktive lokale Gruppen von Nervenzellen andere Gruppen ihrer Umgebung hemmen, und somit deren Aktivität unterdrücken (siehe laterale Hemmung). Die Aktivität einer Nervenzelle wird daher aus der Überlagerung des erregenden Eingangssignals und den hemmenden Beiträgen aller Schichtneuronen bestimmt. Da diese laterale Hemmung überall gilt, kommt es zu einem ständigen Wettbewerb um die Vorherrschaft. Der Verlauf der lateralen Hemmung ist für kurze Distanzen erregend/verstärkend und für lange Distanzen hemmend/schwächend. Es lässt sich zeigen, dass dieser Effekt ausreichend ist, eine Lokalisierung der Erregungsantwort in der Nähe der maximalen äußeren Erregung zu bewirken.

Struktur und Lernen

Ein Adaptionsschritt: Der Reiz 𝑣 zieht an dem Gewichtsvektor 𝑤 des am besten angepassten Neurons. Dieser Zug wird mit zunehmendem Abstand, gemessen im Competitive Layer vom besten Neuron, zunehmend schwächer. Einfach ausgedrückt, beult sich die Karte in Richtung des Reizes 𝑣 aus.

Eine Eingabeschicht mit 𝑛 Neuronen ist vollständig mit allen Neuronen innerhalb der Kohonenkarte (der sogenannte competitive layer), im Folgenden einfach Karte, verbunden. Jeder zu kartierende Eingangsreiz 𝑣 wird über die Verbindungen an jedes Neuron dieser Karte weitergegeben.

Die Verbindungsgewichte 𝑤 zwischen den Neuronen der Eingabeschicht und den Neuronen in der Karte definieren je einen Punkt im Eingangsraum der angelegten Reize 𝑣. Alle Neuronen innerhalb der Karte sind untereinander inhibitorisch (hemmend) vernetzt.

  1. Die Abbildung zeigt einen Adaptionsschritt im Modell von Kohonen. Ein Reiz 𝑣 wird an das Netz angelegt.
  2. Das Netz sucht das Erregungszentrum 𝑠 in der Karte, dessen Gewichtsvektor 𝑤 am nächsten zu 𝑣 liegt (kleinster Abstand).
  3. Der Unterschied zwischen 𝑤 und 𝑣 wird in einem Adaptionsschritt verringert.
  4. Die Neuronen nahe am Erregungszentrum 𝑠 werden auch adaptiert, aber umso weniger, je weiter sie vom Erregungszentrum entfernt sind.

Es ist gebräuchlich, aber nicht zwingend, sowohl für die Lernvektoren als auch für die Karte den euklidischen Abstand als Abstandsmaß zu verwenden.

Steht ein Satz verschiedener Trainingsdaten zur Verfügung, so ist eine Epoche im Training vollständig, wenn alle Reize genau einmal in zufälliger Reihenfolge an die Eingabeschicht angelegt worden sind. Das Training endet, wenn das Netz seinen stabilen Endzustand erreicht hat.

Das Lernen in einer selbstorganisierten Karte kann formal als iterativer Prozess beschrieben werden. Im Anfangszustand sind die Gewichtsvektoren der Neuronen zufällig im Netz verteilt und in jedem Lernschritt wird an das Netz ein Reiz angelegt. Die selbstorganisierende Karte verändert die Gewichtsvektoren der Neuronen entsprechend der Hebbschen Lernregel, sodass sich im Laufe der Zeit eine topografische Abbildung ergibt.

Training einer SOM im Beispiel

Die folgende Tabelle zeigt ein Netz, dessen Neuronen in einem Gitter angeordnet sind und zu Beginn zufällig im Raum verteilt sind. Es wird mit Eingabereizen aus dem Quadrat trainiert, die gleichverteilt sind.

Zufällig initialisiertes Netz
10 Trainingschritte
100 Trainingsschritte
1.000 Trainingsschritte
10.000 Trainingsschritte
100.000 Trainingsschritte

Formale Beschreibung des Trainings

Gegeben ist eine endliche Menge M von Trainingsstimuli mi, die durch einen n-dimensionalen Vektor xi spezifiziert sind:

Weiterhin sei eine Menge von μN Neuronen gegeben, denen jeweils ein Gewichtsvektor wi in X und eine Position ki auf einer Kohonen-Karte zugeordnet wird, die im Weiteren als zweidimensional angenommen wird. Die Kartendimension kann beliebig-dimensional gewählt werden, wobei Kartendimensionen kleiner-gleich drei zur Visualisierung von hochdimensionalen Zusammenhängen verwendet werden. Die Positionen auf der Karte sollen diskreten, quadratischen Gitterpunkten entsprechen (alternative Nachbarschaftstopologien wie z. B. hexagonale Topologien sind ebenfalls möglich), und jeder Gitterpunkt soll durch genau ein Neuron besetzt sein:

In der Lernphase wird aus der Menge der Stimuli zum Präsentationszeitpunkt t ein Element mjt gleichverteilt zufällig ausgewählt. Dieser Stimulus legt auf der Karte ein Gewinnerneuron nst fest, das als Erregungszentrum bezeichnet wird. Es handelt sich dabei um genau das Neuron, dessen Gewichtsvektor wst den geringsten Abstand im Raum X zu dem Stimulusvektor xjt besitzt, wobei eine Metrik dX(.,.) des Inputraumes gegeben sei:

Nachdem nst ermittelt wurde, werden alle Neuronen nit bestimmt, die neben dem Erregungszentrum ihre Gewichtsvektoren anpassen dürfen. Es handelt sich dabei um die Neuronen, deren Entfernung dA(ks, ki) auf der Karte nicht größer ist als ein zeitabhängiger Schwellenwert, der als Entfernungsreichweite δt bezeichnet wird, wobei eine Metrik dA(.,.) der Karte gegeben sei. Diese Neuronen werden in einer Teilmenge N+tNt zusammengefasst:

Im folgenden Adaptionsschritt wird auf alle Neuronen aus N+t ein Lernschritt angewendet, der die Gewichtsvektoren verändert. Der Lernschritt ist interpretierbar als eine Verschiebung der Gewichtsvektoren in Richtung des Stimulusvektors xjt.

Es wird entsprechend dem Modell von Ritter et al. (1991) dabei die folgende Adaptionsregel verwendet:

mit den zeitabhängigen Parametergleichungen εt und hsit, die festgelegt werden als:

1) Die zeitabhängige Lernrate εt:

mit der Startlernrate εstart und εend als der Lernrate zum Ende des Verfahrens, d. h. nach tmax Stimuluspräsentationen.

2) Die zeitabhängige Entfernungsgewichtungsfunktion hsit:

mit δt als dem Nachbarschafts- oder Adaptionsradius um das Gewinner-Neuron auf der Karte:

mit dem Adaptionsradius δstart zum Anfang des Verfahrens, und δend als dem Adaptionsradius zum Ende des Verfahrens.

Damit eine topologie-erhaltende Abbildung entsteht, d. h., dass benachbarte Punkte im Inputraum X auf benachbarte Punkte auf der Karte abgebildet werden, müssen zwei Faktoren berücksichtigt werden:

  1. Die topologische Nachbarschaft hsit um das Erregungszentrum muss anfangs groß gewählt und im Laufe des Verfahrens verkleinert werden.
  2. Die Adaptionsstärke εt muss ausgehend von einem großen Wert im Laufe des Verfahrens auf einen kleinen Restwert sinken.

In dem dargestellten Lernprozess werden tmax Präsentationen durchgeführt, wonach die SOM in die Anwendungsphase überführt werden kann, in der Stimuli präsentiert werden, die in der Lernmenge nicht vorkamen. Ein solcher Stimulus wird dem Gewinnerneuron zugeordnet, dessen Gewichtsvektor die geringste Distanz von dem Stimulusvektor besitzt, sodass dem Stimulus über den Umweg des Gewichtsvektors ein Neuron und eine Position auf der Neuronenkarte zugeordnet werden kann. Auf diese Weise wird der neue Stimulus automatisch klassifiziert und visualisiert.

Varianten der SOM

Es wurden eine Vielzahl von Varianten und Erweiterungen zu dem ursprünglichen Modell von Kohonen entwickelt, u. a.:

  • Kontext-SOM (K-SOM)
  • Temporäre SOM (T-SOM)
  • Motorische SOM (M-SOM)
  • Neuronen-Gas (NG-SOM)
  • Wachsende Zellstrukturen (GCS-SOM)
  • Wachsende Gitterstruktur (GG-SOM)
  • Wachsende hierarchische SOM (GH-SOM)
  • Wachsendes Neuronen-Gas (GNG-SOM)
  • Parametrische SOM (P-SOM)
  • Hyperbolische SOM (H-SOM)
  • Interpolierende SOM (I-SOM)
  • Local-Weighted-Regression-SOM (LWR-SOM)
  • Selektive-Aufmerksamkeits-SOM (SA-SOM)
  • Gelernte Erwartungen in GNG-SOMs (LE-GNG-SOM)
  • Fuzzy-SOM (F-SOM)
  • Adaptive-Subraum-SOM (AS-SOM)
  • Generative Topographische Karte (GTM)

Literatur

Commons: Selbstorganisierende Karte – Sammlung von Bildern, Videos und Audiodateien
  • DemoGNG.js JavaScript Simulator für SOMs und andere Netzwerkmodelle (Neural Gas, Growing Neural Gas, Growing Grid etc.)
  • ANNetGPGPU: C++ Library mit einer Implementierung für SOMs auf GPUs und CPUs und Python Interface
  • SOM-Research an der Helsinki University of Technology (Teuvo Kohonen)
  • Über SOM in der comp.ai.neural-nets FAQ
  • Java SOMToolbox: Open-Source-Anwendung zum Erstellen, Analysieren und Interagieren mit Selbstorganisierenden Karten, entwickelt an der Technischen Universität Wien.
  • Ultsch Marburg: Datenbionik – Datenvisualisierung und Data-Mining mit Emergenten SOM.
  • MusicMiner: Visualisierung von Musiksammlungen ESOM
  • GNOD, The Global Network of Dreams, ein Kohonen-Netz zur Bestimmung von Ähnlichkeiten von Musik, Film und Buchautoren
  • Demonstrationsbeispiel: HTW Dresden – ein SOM fängt einen Ball
  • Viscovery SOMine: SOM Technologie Tool von Viscovery
  • Neural Networks with Java

Read other articles:

United States historic placeKent County CourthouseU.S. National Register of Historic PlacesU.S. Historic districtContributing property Front of the courthouseShow map of Rhode IslandShow map of the United StatesLocation127 Main St., East Greenwich, Rhode IslandCoordinates41°39′39″N 71°27′2″W / 41.66083°N 71.45056°W / 41.66083; -71.45056Area1 acre (0.40 ha)Built1803ArchitectOliver Wickes, William R. Walker & SonArchitectural styleFederalPart o...

 

Sungai KamparBatang Kampar, Kampar RiverSungai Kampar dekat Muara Takus, suatu kompleks candi Buddha bersejarah dari zaman kerajaan Sriwijaya.[1]Lokasi mulut sungaiTampilkan peta SumatraSungai Kampar (Indonesia)Tampilkan peta IndonesiaLokasiNegaraIndonesiaCiri-ciri fisikHulu sungaiBukit Barisan - lokasiPasaman, Lima Puluh Kota & Sijunjung, Sumatera Barat Muara sungaiSelat Malaka - lokasiKuala Kampar, Pelalawan, RiauPanjang4.135 km (2.569 mi)Luas DASDA...

 

Atticus FinchGregory Peck sebagai Atticus Finch, dalam adaptasi film 1962PenampilanperdanaTo Kill a MockingbirdPenampilanterakhirGo Set a WatchmanPenciptaHarper LeePemeranGregory PeckInformasiJenis kelaminLaki-lakiPekerjaanPengacaraKeluargaJeremy Finch (ayah)John Hale Jack Finch (saudara)Alexandra Finch Hancock (saudari)Caroline Finch (saudari)PasanganJean Graham Finch (almarhum)AnakJeremy Atticus Jem FinchJean Louise Scout FinchKerabatEdgar (sepupu)Joshua (sepupu)Francis Hancock (keponakan)K...

Ne doit pas être confondu avec la Perfusion tissulaire, un processus physiologique. Cet article est une ébauche concernant la médecine. Vous pouvez partager vos connaissances en l’améliorant (comment ?) selon les recommandations des projets correspondants. Pochette de perfusion Baxter Perfusion intraveineuse dans le bras. Perfusion à la main. La perfusion intraveineuse, parfois nommée par son principe, infusion, ou dans une acception plus courante perfusion, est une technique pe...

 

artikel ini perlu dirapikan agar memenuhi standar Wikipedia. Tidak ada alasan yang diberikan. Silakan kembangkan artikel ini semampu Anda. Merapikan artikel dapat dilakukan dengan wikifikasi atau membagi artikel ke paragraf-paragraf. Jika sudah dirapikan, silakan hapus templat ini. (Pelajari cara dan kapan saatnya untuk menghapus pesan templat ini) Berikut adalah daftar wilayah urban menurut Produk Domestik Bruto (PDB) tahun 2005 dan 2020, mengukur kekuatan ekonomi suatu wilayah urban (kekaya...

 

1997 American filmSwitchbackTheatrical release posterDirected byJeb StuartWritten byJeb StuartProduced byGale Anne HurdStarring Dennis Quaid Danny Glover Jared Leto Ted Levine R. Lee Ermey CinematographyOliver WoodEdited byConrad BuffMusic byBasil PoledourisProductioncompanyPacific Western Production[1]Distributed by Paramount Pictures[1] Rysher Entertainment[1] Release date October 31, 1997 (1997-10-31) Running time118 minutes[1]CountryUnited St...

US Air Force satellite OV1-86OV1-86 on a cart awaiting installation on its Atlas rocketMission typeEarth scienceOperatorUSAFCOSPAR ID1967-072A SATCAT no.S02893 Spacecraft propertiesManufacturerGeneral DynamicsLaunch mass118 kg (260 lb) with Altair Start of missionLaunch date27 July 1967 19:00:03 (1967-07-27UTC19:00:03) UTCRocketAtlas DLaunch siteVandenberg 576-B-3[1] End of missionDecay date22 February 1972 Orbital parametersRegimeLow Earth OrbitEccentricity0.00895...

 

Commune in Île-de-France, FrancePlaisirCommuneThe church and shops in Plaisir Coat of armsLocation (in red) within Paris inner and outer suburbsLocation of Plaisir PlaisirShow map of FrancePlaisirShow map of Île-de-France (region)Coordinates: 48°49′06″N 1°56′50″E / 48.8183°N 1.9472°E / 48.8183; 1.9472CountryFranceRegionÎle-de-FranceDepartmentYvelinesArrondissementVersaillesCantonPlaisirIntercommunalitySaint-Quentin-en-YvelinesGovernment • May...

 

Historical coinage of China This article has multiple issues. Please help improve it or discuss these issues on the talk page. (Learn how and when to remove these template messages) This article may contain excessive or inappropriate references to self-published sources. Please help improve it by removing references to unreliable sources where they are used inappropriately. (December 2021) (Learn how and when to remove this message) Some of this article's listed sources may not be reliable. P...

ХристианствоБиблия Ветхий Завет Новый Завет Евангелие Десять заповедей Нагорная проповедь Апокрифы Бог, Троица Бог Отец Иисус Христос Святой Дух История христианства Апостолы Хронология христианства Раннее христианство Гностическое христианство Вселенские соборы Н...

 

American procedural drama television series Not to be confused with Rescue 911, Reno 911!, or 9-1-1: Lone Star. 9-1-1GenreProcedural dramaCreated by Ryan Murphy Brad Falchuk Tim Minear Starring Angela Bassett Peter Krause Oliver Stark Aisha Hinds Kenneth Choi Rockmond Dunbar Connie Britton Jennifer Love Hewitt Ryan Guzman Corinne Massiah Marcanthonee Jon Reis Gavin McHugh John Harlan Kim Composers Mac Quayle Todd Haberman Country of originUnited StatesOriginal languageEnglishNo. of seasons7No...

 

Play written by Simon Gray Cell MatesPoster original West End productionWritten bySimon GrayDate premiered16 February 1995Place premieredAlbery Theatre, LondonOriginal languageEnglishGenreDramaOfficial site Cell Mates is a play by Simon Gray. It opened at the Albery Theatre, London on 16 February 1995,[1] starring Stephen Fry and Rik Mayall, with Gray himself directing. Despite having performed successfully for several weeks during the pre-London warm-up dates in Guildford and Watford...

Tony DaltonDalton pada 2021LahirÁlvaro Luis Bernat Dalton[1]13 Februari 1975 (umur 49)[1]Laredo, Texas, AS[1]KebangsaanAmerika Serikat, MeksikoPendidikanLee Strasberg Theatre Institute[1]PekerjaanAktorpenulis skenarioTahun aktif2000–sekarang Álvaro Luis Bernat Dalton (lahir 13 Februari 1975),[1] dikenal secara profesional sebagai Tony Dalton, adalah aktor berkebangsaan Amerika Serikat dan Meksiko. Sebagian besar kariernya, ia bermain dala...

 

Neilson-Terry pada tahun 1915 Phyllis Neilson-Terry (15 Oktober 1892 – 25 September 1977) adalah seorang aktris Inggris. Dia adalah anggota generasi ketiga dari dinasti teatrikal keluarga Terry. Setelah sukses awal di klasik, termasuk beberapa peran utama Shakespeare, dia menghabiskan lebih dari empat tahun di AS, dalam presentasi yang umumnya ringan. Kembali ke Inggris pada tahun 1919, ia mengejar karir yang bervariasi, termasuk pantomim, dan acara ragam serta kembali ke dram...

 

German author, translator and publisher Zoë BeckBorn12 March 1975 (1975-03-12) (age 49)Lahn-Dill-Kreis, GermanyOccupationWriter, publisher, translator, dubbing directorNotable worksNormale Menschen, Fade to Black, Ein zufriedener Mann. Erzählungen, A Contented Man and Other StoriesWebsitezoebeck.blog Zoë Beck (born 12 March 1975 as Henrike Heiland in Ehringshausen in the Lahn-Dill district[1]) is a German writer, publisher, translator, dialogue book author and dubbing dir...

World 10K BangaloreThe logo for World 10K BengaluruDateMid-MayLocationBengaluru, IndiaEvent typeRoadDistance10 kilometresPrimary sponsorTata Consultancy ServicesEstablished2008Course recordsMen's: 27:38 (2022) Nicholas KimeliWomen's: 30:35 (2022) Irene CheptaiOfficial siteWorld 10K Bangalore The race starts and finishes at the Sree Kanteerava Stadium The World 10K Bengaluru (known as the TCS World 10K Bengaluru for sponsorship reasons by Tata Consultancy Services (TCS))[1] is an annu...

 

American street performer Naked CowboyBornRobert John Burck (1970-12-23) December 23, 1970 (age 53)Cincinnati, Ohio, U.S.Occupation(s)Singer, songwriter, writer, former political candidate, actorYears active1998–presentSpouse(s) Patricia Burck, The Naked Cowgirl ​ ​(m. 2013)​Websitenakedcowboy.com Robert John Burck (born December 23, 1970), better known as the Naked Cowboy, is an American street performer, singer, songwriter, and occasional actor...

 

British soldier and politician (1860–1949) Colonel The Right HonourableThe Earl of LucanGCVO KBE CB TD PC DLThe Earl of Lucan, c. 1896Member of Parliament for ChertseyIn office6 July 1904 – 8 January 1906Preceded byJohn Arthur FylerSucceeded byFrancis MarnhamConservative Chief Whip in the House of LordsIn office1929–1940Preceded byThe Earl of PlymouthSucceeded byThe Lord Templemore Personal detailsBorn13 December 1860Died20 April 1949(1949-04-20) (aged ...

У этого топонима есть и другие значения, см. Залесье (значения). ПосёлокЗалесье 54°50′30″ с. ш. 21°31′30″ в. д.HGЯO Страна  Россия Субъект Федерации Калининградская область Муниципальный район Полесский Сельское поселение Залесовское История и география Прежние н...

 

Not to be confused with the list of deserts. An assortment of desserts. A chocolate-strawberry crumble ball. Indian confectionery desserts (known as mithai, or sweets in some parts of India). Sugar and desserts have a long history in India: by about 500 BC, people in India had developed the technology to produce sugar crystals. In the local language, these crystals were called khanda (खण्ड), which is the source of the word candy.[1] A dessert is typically the sweet course tha...