{"id":795,"date":"2019-10-08T08:00:57","date_gmt":"2019-10-08T06:00:57","guid":{"rendered":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/?p=795"},"modified":"2019-09-14T10:04:08","modified_gmt":"2019-09-14T08:04:08","slug":"train-sets-test-sets-for-beginners","status":"publish","type":"post","link":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/train-sets-test-sets-for-beginners\/","title":{"rendered":"Trainings- und Testsets (f\u00fcr Einsteiger)"},"content":{"rendered":"<p><span style=\"color: #0071a1;\"><em>Release 1.7.1<\/em><\/span><\/p>\n<p>Wenn wir ein HTR-Modell trainieren, erstellen wir Trainingssets und Testsets, alle auf der Basis von Ground Truth. In den n\u00e4chsten Posts zu diesem Thema erfahrt Ihr noch mehr dar\u00fcber, vor allem, dass beide Sets nicht miteinander vermischt werden d\u00fcrfen. Doch was genau ist der Unterschied zwischen beiden und wozu sind sie gut?<\/p>\n<p>In der Auswahl des enthaltenen Materials sind Trainings- und <a href=\"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/how-to-create-test-sets-and-why-they-are-important-1\/\">Testsets<\/a> sich sehr \u00e4hnlich. Das Material in beiden Sets soll aus denselben Akten kommen und auf demselben Stand (GT) sein. Der Unterschied liegt darin wie es von Transkribus zur Erstellung eines neuen Modells behandelt wird: Das Trainingsset wird vom Programm in hundert (oder mehr) Durchg\u00e4ngen (Epochs) gelernt. Stellt euch vor, ihr schreibt einen Test hundert Mal \u2013 quasi zu \u00dcbungszwecken. Jedes Mal wenn ihr den Test geschrieben habt, durch alle Seiten durch seid, bekommt ihr die L\u00f6sung und k\u00f6nnt euch eure Fehler anschauen. Dann fangt ihr mit derselben \u00dcbung von vorne an. Dabei werdet ihr nat\u00fcrlich immer besser. Genauso macht es Transkribus und lernt damit bei jedem Durchgang ein bisschen mehr.<\/p>\n<p>Nach jedem Durchgang in Trainingsset wird das Gelernte am Testset \u00fcberpr\u00fcft. Stellt euch wieder den Test vor. Auch diesmal schreibt ihr den Test, bekommt die Note, aber man sagt euch nicht, was ihr falsch gemacht habt. Transkribus geht also viele Male durch dieselben Seiten, kann aber nie die richtige L\u00f6sung sehen. Das Modell muss auf das vorher gelernte beim Trainingsset zur\u00fcckgreifen und daran sieht man dann wie gut es gelernt hat.<\/p>\n<p>Wenn also im Testset dieselben Seiten wie im Training w\u00e4ren, dann k\u00f6nnte Transkribus \u201eschummeln\u201c. Es w\u00fcrde die Seiten schon kennen, h\u00e4tte schon hundert Mal an ihnen ge\u00fcbt und schon hundert Mal die L\u00f6sung gesehen. Das ist der Grund, warum die <a href=\"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/?p=843&amp;preview=true\">CER (Character Error Rate<\/a>\/ Zeichenfehlerquote) im Trainingsset fast immer geringer ist, als im Testset. Das sieht man am besten an der \u201eLernkurve\u201c eines Modells.<\/p>\n<p><a href=\"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/wp-content\/uploads\/2019\/09\/Learning-Curve.jpg\" target=\"_blank\" rel=\"noopener noreferrer\"><img loading=\"lazy\" decoding=\"async\" class=\"alignnone wp-image-796\" src=\"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/wp-content\/uploads\/2019\/09\/Learning-Curve-300x249.jpg\" alt=\"\" width=\"600\" height=\"498\" srcset=\"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/wp-content\/uploads\/2019\/09\/Learning-Curve-300x249.jpg 300w, https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/wp-content\/uploads\/2019\/09\/Learning-Curve-768x638.jpg 768w, https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/wp-content\/uploads\/2019\/09\/Learning-Curve-794x660.jpg 794w\" sizes=\"auto, (max-width: 600px) 100vw, 600px\" \/><\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Release 1.7.1 Wenn wir ein HTR-Modell trainieren, erstellen wir Trainingssets und Testsets, alle auf der Basis von Ground Truth. In den n\u00e4chsten Posts zu diesem Thema erfahrt Ihr noch mehr dar\u00fcber, vor allem, dass beide Sets nicht miteinander vermischt werden d\u00fcrfen. Doch was genau ist der Unterschied zwischen beiden und wozu sind sie gut? In [&hellip;]<\/p>\n","protected":false},"author":4,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[6,10],"tags":[],"class_list":["post-795","post","type-post","status-publish","format-standard","hentry","category-transkribus-in-practice","category-wege-zum-htr-modell"],"translation":{"provider":"WPGlobus","version":"3.0.2","language":"de","enabled_languages":["gb","de"],"languages":{"gb":{"title":true,"content":true,"excerpt":false},"de":{"title":true,"content":true,"excerpt":false}}},"_links":{"self":[{"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/posts\/795","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/users\/4"}],"replies":[{"embeddable":true,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/comments?post=795"}],"version-history":[{"count":9,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/posts\/795\/revisions"}],"predecessor-version":[{"id":868,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/posts\/795\/revisions\/868"}],"wp:attachment":[{"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/media?parent=795"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/categories?post=795"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/rechtsprechung-im-ostseeraum.archiv.uni-greifswald.de\/de\/wp-json\/wp\/v2\/tags?post=795"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}