SlownikGeo
Projektbeschreibung
Hier finden Sie die Beschreibung des Projektes in Polnisch.
Einleitung
Texterschließung und Übersetzung der 16 Bände (14 785 Seiten) der Buchreihe: Słownik Geograficzny Królestwa Polskiego (i innych krajów slowianskich) (1880 - 1902)- (deutsch: Geographisches Lexikon des Königreiches Polen (und anderer slawischer Länder)) - aus dem Polnischen ins Deutsche und Aufbereitung der darin enthaltenen Daten für das Genealogische Ortsverzeichnis GOV, GenWiki und Hic Leones.
Vorgeschichte
2003 veröffentlichte die PGSA die 16 Bände des Słownik Geograficzny Królestwa Polskiego auf CD-ROM (DJVU-Format). Dieses Projekt wurde durchgeführt von Rafał T. Prinke (Chefredakteur), Poznan, Poland, (Digitalisierung: Michał and Stanisław Prinke) und mit weiterem Material von William F. Hoffman und finanziert durch die PGSA (Projekt-Manager: Kenneth Czerwinski; Projekt-Kommittee: Marcia Bergman, Jim Czuchra, Virginia Hill, Rosalie Lindberg, Annmarie Utroska und Stanley Schmidt). Einige Einträge wurden durch Mitglieder der PGSA ins Englische übersetzt [1].
Idee
Die Bände des Słownik Geograficzny auf der CD-ROM der PGSA enthalten Beschreibungen aller Regionen, Städte, Dörfer und anderer Orte, Berge, Flüsse und Seen des Königreichs Polen (Kongresspolen) und im slawischen Sprachraum: die baltischen, westlichen und südlichen Gubernien (Gouvernements) des Russischen Reichs, Westpreußen und Ostpreußen, das Großherzogtum Posen und Preußisch Schlesien, Galizien, Wolhynien, Podolien, Polesien, Österreichisch Schlesien, Mähren, die slovakischen Teile von Ungarn und der Bukowina, und zusätzlich auch weitere wichtige Orte in den übrigen Gubernien im europäischen Russland (als da sind Landsitze, Kirchspiele, Eisenbahnstationen etc.) (geschätzt: etwa 315 000 - 350 000 Einträge), aber
- es handelt sich um BILD-Dateien, die man nicht auf jeden Begriff hin absuchen kann und
- es ist polnischer Text, der nicht jedem (deutschen) Forscher direkt zugänglich ist.
Es ist also wünschenswert, diesen Schatz an Informationen für Kultur- und Familienforscher als
- TEXT-Datei (mit globalen Suchfunktionen absuchbar) und
- in deutscher Sprache zugänglich zu machen.
Vorarbeiten
Der Vorversuch, die BILD-Dateien der Słownik-Geograficzny-CD-ROM durch OCR (Texterkennung) zu digitalisieren, ergab sehr gute Resultate (> 95 % korrekte TEXT-Dateien), einschließlich der spezifischen polnischen Schriftzeichen.
Rechtliches
H.V.J.Kolbe (Hic Leones) kontaktierte die PGSA (Public Relations: Mrs. Cynthia Piech, Chicago) schriftlich mit Beispielen dieser OCR-Resultate und mit folgendem Vorschlag:
- Die PGSA stellt Hic Leones die Bilddateien des Słownik Geograficzny offiziell und unentgeltlich zur Verfügung, um die gesamten 14 785 Seiten von BILD-Dateien in TEXT-Dateien zu überführen.
- Als Gegenleistung erhält die PGSA diese TEXT-Dateien von Hic Leones für eigene Zwecke (z.B. Übersetzung ins Englische, weitere CDs (nun Text + Bild) etc.) ohne weitere Auflagen.
Die PGSA stand diesem Angebot positiv gegenüber und im Sept. 2005 erhielt H.V.J.Kolbe eine positive schriftliche Zusage des PGSA-Vorstandes (Board of Directors). Damit war die legale Seite der Datenverwendung geklärt und zusätzlich ein neuer, interessanter Kontakt (PGSA ) zur Familienforschung in Polen geschaffen.
Dieses Ergebnis wurde von Hic Leones 2005 auf dem 57. Genealogentag in Hannover bekannt gegeben. Die PGSA verkündete diese Allianz gleichzeitig auf der 27th Annual Conference in Schaumburg/IL.
Ende Sept. 2005 war die TEXT-Digitalisierung aller 14 785 Seiten des Słownik Geograficzny abgeschlossen und Ende Okt. 2005 wurde der gesamte polnischen Text auf CD an Cynthia Piech geschickt.
Das Projekt
Modus
Wissenschaftliche Zusammenarbeit.
Projekt Partner und deren Beteiligung
PGSA (Polish Genealogical Society of America)
- Scannen der 14 785 Seiten des Słownik Geograficzny und Speicherung im Bildformat
- Edition des Słownik Geograficzny Królestwa Polskiego auf CD-ROM
Hic Leones
- Texterkennung (OCR) der 14 785 Seiten des Słownik Geograficzny und Speicherung im Textformat
- Konzept und Koordination des Projektes
CompGen
(Verein für Computergenealogie e. V.)
- Bereitstellung des Arbeitsdatei-Import/Export-Moduls
- Co-Koordination des Projektes
FGG (Forschungsgruppe Grafschaft Glatz)
http://www.genealogienetz.de/vereine/AGoFF/fst/fgr_glat.htm
- Zugang zu einem Übersetzungsprogramm PL => D zur Vor/Roh-Übersetzung des Textes
Voraussetzungen
Um das enorme Textvolumen (formatiert etwa 250 MB Text, unformatiert etwa 70 - 80 MB) effizient und zügig ins Deutsche zu übersetzen, müssen die Daten in eine Datenbank (d.h. temporäre Arbeitsdatenbank) überführt werden.
Seitenweise Auszüge dieser Arbeitsdatenbank können dann im reinen Textformat (zusammen mit einem speziellen Font (für die Fremdcharaktere) und einer knappen Arbeitsanleitung) an interessierte, sprachkundige Forscher verschickt werden (s.u. - Beispiel der Zusammenarbeit mit einem Übersetzer -), die Seiten ihres eigenen Interesses (!) dann in Ruhe (offline) bearbeiten und übersetzen können [1].
Eine Abschätzung hat ergeben, dass bereits nach 1-monatiger Vorarbeit, in denen in der Arbeitsdatenbank durch Suche/Ersetze die polnischen Abkürzungen durch deutsche ersetzt und auch andere Standardbegriffe (zusammen etwa 300 - 400 Termini, z. B. Bahnhof, Poststation, Kirche, Einwohner etc.) 'eingedeutscht' werden, etwa 40 % des Textes allgemein verständlich werden, auch für jemanden der nicht des Polnischen mächtig ist.
Zeitplan
Das Projekt umfasst folgende Schritte [ grün = erledigt oder in Bearbeitung, rot = in Planung ]
- Scan der 14 785 Seiten des Słownik Geograficzny und Edition der CD-ROM (erledigt durch die PGSA im Jahre 2003)
- OCR der 14 785 Bilddateien des Słownik Geograficzny und Speicherung der Textdateien im CP 1250 Format (erledigt durch Hic Leones im Sept. 2005)
- Erstellung der PDF-Datei eines PL => D Lexikon von 1879 mit Lesezeichen zur schnellen Wortfindung als Übersetzungshilfe (erledigt durch Hic Leones im Dez. 2006; auf der CompGen-CD 2006/2007 zu finden).
- Programmierung der Import/Export Module zur Erweiterung der Arbeitsdatenbank (bis Mitte Feb. 2007).
- Import der 14 785 Textdateien des Słownik Geograficzny in die Arbeitsdatenbank unter Berücksichtigung der polnischen Fremdcharaktere (Mitte Feb. 2007).
- Erstellung einer kontinuierlich zu erweiternden Wort-für-Wort Übersetzungsliste (seit Anfang Jan. 2007).
- Zusammenfassung des Projektes in einem Übersichtsartikel für die Zeitschrift 'Computergenealogie' (Anfang Feb. 2007), Publikation Ende März 2007.
- Intern: Entfernung von systematischen OCR-Fehlern, unnötigen Bindestrichen und Leerzeichen; Einfügen von Leerzeilen hinter jeden einzelnen geographischen Eintrag. (kontinuierlich ab Mitte Feb. 2007).
- Erstellung eines Glossars, welche polnischen Begriffe beibehalten werden und separat erklärt werden sollten (in Zusammenarbeit mit Prof. Eichler, Leipzig) (ab Mitte/Ende Feb. 2007).
- Intern: Dokumentiertes Suche/Ersetze der polnischen Abkürzungen durch deutsche Abkürzungen (kontinuierlich ab Mitte/Ende Feb. 2007).
- Intern: Dokumentiertes Suche/Ersetze von weiteren (ca. 300) Standardbegriffen (kontinuierlich ab Mitte/Ende Feb. 2007).
- Für das SlownikGeo Projekt werden viele Freiwillige benötigt. Nach Absprache mit den Listen-Moderatoren: Ansage des Projektes in den genealogischen Mailinglisten (Mitte März 2007) und Aufruf zur externen Mitarbeit. Wiederholung dieser Ansage (mit kurzem Fortschrittsbericht): etwa alle 2 Monate.
- Entsprechende Aufrufe in Vereinszeitschriften (kontinuierlich ab Mitte März 2007).)
- Vorstellung des Projektes auf dem Genealogentag 2007 in Ludwigshafen (Thema: "Ortsbezüge in der Genealogie") (Sept. 2007).
- Einarbeitung von übersetzten und korrigierten Seiten in GOV und Hic Leones: Sobald eine Seite erschlossen ist, wird sie entsprechend markiert (und gegen weitere Veränderungen geschützt) und an Mitarbeiter überführt, die die dort beschriebenen Orte in GOV eintragen (kontinuierlich ab März 2007).
- Geplanter Abschluss des Projektes (vorsichtige Schätzung): A.D. 2011.
Die polnischen Autoren dieses Werkes benötigten 22 Jahre zur Recherche, Erfassung, Korrektur und Edition dieser enzyklopädischen Serie. Mit den Mitteln der derzeitigen Technik sollte deshalb die Übersetzung und Einarbeitung in einem Viertel dieser Zeit, d.h. 5 - 6 Jahre, zu bewältigen sein ...
Status Quo
Hier wird in unregelmässigen Abständen die Veränderung einer willkürlich gewählten Seite (Band 6, Seite 406) demonstriert.
(a) die Originalseite aus dem Buch
(b) die Seite als Rohtext, d.h. direkt nach dem Import der Seite nach OCR und
(c) die Seite nach Formatierung, Entfernen unnötiger Leerstellung und globaler Bearbeitung von OCR-Fehlern.]
[OCR = Optical Character Recognition = maschinelle Texterkennung]
Beispiel der Zusammenarbeit mit einem Übersetzer
- Wer kann mitmachen ?
- Für die Übersetzung suchen wir engagierte Mitarbeiter, die das Polnische lesen, schreiben und ins Deutsche übersetzen können. Wenn uns eine Vorliebe für eine bestimmte Region (z.B. ein Gouvernement) oder eine Großstadt mitgeteilt wird, wird dieses (soweit möglich) in der Auswahl der Seiten berücksichtigt.
- Für die Einarbeitung ins GOV sind Kenntnisse in polnischer Sprache nicht nötig: Hier kann jeder mitmachen, der daran interessiert ist!
- Ein polnisch versierter Mitarbeiter signalisiert seine Bereitschaft zur Mitarbeit (Kontaktadressen siehe unten). Er/Sie erhält (per eMail):
- die TEXT-Seiten seiner Wahl (z.B. 10) im Textformat (einschließlich des Spezialfonts)
- die entsprechenden original 10 BILD-Dateien des Slownik Geograficzny (TIF-Dateien) zur Kontrolle
- eine kurze Anleitung zur Bearbeitung
- eine einfache Excel-Datei, in der die bisherigen Wortersetzungen dokumentiert sind
- die PDF-Datei eines PL => D Lexikon von 1879 mit Lesezeichen zur schnellen Wortfindung (auf der CompGen-CD 2006/2007 zu finden oder im Download)
- Nun bearbeitet er/sie die einzelnen Seiten. Findet er/sie ein Wort (einen "Standardbegriff"), das von den Projekt-Coordinatoren in der Arbeitsdatenbank global ersetzt werden soll, trägt er/sie das Wort und sein deutsches Äquivalent in die Exceldatei ein [2]. Wenn er/sie mit der Übersetzung fertig ist, schickt er/sie die 10 Textdateien wieder an den Absender zurück, der sie nun wieder mit der Arbeitsdatenbank vereinigt (Re-Import) und entsprechend zur Weiterverarbeitung markiert.
Noch Fragen? Interesse an einer Mitarbeit?
Wenden Sie sich bitte an:
Dr. Hanno V. J. Kolbe (Koordinator)
6, rue des Tuiliers
67204 Achenheim/Frankreich
E-Mail: mailto:kolbe@hicleones.com
Peter Lingnau (Co-Koordinator, GOV)
Spicherer Str. 43
86157 Augsburg
E-Mail: mailto:PeterLingnau(at)yahoo.de
Anmerkungen
- ↑ Zur Hilfe der Übersetzung wurde ein sehr reiches, 998-seitiges polnisch-deutsches Lexikon (1879) Bild-digitalisiert und ausgiebig mit Lesezeichen versehen (als PDF-Datei auf der CompGen-CD 2006/2007), das jedem interessierten Mitarbeiter unentgeltlich zur Verfügung gestellt wird. Zusätzlich wurde von der FGG (Forschungsgruppe Grafschaft Glatz) ein PL <=> D Übersetzungsprogramm zur Verfügung gestellt, um in der Lage zu sein, schnell Vor/Roh-Übersetzungen zu erstellen. (Die Limitationen von Übersetzungsprogrammen sind bekannt, aber beim Słownik Geograficzny handelt es sich um Auflistung von statistischen Daten und nicht um eine philosophische Doktorarbeit oder um Poesie ...)
- ↑ Auf diese Weise trägt jeder Mitarbeiter dazu bei, dass die Erfahrungen, die er/sie mit wenigen Seiten gemacht hat, in kontrollierter Weise (durch die Projekt-Koordinatoren) auf alle Seiten übertragen werden, d.h. die Ausgangsqualität des noch nicht übersetzten Textes wird immer besser und der Aufwand der Übersetzung sollte mit der Zeit immer geringer werden (d.h. die Übersetzungsgeschwindigkeit sollte zunehmen). Erledigte Seiten stehen für GOV, GenWiki und Hic Leones zur Einarbeitung zur Verfügung.