61 lines
4.6 KiB
Markdown
61 lines
4.6 KiB
Markdown
# 2.2.2 Übung: Vergleich der verschiedenen Formate
|
|
|
|
Im vorigen Abschnitt haben wir beispielhaft Katalogdaten in verschiedenen Formaten heruntergeladen. Jetzt stellt sich die Frage, mit welchem dieser Formate wir weiterarbeiten wollen. Wie eingangs beschrieben, suchen wir ein einfach zu verarbeitendes, gut strukturiertes Format, dass alle benötigten Daten beinhaltet. Um eine Entscheidung für eines der Formate treffen zu können, sollten wir die heruntergeladenen Metadaten mit dem OPAC abgleichen (Aufgabe 1) und die Formate untereinander vergleichen (Aufgabe 2).
|
|
|
|
## Aufgabe 1: Heruntergeladene Metadaten mit der Anzeige im OPAC abgleichen
|
|
|
|
Im [Katalog der Bibliothek des Kurt-Schwitters-Forums](http://www.hs-hannover.de/bibl/quicklinks/suche-im-katalog-ksf/index.html) werden in der Detailansicht eine ganze Reihe von Metadaten zu den Bibliotheksbeständen angezeigt, die wir auch in unserem zukünftigen Katalog verwenden wollen. Suchen Sie einzelne Wörter aus dem Katalogeintrag in den heruntergeladenen Metadaten, um festzustellen, ob diese Wörter in den jeweiligen Formaten überhaupt enthalten sind.
|
|
|
|
Am einfachsten ist es, wenn Sie dazu Texte im OPAC markieren, in die Zwischenablage kopieren ```STRG+C``` und im Terminal einfügen (Rechtsklick und "einfügen" auswählen).
|
|
|
|
## Lösung
|
|
|
|
Hier ein Beispiel für die PPN 834422018. Wenn Sie in der vorigen Übung andere Beispieldaten heruntergeladen haben, müssen Sie die Zahl entsprechend ersetzen.
|
|
|
|
PPN direkt im OPAC aufrufen:
|
|
* {%s%}http://opac.tib.eu/DB=11/XMLPRS=N/PPN?PPN=834422018{%ends%}
|
|
|
|
Suche nach Textschnipseln in den heruntergeladenen Metadaten:
|
|
* {%s%}grep -i -n -H "Lehrbuch" 834422018*{%ends%}
|
|
|
|
## Aufgabe 2: Direkter Vergleich der Metadatenformate
|
|
|
|
Vergleichen Sie das interne Format des Bibliothekssystems (PICA+/PICAXML) mit den ebenfalls über die Schnittstellen des GBV angebotenen Formaten MARC21/MARCXML, DC und MODS. Die Umwandlung von PICA+ in PICAXML und MARC21 in MARCXML ist verlustfrei, so dass nur drei Vergleiche zu tätigen sind:
|
|
1. PICAXML vs. MARCXML
|
|
2. PICAXML vs. DC
|
|
3. PICAXML vs. MODS
|
|
|
|
Hinweise:
|
|
* Für den Vergleich können Sie Onlinetools wie [Diff Checker](https://www.diffchecker.com/) oder [Tools auf der Kommandozeile](http://www.tecmint.com/best-linux-file-diff-tools-comparison/) verwenden.
|
|
|
|
## Lösung
|
|
|
|
Im Folgenden wird eine mögliche Lösung beschrieben, die Tools auf der Kommandozeile nutzt, um die heruntergeladenen Daten zu vereinheitlichen und dann automatisch zu vergleichen. Wenn Sie die jeweiligen Formate manuell miteinander verglichen haben, ist das auch vollkommen ok. In dieser Übung geht es nicht um Tricks auf der Kommandozeile, sondern um die Unterschiede der Metadatenformate ;-).
|
|
|
|
Vorverarbeitung:
|
|
* picaxml: {%s%}curl -s "http://unapi.gbv.de/?id=opac-de-960-3:ppn:834422018&format=picaxml" | sed 's/^ *//; s/ *$//; /^$/d; s/<[^>]*>//g' | sort | uniq > 834422018.picaxml.strip{%ends%}
|
|
* marcxml: {%s%}curl -s "http://unapi.gbv.de/?id=opac-de-960-3:ppn:834422018&format=marcxml" | sed 's/--/\n/g' | sed 's/^ *//; s/ *$//; /^$/d; s/<[^>]*>//g' | sort | uniq > 834422018.marcxml.strip{%ends%}
|
|
* dc: {%s%}curl -s "http://unapi.gbv.de/?id=opac-de-960-3:ppn:834422018&format=dc" | sed 's/^ *//; s/ *$//; /^$/d; s/<[^>]*>//g' | sort | uniq > 834422018.dc.strip{%ends%}
|
|
* mods: {%s%}curl -s "http://unapi.gbv.de/?id=opac-de-960-3:ppn:834422018&format=mods" | sed 's/^ *//; s/ *$//; /^$/d; s/<[^>]*>//g' | sort | uniq > 834422018.mods.strip{%ends%}
|
|
|
|
Vergleich picaxml mit marcmxl/dc/mods:
|
|
* picaxml vs. marcxml: {%s%}diff -u 834422018.picaxml.strip 834422018.marcxml.strip{%ends%}
|
|
* picaxml vs. dc: {%s%}diff -u 834422018.picaxml.strip 834422018.dc.strip{%ends%}
|
|
* picaxml vs. mods: {%s%}diff -u 834422018.picaxml.strip 834422018.mods.strip{%ends%}
|
|
|
|
Grafischer Vergleich picaxml mit marcxml/dc/mods:
|
|
* Installation vim: {%s%}sudo apt-get install vim{%ends%}
|
|
* picaxml vs. marcxml: {%s%}vimdiff 834422018.picaxml.strip 834422018.marcxml.strip{%ends%}
|
|
* picaxml vs. dc: {%s%}vimdiff 834422018.picaxml.strip 834422018.dc.strip{%ends%}
|
|
* picaxml vs. mods: {%s%}vimdiff 834422018.picaxml.strip 834422018.mods.strip{%ends%}
|
|
* Tipp: {%s%}Beenden von vimdiff mit zweimal :q und enter{%ends%}
|
|
|
|
Erläuterungen zu einzelnen Schritten der Vorverarbeitung:
|
|
* keine Statusinfos ausgeben (silent): {%s%}curl -s{%ends%}
|
|
* Leerzeichen links entfernen: {%s%}sed 's/^ *//'{%ends%}
|
|
* Leerzeichen rechts entfernen: {%s%}sed 's/ *$//'{%ends%}
|
|
* Leere Zeilen entfernen: {%s%}sed '/^$/d'{%ends%}
|
|
* Trennzeichen -- durch Zeilenumbrüche ersetzen(marcxml): {%s%}sed 's/--/\n/g'{%ends%}
|
|
* Alle Zeilen alphanumerisch sortieren: {%s%}sort{%ends%}
|
|
* Doppelte Zeilen entfernen: {%s%}uniq{%ends%}
|