9bad6aeb17
https://github.com/opencultureconsulting/openrefine-task-runner |
||
---|---|---|
alephino | ||
barcodes | ||
bibliotheca | ||
pica+ | ||
.gitignore | ||
LICENSE | ||
README.md | ||
Taskfile.yml |
README.md
Transformation von Bibliotheca und Alephino nach PICA+ für die Bibliotheken der Berufsakademie Sachsen
Vorbereitung
-
Exporte bereitstellen mit folgenden Dateinamen:
- alephino/input/leipzig-exemplare.txt
- alephino/input/leipzig-titel.txt
- alephino/input/riesa-exemplare.txt
- alephino/input/riesa-titel.txt
- bibliotheca/input/bautzen.imp
- bibliotheca/input/breitenbrunn.imp
- bibliotheca/input/dresden.imp
- bibliotheca/input/glauchau.imp
- bibliotheca/input/plauen.imp
-
Installation Task 3.2.2
a) RPM-based (Fedora, CentOS, SLES, etc.)
wget https://github.com/go-task/task/releases/download/v3.2.2/task_linux_amd64.rpm sudo dnf install ./task_linux_amd64.rpm && rm task_linux_amd64.rpm
b) DEB-based (Debian, Ubuntu etc.)
wget https://github.com/go-task/task/releases/download/v3.2.2/task_linux_amd64.deb sudo apt install ./task_linux_amd64.deb && rm task_linux_amd64.deb
-
Installation OpenRefine 3.4.1 und openrefine-client 0.3.10
task install
Nutzung
Datenverarbeitung sequentiell
task default
Datenverarbeitung (teil)parallelisiert (benötigt bis zu 16 GB RAM)
task pica+:main
Analyse dubletter Barcodes
task barcodes:main
Systemvoraussetzungen
- GNU/Linux (getestet auf Fedora 32)
- JAVA 8+ (für OpenReifne)
- 8 GB freien Arbeitsspeicher