History

Marian Steinbach 84e62b218a Consolidate scripts		2018-08-27 20:50:18 +02:00
..
README.md	Consolidate scripts	2018-08-27 20:50:18 +02:00
run-job.sh	Consolidate scripts	2018-08-27 20:50:18 +02:00

README.md

DevOps

Die Scripte in diesem Verzeichnis erlauben das weitgehend automatisierte Provisionieren eines Servers, Ausführen von Jobs wie Spider und Screenshotter und Entfernen des Servers.

Warnung: Die Scripte sind aktuell so einfach, dass die erzeugten Server nur nach erfolgreicher Ausführung des Jobs entfernt werden. Im Fall eines Fehlers muss der provisionierte Server unbedingt manuell entfernt werden, um unnötige Kosten zu vermeiden.

Voraussetzungen

SSH Public Key ist bei Hetzner hinterlegt und in den scripten eingetragen (siehe 'ssh_keys')
API Token für Hetzner in Datei 'secrets/hetzner-api-token.sh' im Format 'export API_TOKEN='
Service account JSON Datei mit Schreibrechten in 'secrets/datastore-writer.json'
curl
jq (https://stedolan.github.io/jq/)
ssh

Ausführung

Die Scripte werden aus dem Root-Verzeichnis des Repositories ausgeführt.

# Spidern
devops/run-job.sh spider


# Screenshots erzeugen
devops/run-job.sh screenshotter

Der Terminal muss bis zum Ende der Ausführung geöffnet bleiben.