Hilft Dir dabei, Deine BÜNDNIS 90/DIE GRÜNEN Website zu optimieren https://green-spider.netzbegruenung.de/
Go to file
Marian Steinbach 54b6d24b61
Update README.md
2018-08-28 22:39:19 +02:00
devops Consolidate scripts 2018-08-27 20:50:18 +02:00
.dockerignore Change to run spider in Docker container 2018-05-03 10:22:10 +02:00
.gitignore Remove and ignore generated file 2018-05-25 20:06:09 +02:00
.travis.yml Modify travis config to run docker 2018-05-03 12:04:32 +02:00
Dockerfile Add retry for get_job_from_queue 2018-08-27 22:40:31 +02:00
KRITERIEN.md Detect and report responsive layout details 2018-04-23 09:11:50 +02:00
LICENSE Create LICENSE 2018-08-28 21:04:20 +02:00
Makefile Remove webapp code 2018-08-28 22:28:34 +02:00
README.md Update README.md 2018-08-28 22:39:19 +02:00
data_export.py Uncomment screenshot export 2018-08-28 21:35:38 +02:00
spider.py Cleanup 2018-08-27 23:23:48 +02:00
spider_test.py More tests 2018-05-04 10:02:01 +02:00

README.md

Green Spider

Initiative und Tools zur Förderung eines benutzer*innenfreundlichen Auftritts von Bündnis 90/Die Grünen im Web.

Zur Auswertung: https://green-spider.netzbegruenung.de/

Tools

Aktivitäten

Es ist geplant, auf Basis der gesammelten Informationen (siehe Spider) Informationen an die Betreiber*innen der Websites zu versenden. Hierzu müssen Prozesse erarbeitet und vermutlich weitere Tools geschaffen werden.

Community

Green Spider ist ein Projekt des netzbegrünung e. V. -- Mitwirkung ist herzlich willkommen.

Zur Kommunikation dient der Chatbegrünung-Kanal #green-spider sowie die Issues hier in diesem Repository.

Anleitung

Spider ausführen

Zum Ausführen des Spider auf einem Server siehe Verzeichnis devops.

Voraussetzungen zum lokalen Ausführen:

  • Docker
  • Schlüssel mit Schreibrecht für die Ergebnis-Datenbank

Um alle Sites aus aus netzbegruenung/green-directory zu spidern:

make spiderjobs
make spider

Alternativ kann wie im nachfolgenden Beispiel gezeogt das Spidern einer einzelnen URL angestoßen werden. Diese muss nicht zwingend Teil des green-directory sein.

docker run --rm -ti \
  -v $PWD/secrets:/secrets spider \
  spider.py --credentials-path /secrets/datastore-writer.json \
  jobs --url https://www.trittin.de/

make spider

Screenshots erstellen

Siehe Verzeichnis devops.

Webapp aktualisieren

Siehe netzbegruenung/green-spider-webapp