CLI-Adventskalender: cron

Hinter dem 13. Türchen unseres CLI-Adventskalenders verbergen sich cron und seine Freunde.

Als ich noch ein Teenager war, hatte ich meine ersten ernsten Computerbücher in meinen Händen: Das Lama-Buch (Learning Pearl) und das Kamel-Buch (Programming Perl), beide von O’Reilly und geschrieben – unter anderem – von Larry Wall, dem Erfinder von Perl. In seiner Einleitung beschrieb er die drei großen Tugenden eines Perl-Programmierers: Faulheit, Ungeduld und Hybris. Ich wusste in diesem Moment, dass ich meinen Beruf gefunden hatte.

Bei allem Humor sind Faulheit, Ungeduld und Hybris die Grundpfeiler der Automatisierung. Ich einzelner Techie glaube ein Problem gut genug verstanden zu haben, dass ich es mit einem Skript lösen kann (kompletter Hybris, jeder Product Owner wird das bestätigen). Ich mache das, weil ich mir repetitive Arbeit sparen will (Faulheit) und weil das Skript das schneller macht als ich (Ungeduld).

Heute reden wir über eine Reihe von Befehlen die Dinge zu bestimmten Zeiten tun. Allen voran ist das cron.

cron

cron führt Befehle (und somit auch Skripte) in regelmäßigen Abständen aus. Es hat die übersichtlichste und intuitivste Syntax der Welt. crontab -e öffnet die crontab-Datei des jeweiligen Users, gefüllt mit Zeilen wie der folgenden.

0 8-22 * * * /home/eric/backups.sh

Führe dieses Skript jeden Tag (*), jeden Monat (*), jedes Jahr (*) von 8 Uhr bis 22 Uhr (8-22) jeweils zur vollen Stunde (0) aus. Es gibt viele Programme, die automatische Backups machen, aber ein Shellskript hat mir die größte Kontrolle gegeben (mehr dazu hinter einem späteren Adventstürchen). Ein kurzes Skript, eine Zeile im Cronjob und ich werde niemals mehr als eine Stunde Arbeit verlieren, wenn meine Festplatte in Rauch aufgehen sollte.

Das beste an cron ist das Einstellen und vergessen. Selbst wenn wir komplett die Kontrolle über unser Leben verlieren, unsere Cronjobs laufen weiter mit der stoischen Ruhe einer Maschine. Die große Herausforderung für Cronjobs ist es, gute Skripte zu finden, die tatsächlich einen Nutzen bringen. Ich habe mal ein paar Ideen gesammelt:

• Backups. Nichts ist wertvoller als Lebenszeit. Investierte Arbeit gilt es zu schützen.
• Updates. Nicht nur für den eigenen Computer, sondern auch für diverse andere Geräte die man so hat, die aber keine automatischen Updates fahren.
• Billig einkaufen. Eine schnelle E-Mail, wenn Dinge, die wir haben wollen, für günstig auf eBay oder in diversen Webshops landen.
• Effizientes Scraping. Wenn man hunderte von Websites regelmäßig auf Updates abklopfen will, spart ein cron-job viel Lebenszeit.
• Statistische Datensammlung. Es gibt David Kriese nur einmal, aber manchmal möchten wir wirklich eine belastbare Datenbasis sammeln.
• Aufräumen. Es sammeln sich an einschlägigen Orten allerhand Müll an.
• Monitoring. Manchmal möchte man auf Dinge achten, für die es kein supergutes Tooling gibt. Ist die Telefonanlage gerade besetzt? Was sagen die Wettervorhersagen, muss ich heute meine Pflanzen reinholen, um sie vor Frost zu schützen? Und gibt es E-Mails, die ich in letzter Zeit geschickt habe, auf die ich aber noch keine Antwort bekommen habe?

at

Nicht alles muss (oder soll) regelmäßig passieren. Manchmal habe ich einen Einfall am Wochenende und möchte meinem Kollegen eine Nachricht schreiben … aber erst am Montagmorgen.

at 8am next Monday
sendmail -t < email_mit_guter_idee.txt

Den Input beenden mit STRG+D. Um at benutzen zu können, muss man vorher den at-Daemon einschalten.

sudo systemctl start atd
sudo systemctl enable atd

Die Syntax für die Zeiten ist relativ intuitiv:

at 11pm today
sudo shutdown now

… funktioniert genauso wie

at 3am Jul 1
sudo pacman -Syu

Mit atq bekommt man eine Übersicht der geschedulten Jobs und mit ihrer jeweiligen Nummer, mit der man sie beispielsweise wieder entfernen kann: atrm 2.

Ein besonderes Juwel ist das verwandte Tool batch, das Befehle ausführt, wenn die Auslastung des Systems unter einen bestimmten Wert fällt (lässt sich mit dem at-Daemon atd konfigurieren).

So kann z.B. ein Datenbanksynchronisierung passieren, wenn die Auslastung des Systems bei 20 Prozent liegt.

Ideen für at:

• Resourcenintensiven Kram in die Off-Zeit legen. Ja, ich muss Updates installieren, aber bitte erst nach Feierabend.
• E-Mails. Geburtstagsglückwünsche, Krankmeldungen („Wenn ich bis 9 Uhr nicht am Computer bin, geht es mir wahrscheinlich nicht gut genug zum Arbeiten“), Statusupdates („Um 17 Uhr schicke ich den aktuellen Stand.“), Reminder an andere Personen.
• Dead Man’s Switch. Dramatische Lebensversicherungen aus Actionfilmen mal außen vor gelassen („Wenn sie mich umbringen, geht dieses Video an die Presse!“), kann es notwendig sein, dass bestimmte Dienste nicht ohne Aufsicht laufen dürfen. Der Dienst kann dann heruntergefahren oder Vertretungen informiert werden.
• Social Media Posts, koordiniert auf allen Kanälen.
• Reminder an einen selbst, auch wenn es da noch ein viel epischeres Tool gibt (siehe unten).

remind

Manche Leute ballern sich ihren Google Kalender voll mit Erinnerungen zu allen möglichen Themen. Andere mögen eine striktere Trennung zwischen verschiedenen Lebensbereichen und Kontexten. Wenn es ein Tool gibt, das komplexe Datumsregeln kann, dann ist es remind.

REM 10 SKIP WE MSG Monatliches Budget Meeting

Um Reminder zu bekommen, packt man den String oben in eine Datei wie reminders.rem und ruf remind auf: remind reminders.rem

Unser (fiktives) Budget-Meeting findet am 10. jedes Monats statt, es sei denn, der 10. fällt auf ein Wochenende, dann ist es der Montag danach. Oder vielleicht findet es stattdessen am vierten Mittwoch eines jeden Monats statt, außer es ist ein Feiertag, dann den Mittwoch drauf?

REM Wednesday SCHED _fourth() OMIT HOLIDAY SKIP FORWARD TO Wednesday IF OMITTED MSG "Meeting Day"

Unsere Feiertage müssen wir in der holidays.rem einpflegen, in einem Format wie …

REM 2023 Oct 3 HOLIDAY "Tag der deutschen Einheit"

Jetzt sind Texterinnerungen zwar ganz nett und vielleicht etwas altmodisch, aber um echte Probleme zu lösen, brauchen wir etwas mehr Funktionalität. Glücklicherweise geht

REM 2023 Dec 25 RUN skript_zum_schicken_von_weihnachtskarten.sh

remind manuell auszuführen ist was für Leute, die alle zehn Minuten ihre E-Mails checken. Stattdessen möchte man vielleicht einen cronjob aufsetzen:

crontab -e
0 8 * * * /usr/bin/remind /home/eric/reminders.rem

Die nächste denkbare Frage die sich stellt ist, wie man remind mit dem eigenen Kalender syncen kann.

rem2ics reminders.rem > termine.ics

Dieses Tool kommt direkt von remind. Es kommt ein iCalendar-Format heraus, das von jeder modernen Kalendersoftware unterstützt wird. Das lässt sich natürlich auch wieder automatisieren und per APIs in die entsprechenden Kalender einpflegen.

Warum benutzen wir eigentlich cron, wenn remind mehr Flexbilität mit Scheduling liefert? Weil cron in den meisten Fällen reicht und die meisten Anwendungsfälle keine komplexe Datumsengine brauchen. Meiner Ansicht nacht geht cron ohne remind, aber remind nicht ohne cron oder eine Integration in eine Statusbar oder ein ähnliches Programm.

Als Output können dann alle gängigen Kanäle genutzt werden. Messenger-APIs, Slack-Bots, Services für Push-Notifications (ein selbst gehostetes ntfy.sh vielleicht?) und natürlich E-Mails und diverse GUIs.

Ideen für remind:

• Reminder: Es steht im Namen. Mit ein bißchen Geduld ist es mit Abstand die beste Engine, um an Sachen erinnert zu werden.
• Komplexes scheduling: remind kennt Mondphasen. Vielleicht möchte man sein Teleskop ausrichten? Vielleicht muss man Medikamente genau alle fünf Tage nehmen?
• Ewige Kalender ohne Vendor-lock. Moderne Ökosysteme helfen gerne mit allen Bereichen des Lebens und machen es damit umso schwieriger, sie zu verlassen. Textdateien und Git-Repositories geben Unabhängigkeit.

watcher

Manchmal möchte man Live-Updates. Vielleicht sollen die Tests bei Praktiken wie TDD und/oder komplizierten Refactorings immer neu ausgeführt werden.

inotifywait -m -r -e modify . | while read -r EVENT
do
  rspec
done

Vielleicht möchte man auch einen Befehl alle zwei Sekunden ausführen, um einen Live-Update über den Inhalts eines Verzeichnisses zu bekommen:

watch -n 2 ls /home/eric/Downloads

Auch sehr gut als Alternative, um Refresh auf dem Browser zu drücken.

watch -n 5 curl https://example.com/status.json | jq '.available'

Ideen hier sind:

• Tests ausführen: Runner dieser Art sind das Rückgrat von TDD.
• Builds triggern: Im linken Fenster LaTeX-Code schreiben, im Hintergrund mit inotifywait bauen, im rechten Fenster die gebaute PDF betrachten. #ThisIsTheWay
• Eigenes REPL: Skript nach jeder Veränderung Ausführen und Output betrachten.
• Kommandozeilen-Tabellenkalkulation. Siehe Artikel vom 10.12.

Computer sind unsere Freunde

Das moderne Leben ist hektisch und kompliziert. Unsere Generation muss mit mehr Informationen umgehen als je eine vor uns. Je besser wir Dinge automatisieren, desto weniger müssen wir uns selber kümmern, desto freier ist unser Kopf, desto besser bekommen wir unser Leben unter Kontrolle.