Änderungen von Dokument Digitale Mitgliederverwaltung
Zuletzt geändert von Daniel Herrmann am 2026/02/22 21:17
Von Version
38.1
bearbeitet von Daniel Herrmann
am 2025/08/23 16:13
am 2025/08/23 16:13
Änderungskommentar:
Es gibt keinen Kommentar für diese Version
Auf Version
34.1
bearbeitet von Daniel Herrmann
am 2025/08/22 18:14
am 2025/08/22 18:14
Änderungskommentar:
Es gibt keinen Kommentar für diese Version
Zusammenfassung
Details
- Seiteneigenschaften
-
- Inhalt
-
... ... @@ -806,230 +806,55 @@ 806 806 807 807 Paperless unterstützt die automatische Zuordnung von Metadaten basierend auf festen Strings. So kann man beispielsweise angeben, dass ein Dokumententyp "Haftungsausschluss" zugewiesen werden soll, wenn der String "Haftungsausschluss" irgendwo im Dokument vorkommt. Dies ist allerdings auf eine korrekte Funktion der Texterkennung angewiesen und funktioniert erfahrungsgemäß nur in manchen Fällen, sodass mindestens eine manuelle Überprüfung trotzdem notwendig kommt. Wenn beispielsweise ein Brief mit dem Satz "ich dachte, ich hätte den Haftungsausschluss bereits abgegeben, könntet ihr dies bitte prüfen" erfasst wird, würde der basierend auf der Regel ebenfalls kategorisiert werden. 808 808 809 - **Aus diesem Grund wirdauf jedes Dokument einen speziellerQR Codeaufgedruckt**. Der QR code wird vom Post-ConsumeScript verwendet umdieMetadatenin Paperless zuzuordnen.Weiterhin könnenDaten übermitteltwerden, die dann mittels Webhook an N8n übermitteltwerdenund dortim Workflow verwendetwerden können. Der Aufbau orientiert sichan dem Aufbau eines **JSON WebTokens(JWT).**809 +Aus diesem Grund nutzen wir einen speziellen QR Code in einem für den Makerspace spezifischen Format, welches nachstehend detailliert beschrieben wird. 810 810 811 -=== {{id name="DigitaleMitgliederverwaltung-Barcodeerzeugen"/}}(% style="color:var(--ds-text-accent-purple-bolder,#352c63);" %)Barcode erzeugen(%%) === 811 +{{code language="json"}} 812 +{ 813 + "payload": { 814 + "timestamp": "YYYY-MM-DDTHH:mm:ss", 815 + "uuid": "260171c3-c71c-4da2-b13e-bf1386fe9eac", 816 + "correspondent": "Daniel Herrmann (#250)", 817 + "type": "mksp-doc-sepamandat", 818 + "tags": [ 819 + "tag1", 820 + "tag2" 821 + ], 822 +"storage_path": "Mitgliederverwaltung" 823 + }, 824 + "sig": "signature over the entire payload block" 825 +} 826 +{{/code}} 812 812 813 - (%style="color:var(--ds-text-accent-purple-bolder,#352c63);"%)DerProzesszurErzeugung eines QR Codesistwie folgt:828 +Die beiden Einträge **payload** und **sig** sind **Pflichtfelder**. Innerhalb der Payload müssen der **timestamp** **und die UUID** **vorhanden** sein, alle anderen Felder sind optional, jedoch muss mindestens eins angegeben werden. Der QR Code kann dann - insbesondere bei der Digitalen Unterschrift oder bei Workflows, wo die Formulare ohnehin on demand erzeugt werden bereits mit allen Daten bestückt werden. In Paperless gibt es dann ein Postconsume Script, welches den QR Code ausliest, die Signatur prüft und - falls die Signatur korrekt ist - automatisch die Meta-Daten übernimmt. 814 814 815 -* **Payload (Daten) festlegen**. Einige Werte sind verpflichtend, andere können nach Bedarf optional hinzugefügt werden. 816 -* JWT erzeugen und signieren. der JWT besteht aus drei Teilen: 817 -** **Header**: **alg** (Algorithmus) und **typ** (JWT) sind verpflichtend. Zusätzlich fügen wir einen Timestamp, eine eindeutige ID und eine Gültigkeitsdauer hinzu. 818 -** **Body**: beinhaltet die eigentlichen Daten. 819 -** **Signature**: Mit Hilfe eines Secrets und wird die Signatur erzeugt und automatisch angehängt. 820 -* PDF417 code erzeugen: ein JWT ist per Definition URL safe und kann daher einfach in ein QR code umgewandelt werden. 830 +=== {{id name="DigitaleMitgliederverwaltung-Signatur"/}}Signatur === 821 821 822 - === {{idname="DigitaleMitgliederverwaltung-Header"/}}Header===832 +Die Signatur wird kryptographisch mit Hilfe asymmetrischen Verschlüsselung erzeugt. Wir erzeugen ein RSA 2048 Key Pair. Der öffentliche Schlüssel steht Paperless zur Verfügung, sodass Paperless die Signaturen verifizieren kann. Der private Teil des Schlüssels wird von den Makerspace-Systemem verwendet, welche die Formulare erzeugen. Im Detail: 823 823 824 -Der Header enthält wichtige Meta-Daten, diese werden von der JWT Library automatisch erzeugt und beschreiben in der Regel den verwendeten Key-Typ. 834 +* **Key-Pair**: 2048 bit Schlüssellänge, RSA, 65537 Exponent 835 +* **Signatur**: SHA256 Signatur, PKCS1v15 Padding 836 +* ((( 837 +**Payload**: Als Payload wird nur der Inhalt der Payload verwendet, als **JSON String ohne Whitespaces, byte encoded in UTF-8.** Das oben genannte Beispiel würde die Signatur über den folgenden String erstellen: 838 +\\ 825 825 826 -=== {{id name="DigitaleMitgliederverwaltung-Body"/}}Body === 840 +{{code language="json"}} 841 +{"payload":{"correspondent":"Daniel Herrmann (#250)","type":"SEPA Mandat","tags":["tag1","tag2"]},"timestamp":"YYYY-MM-DDTHH:mm:ss","sig":"this-would-be-the-signature-appended-to-the-data"} 842 +{{/code}} 827 827 828 -Die folgenden Claims sind im Body verfügbar: 829 829 830 -(% class="" %)|=((( 831 -Claim 832 -)))|=((( 833 -Type 834 -)))|=((( 835 -Pflicht 836 -)))|=((( 837 -Beschreibung 838 -))) 839 -|((( 840 -id 841 -)))|((( 842 -UUID4 843 -)))|((( 844 -✅️ 845 -)))|((( 846 -Eindeutige ID dieses Dokuments 847 -))) 848 -|((( 849 -time 850 -)))|((( 851 -Zahl 852 -)))|((( 853 -✅️ 854 -)))|((( 855 -UTC Linux-Timestamp an dem das Dokument und der QR Code erzeugt wurden 856 -))) 857 -|((( 858 -exp 859 -)))|((( 860 -Zahl 861 -)))|((( 862 -✅️ 863 -)))|((( 864 -UTC Linux-Timestamp der angibt, bis wann das Dokument gültig ist. 865 -))) 866 -(% class="" %)|((( 867 -(% class="code" %) 868 -((( 869 -typ 870 -))) 871 -)))|((( 872 -String 873 -)))|((( 874 -✅️ 875 -)))|((( 876 -Typ des Dokuments basierend auf der unten definierten Liste. 877 -))) 878 -(% class="" %)|((( 879 -(% class="code" %) 880 -((( 881 -cor 882 -))) 883 -)))|((( 884 -String 885 -)))|((( 886 -❌️ 887 -)))|((( 888 -Optional: Name des Korrespondenten, dem das Dokument zugeordnet werden soll 889 -))) 890 -(% class="" %)|((( 891 -tags 892 -)))|((( 893 -List[String] 894 -)))|((( 895 -❌️ 896 -)))|((( 897 -Liste an Tags, die dem Dokument zugeordnet werden soll 898 -))) 899 -|((( 900 -spth 901 -)))|((( 902 -String 903 -)))|((( 904 -❌️ 905 -)))|((( 906 -Storage Path, das dem Dokument zugeordnet werden soll 907 -))) 908 -|((( 909 -opt 910 -)))|((( 911 -dict 912 -)))|((( 913 -❌️ 914 -)))|((( 915 -Optionale Attribute, die mit eincodiert werden und dem N8n Workflow übergeben werden. 916 -))) 845 +Als Referenz, die in Python wäre der Input der Signatur: 846 +\\ 917 917 918 -=== {{id name="DigitaleMitgliederverwaltung-Footer"/}}Footer === 848 +{{code language="python"}} 849 +import json 919 919 920 -Der Footer wird automatisch erzeugt und erhält eine Signatur über den Header und den Body, basierend auf einem Algorithmus und einer Signatur. 921 - 922 -{{confluence_tip title="Algorithmus"}} 923 -Von den meisten Libraries werden symmetrische und asymmetrische Signaturen unterstützt. Die Verwendung eines symmetrischen Algorithmus ist für uns einfacher. 924 - 925 -Für diesen Anwendungsfall nutzen wir (% style="text-decoration: none;color:var(--ds-text,#333333);" %)**HS256** (HMAC mit SHA-256 Algorithmus). 926 -{{/confluence_tip}} 927 - 928 -=== {{id name="DigitaleMitgliederverwaltung-AuswahlderLibrary"/}}Auswahl der Library === 929 - 930 -Die Implementierung für die Erzeugung und das Validieren erfolgt in Python. Dies hat den Hintergrund, dass sowohl unser Backend als auch Paperless NGX (und damit das Post-Consumption Script) in Python implementiert ist. Es gibt verschiedene Libraries, die betrachtet wurden: 931 - 932 -|=(% scope="col" %)((( 933 -Name 934 -)))|=(% scope="col" %)((( 935 -CVE 936 -)))|=(% scope="col" %)((( 937 -Github 938 -)))|=(% scope="col" %)((( 939 -GH⭐ 940 -)))|=(% scope="col" %)((( 941 -Letztes Release 942 -)))|=(% scope="col" %)((( 943 -Offene Issues 944 -)))|=(% scope="col" %)((( 945 -Dokumentation 946 -)))|=(% scope="col" %)((( 947 -Qualität Dokumentation 948 -)))|=(% scope="col" %)((( 949 -In Backend vorhanden? 950 -)))|=(% scope="col" %)((( 951 -In Paperless vorhanden? 851 +input_data = {'payload': {'correspondent': 'Daniel Herrmann (#250)', 'type': 'SEPA Mandat', 'tags': ['tag1', 'tag2']}, 'timestamp': 'YYYY-MM-DDTHH:mm:ss', 'sig': 'this-would-be-the-signature-appended-to-the-data'} 852 +signature_data = json.dumps(input_data, separators=(',', ':')).encode('utf-8') 853 +{{/code}} 952 952 ))) 953 -|((( 954 -python-jose 955 -)))|((( 956 -3/0 957 -)))|((( 958 -[[https:~~/~~/github.com/mpdavis/python-jose>>url:https://github.com/mpdavis/python-jose||shape="rect"]] 959 -)))|((( 960 -1.7k 961 -)))|((( 962 -28.05.2025 963 -)))|((( 964 -83 965 -)))|((( 966 -[[https:~~/~~/python-jose.readthedocs.io/en/latest/>>url:https://python-jose.readthedocs.io/en/latest/||shape="rect"]] 967 -)))|((( 968 -⛔ Wenige Bespiele, API Dokumentation fehlt komplett 969 -)))|((( 970 -❌️ 971 -)))|((( 972 -❌️ 973 -))) 974 -|((( 975 -pyJWT 976 -)))|((( 977 -4/0 978 -)))|((( 979 -[[https:~~/~~/github.com/jpadilla/pyjwt>>url:https://github.com/jpadilla/pyjwt||shape="rect"]] 980 -)))|((( 981 -5.4k 982 -)))|((( 983 -28.11.2024 984 -)))|((( 985 -30 986 -)))|((( 987 -[[https:~~/~~/pyjwt.readthedocs.io>>url:https://pyjwt.readthedocs.io||shape="rect"]] 988 -)))|((( 989 -➕️ Gute Dokumentation, API, Beispiele, Changelog 990 -)))|((( 991 -✅️ 2.10.1 992 -Dep von firebase 993 -)))|((( 994 -✅️ 2.10.1 995 -))) 996 -|((( 997 -JWCrypto 998 -)))|((( 999 -5/0 1000 -)))|((( 1001 -[[https:~~/~~/github.com/latchset/jwcrypto>>url:https://github.com/latchset/jwcrypto||shape="rect"]] 1002 -)))|((( 1003 -465 1004 -)))|((( 1005 -06.03.2024 1006 -)))|((( 1007 -8 1008 -)))|((( 1009 -[[https:~~/~~/jwcrypto.readthedocs.io>>url:https://jwcrypto.readthedocs.io||shape="rect"]] 1010 -)))|((( 1011 -➕️ API Doc, einige Beispiele 1012 -)))|((( 1013 -✅️ 1.5.6 1014 -Dep von python-keycloak 1015 -)))|((( 1016 -❌️ 1017 -))) 1018 1018 1019 - Unsere bevorzugte Library ist **pyjwt**. Diese ist auch in **paperless nativ vorhanden**, sodass wir uns für die Implementierung mittels **pyjwt** entschieden haben.856 +\\ 1020 1020 1021 -=== {{id name="DigitaleMitgliederverwaltung-PDF417Code"/}}PDF417 Code === 1022 - 1023 -Als Format für den Code wurde PDF417 ausgewählt, da dieser mehr Platz und Fehlerkorrektur bietet. Weiterhin gibt es eine einfach zu nutzende Library für Python (Erzeugung) und PDF417 wird von (% style="text-decoration: none;color:var(--ds-text-accent-purple-bolder,#352c63);" %)ZXING unterstützt, welches in Paperless eingebettet ist. Ein solcher Barcode sieht beispielsweise so aus: 1024 - 1025 -(% style="text-decoration: none;color:var(--ds-text-accent-purple-bolder,#352c63);" %)[[image:attach:barcode.jpg||height="250"]] 1026 - 1027 -(% style="text-decoration: none;color:var(--ds-text-accent-purple-bolder,#352c63);" %)Daraus kann dann eine Base64 basierte Repräsentation berechnet werden, die einfach in Docuseal hochgeladen werden kann. 1028 - 1029 -=== {{id name="DigitaleMitgliederverwaltung-Referenz-Implementierung"/}}Referenz-Implementierung === 1030 - 1031 -Eine Referenz-Implementierung befindet sich im Makerspace Gitlab: [[https:~~/~~/git.makerspace-darmstadt.de/makerspace-it-infrastructure/paperless-pdf417-reference>>url:https://git.makerspace-darmstadt.de/makerspace-it-infrastructure/paperless-pdf417-reference||shape="rect"]] 1032 - 1033 1033 == {{id name="DigitaleMitgliederverwaltung-TechnischesSetup"/}}Technisches Setup == 1034 1034 1035 1035 Owner: zwei Owner ... ... @@ -1038,7 +1038,46 @@ 1038 1038 Tag: owner = grp owner, view = jeweilige Gruppe, edit = it admin 1039 1039 Doc Type: owner = grp owner, view = jeweilige Gruppe, edit = it admin 1040 1040 1041 - = {{id name="DigitaleMitgliederverwaltung-OffenePunkte"/}}Offene Punkte =866 +TODO 1042 1042 868 +\\ 869 + 870 +=== {{id name="DigitaleMitgliederverwaltung-AusFace2Faceam20.8(DH,YS)"/}}Aus Face 2 Face am 20.8 (DH,YS) === 871 + 872 +* Schritt 1: Einweisungszettel erzeugen 873 +** Checkliste in Directus hinterlegen, eine pro Einweisung 874 +** N8n Workflow, welches die Liste aus Directus herunterlädt und Template mit Puppetteer Script Node erzeugen 875 +** Aus diesem Template dann ein DocuSeal Template erstellen 876 +* Schritt 2: Zettel für Einweisungen generieren 877 +** Tablet für Einweiser im makerspace 878 +** Authentifizierung über Token an der Freigabebox 879 +*** Neue Maschine, User schaltet die Maschine "Tablet" frei 880 +*** Datenbank erzeugt JWT und signiert es mit einem RSA Priv Key 881 +*** Wird als Payload in der MQTT unlock message mitgeschickt 882 +** Tablet nutzt dieses Token für API Requests gegen Homepage Backend 883 +** Backend wird um weitere Middleware angepasst, die dieses Token für manche Endpoints akzeptiert 884 +** Einweiser:in bekommt aktive Einweisung angezeigt und kann Teilnehmer Entfernern (no-show) oder hinzufügen (spontan) 885 +*** Option eine Einweisung ohne Rechnungsstellung vorzunehmen 886 +** PDFs werden automatisch ausgedruckt 887 +*** Tablet triggert einen Backend endpoint 888 +**** übergibt teilnehmer als parameter (auth über token) und 889 +**** erzeugt die entsprechenden PDFs in DocuSeal 890 +**** Gibt PDF als Return 891 +*** Tablet kann PDF über Netzwerk print drucken 892 +* Schritt 3: Einweisungen erfassen 893 +** QR code wird in Schritt 2 aufgedruckt und enthält: 894 +*** Einweisung 895 +*** Datum 896 +*** Einweiser 897 +*** Teilnehmer 898 +*** Flag Rechnung 899 +** Dokument wird über ScanSnap eingescannt und automatisch an paperless übergeben 900 +** Paperless Post Consume erkennt den QR Code, validiert ihn und löst über einen Webook einen Flow in N8n aus 901 +** N8n erstellt dann einen temporären Eintrag im Backend, ähnlich dem der heute bei "Einweisung erfassen" sichtbar ist 902 +** Die Mitgliederverwaltung hat dann x Tage Zeit, die Einträge zu korrigieren und zu prüfen (beispielsweise ob Voraussetzungen erfüllt sind) 903 +** Danach werden alle Schritte wie bisher ausgelöst (Berechtigung, Rechnung, Auszahlung an Einweiser, E-Mail Bestätigung, ...) 904 + 905 +TODO: 906 + 1043 1043 * Docuseal Logging + Monitoring 1044 1044 * N8n Error Handling
- Confluence.Code.ConfluencePageClass[0]
-
- Id
-
... ... @@ -1,1 +1,1 @@ 1 -20 55864611 +202867281 - URL
-
... ... @@ -1,1 +1,1 @@ 1 -https://wiki.makerspace-darmstadt.de/spaces/PROJ/pages/20 5586461/Digitale Mitgliederverwaltung1 +https://wiki.makerspace-darmstadt.de/spaces/PROJ/pages/202867281/Digitale Mitgliederverwaltung