Als der Sommer langsam in den Herbst überging, begab sich das LangTec-Team auf ein Teambuilding-Abenteuer, das sowohl die reiche Geschichte Hamburgs als auch seine modernen Veränderungen umfasste. Das Wetter hielt gerade so lange, dass wir unseren Aufstieg vollenden und ein einzigartiges Wahrzeichen Hamburgs, den Bunker St. Pauli, erleben konnten. Der Bunker, der kürzlich zum „Grünen Bunker“ umgestaltet wurde, bietet eine seltene Kombination aus Geschichte, Architektur und Natur. Der seit Juli für die Öffentlichkeit zugängliche Dachgarten – der höchste in Hamburg – beherbergt 23.000 Bäume, Sträucher und Pflanzen, die sich auf fünf pyramidenartige Etagen verteilen. Trotz des grauen Himmels war der Panoramablick auf die Elbphilharmonie, den Michel und den Hafen so atemberaubend wie versprochen.

Nach unserer Wanderung machten wir eine gemütliche Pause im Bunkercafé Constant Grind, wo wir das Brettspiel „Concept“ spielten. Das Spiel, bei dem man Wörter durch die Assoziation von Symbolen erraten muss, schien wie geschaffen für eine Gruppe von Programmierern und Linguisten wie uns. Wir dekonstruierten Bedeutungen, spielten mit Symbolen und entdeckten Zusammenhänge.

Schließlich beendeten wir den Abend mit einem 3-Gänge-Mystery-Dinner im La Sala, dem Restaurant im Bunker. Das Essen war eine Überraschung, und jeder Gang bot etwas Neues und Köstliches. Es war die perfekte Art und Weise, einen ereignisreichen, nieseligen, aber denkwürdigen Tag abzuschließen.

In einem Beratungs-Mandat unterstützt LangTec das zentrale IT-Management einer weltweit führenden internationalen Versicherungsgruppe, um das Potential für den Einsatz von Automation und Künstlicher Intelligenz (KI) zur Effizienzsteigerung bei Geschäftsprozessen im ITIL-Framework zu erkunden. Dabei geht es sowohl um Wissensvermittlung über KI im allgemeinen als auch die Anwendung auf konkrete wiederkehrende Aufgaben sowie eine mittelfristige Planung weiterer Entwicklungsmaßnahmen.

Ziele für die Prozessoptimierung sind vor allem das Change Management, Incident Response, Lizenzadministration und Vulnerability Management mittels KI-Lösungen. All diese Vorgänge sind in einer Standard-Plattform mit erheblichen lokalen Anpassungen abgebildet und müssen zahlreichen gesetzlichen Vorgaben genügen. Die zentrale Konfigurationsdatenbank enthält im Prinzip alle relevanten Informationen über Personen, Gruppen, Geräte, Lizenzen, Vorfälle, etc. und die Beziehungen zwischen ihnen, stellt diese aber oft nicht in idealer Weise zur Erledigung der täglich anfallenden Aufgaben bereit.

Aufgaben für LangTec werden sein: die automatische Bewertung oder Korrektur von eingehenden Change Items (Ist die Risikobeschreibung aussagekräftig und zutreffend? Sind alle betroffenen Gruppen erfasst?) oder Incident Tickets (Liegen alle relevanten Informationen vor?), Datenvisualisierung (Dashboards zum Status von Incidents oder Auditing für das Management) oder die aggregierte Auswertung des aktuellen Status (Lassen sich aufkommende Großstörungen im voraus erkennen?).

Wir freuen uns auf eine intensive und anregende Zusammenarbeit in den kommenden Monaten!

LangTec freut sich, seine neueste Zusammenarbeit im Bereich Data Engineering mit einem weltweit führenden Chemie- und Konsumgüterunternehmen mit Sitz in Düsseldorf bekannt zu geben. Der Schwerpunkt dieses Projekts liegt auf der Verbesserung der Dateninfrastruktur unseres Kunden. Im Rahmen des Projekts wird LangTec eine integrale Rolle bei der Entwicklung eines umfassenden Datenkatalogs und eines Data Mesh spielen, um die Zuverlässigkeit und Governance von Datenquellen in verschiedenen Abteilungen des Unternehmens sicherzustellen.

Das Projekt umfasst die Bereitstellung von Expertenwissen zu Datenarchitektur und -verbindungen, die Implementierung und den Aufbau effizienter Datenpipelines sowie die Durchführung grundlegender Datentransformationen, um die unterschiedlichen Geschäftsanforderungen zu erfüllen. Dieser umfassende Ansatz ermöglicht es unserem Kunden, das volle Potenzial seiner Datenbestände auszuschöpfen und so eine fundierte Entscheidungsfindung und betriebliche Effizienz zu fördern.

Dieses Kundenprojekt unterstreicht das Engagement von LangTec, modernste Datenlösungen zu liefern, Innovation zu fördern und einen Beitrag dazu zu leisten, dass große Unternehmen ihre Datenbestände und -prozesse optimieren können.

Dieser Artikel untersucht die Leistung großer Sprachmodelle (LLMs) wie ChatGPT4-Turbo und ChatGPT4-Omni bei Aufgaben zur Informationsextraktion und vergleicht sie mit dem spezialisierten E-MailParser von LangTec. Unsere Analyse zeigt, dass ein speziell entwickeltes System zum Dokumentverstehen die führenden LLMs in dieser wichtigen Business-Aufgabe um Längen schlägt.

Benchmarking der Genauigkeit

Um die Genauigkeit von ChatGPT4-Turbo, ChatGPT4-Omni und LangTecs E-MailParser zu bewerten, wurde eine umfassende Bewertung mit 20 Dokumenten über vier Extraktionsaufgaben hinweg durchgeführt:

• Q88: Überprüfungsfragebögen für Tankerinformationen
• Timesheet: Lade-/Entladeberichte von Tankern
• Ship: Anfragen für kommerzielle Frachttransporte
• Cargo: Positionierungslisten kommerzieller Frachtschiffe

Aus jedem dieser Dokumente extrahierten wir etwa 20 Ziel-Datenpunkte. Für die Bewertung hatten diese Dokumente vordefinierte Ground-Truth-Labels, die die erwarteten Zielwerte für jedes Feld angaben. Durch den Vergleich der extrahierten Werte mit diesen Ground-Truth-Labels konnten wir die Genauigkeit für jedes Modell berechnen.

Benchmark-Ergebnisse: LLMs vs. LangTecs E-MailParser

Sowohl ChatGPT4-Turbo als auch ChatGPT4-Omni zeigen ein gewisses Maß an Genauigkeit bei Aufgaben zur Informationsextraktion und erreichen Gesamtwerte von 56 % bzw. 49 %. Bemerkenswert ist, dass das neuere Modell ChatGPT4-Omni bei dieser Aufgabe für die meisten Dokumententypen schlechter abschneidet als sein Vorgänger ChatGPT4-Turbo. Eine weitere wichtige Beobachtung war, dass die Leistung der Modelle durch Inkonsistenz beeinträchtigt wird. Für denselben Eingabetext und dieselbe Extraktionsaufgabe liefern diese Modelle jedes Mal unterschiedliche Antworten, selbst wenn dieselbe Frage gestellt wird. Dieses nicht-deterministische Verhalten macht sie unzuverlässig für Szenarien, in denen konsistente und genaue Informationsbeschaffung entscheidend ist.

Im Gegensatz dazu zeigen spezialisierte Parser wie LangTecs E-MailParser eine deutlich höhere Genauigkeit, sind in ihrem Verhalten vollständig deterministisch und erreichen konstant 98 % Extraktionsgenauigkeit über verschiedene Dokumentenformate hinweg. Diese Zuverlässigkeit macht eine deterministische Lösung zur Dokumentenverständnis wie E-MailParser zu einer verlässlicheren Lösung für Aufgaben zur Informationsextraktion, insbesondere bei der Verarbeitung vielfältiger E-Mail-Inhalte in geschäftskritischen Anwendungen.

Abschluss

Während LLMs wie ChatGPT hervorragend zum Generieren von Inhalten geeignet sind, weisen sie erhebliche Einschränkungen auf, insbesondere in Szenarien, die deterministische Ausgaben erfordern, wie z. B. Aufgaben zur Informationsextraktion. Für solche Anwendungen bieten Dokumentenverständnis-Lösungen wie LangTecs E-MailParser eine zuverlässigere und genauere Lösung.

“Innovative Algorithmen in der Schifffahrt und Logistik: Wie automatisierte Texterkennung oder Quantencomputing operative Prozesse verändern werden” – so das Thema des Events des Maritimen Clusters Norddeutschland am 23. April. Etwa 40 Interessenten trafen sich in den Räumlichkeiten des Business Club Hamburgs, der Villa im Heinepark an der Elbchaussee zu spannenden Vorträgen über die Chancen der Digitalisierung in der Schiffahrtsindustrie.

Jan Herberg, Geschäftsführer unseres langjährigen Partnerunternehmens Herberg Systems GmbH stellte vor, wie die automatische Extraktion von Information aus Email-Requests die digitale Transformation von Geschäftsprozessen möglich macht. LangTecs Teamlead für Text- und Datenanalytik Dr. Kilian Foth
demonstrierte dazu am Live-System von LangTecs E-MailReader, wie aus verschiedenen Arten von unstrukturierten Dokumenten und Messages durch KI-basierte semantische Textanalytik strukturierte Daten gewonnen werden können.

Oliver Szal und Joshua Dibbern vom FraunhoferCML zeigten, daß der Quantencomputer bereits existiert und mittlerweile auch schon wettbewerbsfähig ist: ein vom Publikum bestimmtes Routen-Optimierungsproblem wurde zweimal nacheinander (lokal und remote von einem Quadratic Annealer in Kanada) gelöst, wobei der Quantenalgorithmus D-WAVE in derselben Rechenzeit die bessere Lösung fand als die klassische CPLEX-Optimierung.

Proteinfaltung ist ein Paradebeispiel für den schnellen technischen Fortschritt, der in vielen Bereichen durch AI ermöglicht wird. Um davon zu erfahren, haben zwei unserer Team-Mitglieder, Maximilian und Pat, der Veranstaltung FoldForum II beigewohnt.

FoldForum II ist eine Kooperationsveranstaltung von AUFBRUCH.Hamburg und Artificial Intelligence Center Hamburg (Aric e.V.) im DeepTech Campus als Veranstaltungsort. Wie auch bei dem ersten FoldForum war diese Kooperation ein hervorragender Gastgeber und Veranstalter und der DeepTech Campus selbst ist schon einen Besuch wert.

Dr. Natalie Rotermund von Aric e.V. und Dr. Dr. Alexander El Gammal von AUFBRUCH.Hamburg eröffneten die Veranstaltung und stellten die Redner vor. Anschließend begann Dr. Felix Tobola von Aric e.V. mit einem detaillierten Überblick über Proteinfaltung und deren technischer Umsetzung. Dies erzeugte viele Aha-Momente durch die gekonnte Präsentation. Darauf folgte eine Präsentation von Dr. Kilian Guse und Head of Bioinformatics Brian Dawson von GQ Bio Therapeutics, welche eine kreative Anwendung dieser neuen Proteinfaltungsmodelle für die Entwicklung von Medikamenten vorstellten. Eine solche verblüffende Technologie wäre vor ein paar Jahren wohl nur in Science-Fiction Romanen auffindbar gewesen.

Ein Highlight des Abends war die darauf folgende Podiumsdiskussion zwischen den Rednern und den Zuschauern. Dabei reichten die Gesprächsthemen von technischen Details der AI-Modellen hin zu philosophischen Fragen zu den Implikationen von AI-basierter Proteinfaltung für die Wissenschaft, getrieben von den vielfältigen Interessen und Arbeitsbereichen der Zuschauerschaft.

Wir bedanken uns bei Aric E.V. und AUFBRUCH.Hamburg für diese inspirierende Veranstaltung mit so großartigen Rednern und freuen uns auf zukünftige Veranstaltungen dieser Veranstaltungsreihe!

Sowohl öffentliche Ausschreibungen als auch Projektausschreibungen werden in hoher Aktualisierungsfrequenz auf unterschiedlichsten Portalen veröffentlicht, sodass Unternehmen immer gleich mehrere Portale regelmäßig auf neue Einträge überprüfen müssen, um keine interessanten Ausschreibungen zu verpassen. Hinzu kommt, dass diese Portale üblicherweise gleich nach mehreren Stichwörtern durchsucht werden müssen, so dass sich die Anzahl notwendiger Anfragen mit jedem neuen Portal multipliziert. Bei der Durchsicht der Ergebnisse muss man dann eine große Menge bereits bekannter älterer Ergebniseinträge durchsuchen, die man schon bei anderen Suchanfragen gesehen hatte, bis man relevante neue Ergebnisse findet. Um effektiv zu sein, muss diese Arbeit regelmäßig ausgeführt werden und ist daher äußerst lästig und zeitraubend.

Deshalb hat LangTec eine Crawler-basierte Lösung entwickelt, der diesen Prozess vollständig automatisiert. Registrierte Nutzer erhalten ein regelmäßiges E-Mail-Update, welches eine übersichtliche Zusammenfassung aller neu hinzugekommenen Ergebnisse auf allen Portalen für alle personalisierten Suchbegriffe enthält. Dies ermöglicht eine schnellere Reaktionszeit auf neue öffentliche Ausschreibungen und Projektausschreibungen und spart den Aufwand der manuellen Suche.

Initial hat LangTec diese Lösung zuerst für den internen Gebrauch entwickelt. Nun steht der Dienst auch als abonnierbarer, kommerzieller Service zur Verfügung. Die Anzahl und Auswahl der Suchterme sind dabei ebenso individuell anpassbar, wie die Menge der Portale und der E-Mail-Update-Intervalle. Schreiben Sie uns, wenn das für Sie spannend klingt!

Auf der der Frühjahrstagtung der tekom Deutschland im wunderschönen Freiburg haben wir, gemeinsam mit unserem Partnerunternehmen der parson AG, einen spannenden Vortrag zu den Einsatzmöglichkeiten von KI in der technischen Kommunikation gehalten. Schwerpunktmäßig ging es in dem Technical Talk um die vielen unterschiedlichen Tools und Methoden, die KI heutzutage bietet, und wie diese für ganz konkrete Herausforderungen der technischen Dokumentation eingesetzt werden können.

Wir bedanken uns ganz herzlich für das rege Interesse sowie die spannenden Fragen und Diskussionen im Nachgang. Spätestens nach der Präsentation war allen klar, dass KI definitiv ein raffiniertes Schweizer Taschenmesser – und kein plumper Holzhammer – für Automatisierung ist. Wer genau weiß, konkret welches KI-Tool für welchen Anwendungsfall auszuklappen ist, kann auch komplexe Automatisierungsaufgaben effektiv und effizient lösen. Dass LangTec dabei natürlich immer gerne unterstützt, versteht sich an dieser Stelle von selbst 🙂