ABAP Code Generation Benchmark Revisited

Veröffentlicht: von

Two years ago, I shared results of a project at TH Köln, where Stephan Wallraven and Tim Köhne adapted the HumanEval benchmark for ABAP code generation. At that time (fall 2023), ChatGPT showed a success rate for ABAP that was significantly lower compared to Python. However, we caught a glimpse of potential—especially in code explanation. Driven…

Posts nach Tags: KI

Projekt-Themen

Veröffentlicht: von

Aktuelle Themenangebote aus meinen Forschungsbereichen ERP- und Anwendungsentwicklung, Business Intelligence für Abschlussarbeiten und Projekte auf dem Portal „Project Exchange TH Köln“ zB Gen AI basierter Bot zum Retrieval von Regelungen und Vorschriften: Ziel dieses Projekts ist die Entwicklung eines Service-Bots, der Stakeholdern wie Prüfungsausschussvorsitzenden und Verwaltungsmitarbeitern der TH Köln bei der effizienten Abfrage von Prüfungsordnungen…

Posts nach Tags: KI

Citizen Developer + GenAI – ein DreamTeam?

Veröffentlicht: von

Was bedeuten die schnellen Fortschritte im Bereich der generativen KI für den modernen Arbeitsplatz? Können „Citizen Analysts“, die generative KI nutzen, komplexe Aufgaben fast so effektiv wie erfahrene Experten bewältigen? Wir wollten diese Frage durch ein praktisches Labor-Experiment untersuchen.

Posts nach Tags: KI

Benchmarking of ChatGPT-generated ABAP Code

Veröffentlicht: von

Benchmarking as an established approach to make the performance of systems measurable and, above all, comparable, has recently been increasingly applied to the code generation capability of LLMs. Prominent examples are HumanEval, CodeXGLUE or CoNaLu. The development of benchmark performances over time demonstrates the growing maturity and increasing usability of LLMs, especially for widely used…

Posts nach Tags: KI

Praxisprojekt (Team) KI-unterstützte Zeitreihenprognosen in einem logistischen Kontext

Veröffentlicht: von

Projektbeschreibung: Zeitreihenprognosen spielen in verschiedenen wirtschaftlichen Kontexten, wie z. B. bei der Vorhersage von Aktienkursen oder Umsatzprognosen, eine äußerst wichtige Rolle. Trotz der Entwicklung verschiedener Bibliotheken für Vorhersagealgorithmen in den letzten Jahren ist es nach wie vor schwierig, diese Techniken in Unternehmen ohne die Beteiligung von Experten einzusetzen. Mit dem öffentlichen Durchbruch von ChatGPT besteht…

Posts nach Tags: KI