FFG Projektdatenbank

zurück

STRG.Agents Jahr 3

STRG.Agents: User-Interaktionsvorhersage mittels Virtual Agent Simulationen durch Multi-Agent Reinforcement-Learning

Projektbeschreibung

Im Rahmen dieses Projekts möchten wir ein vollkommen neuartiges Softwaresystem (Library) entwickeln, um die Vorhersage (Prediction) von User-Interactions auf einem E-Commerce-Portal mittels simulierten, virtuellen Usern (Virtual Agents) erstmals zu ermöglichen. Mit diesen synthetischen Informationen soll die Optimierung der Ausspielung von Inhalten unter Einhaltung aktueller und zukünftiger Datenschutzanforderungen ermöglicht werden.

In Ergänzung zu den Global Players im E-Commerce (Amazon, ...) sind in den vergangenen Jahren zahlreiche weitere (oft kleinere) E-Commerce-Portale entstanden. Um die User Journey in einem E-Commerce-Portal zu optimieren, ist es notwendig, das Verhalten der User auf solchen Portalen zu erfassen und auf Basis einer umfassenden Datenanalyse Verhaltensmuster zu erkennen. In einem weiteren Schritt können die Interessen der User errechnet und mit den Kategorien des Contents bzw. der Produkte verschränkt werden. Die Verbesserung der User-Experience und die Optimierung der Ausspielung von Inhalten dienen dazu, die Conversions auf dem Portal zu erhöhen und die Kundenbindung durch positive Nutzer-Erfahrungen zu stärken. Damit sollen europäische Online-Portale in die Lage versetzt werden, mit der mächtigen Konkurrenz aus den USA gleichzuziehen.

Wir werden auch berücksichtigen, dass sich die Ziele des Users während der Experience auf einem E-Commerce–Portal ändern können (es wird z.B. ein andere Produkt gekauft, und nicht das ursprünglich gesuchte). Für diese Aufgabe sind im Rahmen der Forschung für diesen vollkommen neuen Ansatz - der noch von keinem Anbieter verfolgt wird - geeignete Algorithmen zu entwickeln, zu erproben und zu validieren.

Zentrale Entwicklungsinhalte:

*) Aufbau Prior Domain Knowledge - “Fact Finding”: Anhand von Tracking-Daten (anonymisierte Verhaltensdaten von Usern sowie Logfiles von bestehenden Webportalen) soll ein Pool von elementaren User-Interface-Elementen mit Parametrisierungen erarbeitet werden, um danach mithilfe von “Transduktivem Transfer Learning” Modelle zu trainieren, sodass für das Verhalten auf beliebigen anderen Webportalen Vorhersagen berechnet werden können.

*) Portal Modellierung: Es soll ein System entwickelt werden, um e-commerce-Portale in einer abstrakten Weise abzubilden bzw. modellieren zu können. Ziel ist es, einerseits bestehende Portale weitgehend automatisiert in die Abstraktion abbilden zu können (automatische Analyse und Transformation).

*) Modellierung von Usern als Agents: Die User von Webportalen (insbesondere e-commerce-Portale) sollen als sogenannte “Agents” abgebildet werden können, die auf mehrfache Weise - unter anderem anhand von Soziodemographien - parametrisierbar sind. Auf diese Weise soll unterschiedliches Verhalten von Usern aus unterschiedlichen Fokus-Gruppen abgebildet werden können.

*) Durchführung von Simulationen: Es sollen unterschiedliche Algorithmen, v.a. aus dem Bereich des Reinforcement Learnings, aber auch aus der Kontroll-Theorie untersucht und deren Ergebnisqualität und Performance verglichen werden.

Als Use Case Partner sind für das Projekt ÖAMTC, ÖGB und Weidwerk mit an Bord.

Nach Abschluss des Projekts soll eine umfassende Library bzw. ein System vorliegen, mit welcher e-commerce-Projekte auf mehreren Ebenen und in mehreren Phasen optimiert werden können. Dieses Software Produkt kann danach für unterschiedliche Web-Portale und e-commerce-Plattformen eingesetzt werden. Multi-Agent-Methoden zur Simulation mit dem Einsatz von Deep Reinforcement Learning werden im Bereich der E-Commerce- oder Web-User-Datenanalyse noch nicht verwendet und sind somit ein vollständig neues Forschungsgebiet. Mit den geplanten Entwicklungen werden wir in der Branche eine neuartige und einzigartige Lösung für kleinere und mittlere e-commerce-Portale bieten, um diese als Gegengewicht zu den großen US-Plattformen positionieren zu können.

zurück