Making the boss smarter: A journey from rule-based to learned behaviors

Erdész, Réka, Troll, Ede (2025) Making the boss smarter: A journey from rule-based to learned behaviors Annales Mathematicae et Informaticae. 61. pp. 80-93. ISSN 1787-6117 (Online)

[thumbnail of 80_93_erdész.pdf] pdf
80_93_erdész.pdf

Download (1MB) [error in script]
Hivatalos webcím (URL): https://doi.org/10.33039/ami.2025.10.017

Absztrakt (kivonat)

This paper investigates the application of reinforcement learning to non-player character (NPC) behavior design in a roguelike video game, with the goal of creating more engaging and less predictable opponents. Two training approaches were compared using the Unity ML-Agents framework: Agent A, trained exclusively through self-play, and Agent B, trained initially against human players before switching to self-play. Performance was evaluated using quantitative metrics such as policy loss, value loss, entropy, and ELO ratings, alongside qualitative feedback from semi-professional players. While Agent B achieved faster convergence and higher ELO scores, player feedback indicated a preference for Agent A due to its unpredictability, balanced tactics, and lower frustration levels. The results highlight the need to balance technical optimization with player experience, and suggest that hybrid training strategies may yield the most compelling adversaries in future game AI design.

Mű típusa: Folyóiratcikk - Journal article
Szerző:
Szerző neve
Email
MTMT azonosító
ORCID azonosító
Közreműködés
Erdész, Réka
NEM RÉSZLETEZETT
NEM RÉSZLETEZETT
NEM RÉSZLETEZETT
Szerző
Troll, Ede
NEM RÉSZLETEZETT
NEM RÉSZLETEZETT
NEM RÉSZLETEZETT
Szerző
Kapcsolódó URL-ek:
Kulcsszavak: reinforcement learning, game AI, Unity ML-Agents, player experience, NPC behavior
Folyóirat alcíme: Selected papers of the International Conference on Formal Methods and Foundations of Artificial Intelligence
Nyelv: angol
Kötetszám: 61.
DOI azonosító: 10.33039/ami.2025.10.017
ISSN: 1787-6117 (Online)
Felhasználó: Tibor Gál
Dátum: 29 Okt 2025 12:05
Utolsó módosítás: 29 Okt 2025 12:05
URI: http://publikacio.uni-eszterhazy.hu/id/eprint/8827
Műveletek (bejelentkezés szükséges)
Tétel nézet Tétel nézet