Vaig entrenar diversos models basats en Transformer amb el conjunt de dades complet MAMe (>200 GB) i vaig aconseguir una puntuació f1 de 0.75. Vaig utilitzar el superordinador MareNostrum V i Slurm per entrenar els models en un conjunt de dades molt gran.