Evaluation - Task 2 - STOMPOL corpus 654 aspects in qrel, 654 aspects in run. Accuracy: 0.576 Confusion matrix Actual Pred # Economia-Ciudadanos-N Economia-Ciudadanos-NEU 2 Economia-Ciudadanos-N Economia-Ciudadanos-P 1 Economia-Ciudadanos-N Economia-Ciudadanos-N 7 Economia-Ciudadanos-NEU Economia-Ciudadanos-N 1 Economia-Ciudadanos-NEU Economia-Ciudadanos-NEU 1 Economia-Ciudadanos-P Economia-Ciudadanos-N 3 Economia-Ciudadanos-P Economia-Ciudadanos-P 2 Economia-Ciudadanos|Partido_Popular-NEU Economia-Ciudadanos|Partido_Popular-P 1 Economia-Ciudadanos|Podemos-N Economia-Ciudadanos|Podemos-NEU 1 Economia-Ciudadanos|Podemos-NEU Economia-Ciudadanos|Podemos-NEU 2 Economia-Izquierda_Unida-N Economia-Izquierda_Unida-N 1 Economia-Izquierda_Unida-NEU Economia-Izquierda_Unida-P 2 Economia-Izquierda_Unida-P Economia-Izquierda_Unida-N 2 Economia-Izquierda_Unida|Podemos-NEU Economia-Izquierda_Unida|Podemos-N 1 Economia-Partido_Popular-N Economia-Partido_Popular-NEU 3 Economia-Partido_Popular-N Economia-Partido_Popular-N 15 Economia-Partido_Popular-N Economia-Partido_Popular-P 5 Economia-Partido_Popular-NEU Economia-Partido_Popular-NEU 2 Economia-Partido_Popular-P Economia-Partido_Popular-N 6 Economia-Partido_Popular-P Economia-Partido_Popular-P 3 Economia-Partido_Popular-P Economia-Partido_Popular-NEU 1 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-N 3 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-P 5 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-NEU 1 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-NEU 1 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-N 1 Economia-Podemos-N Economia-Podemos-NEU 3 Economia-Podemos-N Economia-Podemos-P 2 Economia-Podemos-N Economia-Podemos-N 1 Economia-Podemos-NEU Economia-Podemos-P 1 Economia-Podemos-P Economia-Podemos-P 2 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-N 5 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-NEU 1 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-P 1 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-NEU 2 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-N 3 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-P 1 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-N 4 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-P 4 Educacion-Ciudadanos-N Educacion-Ciudadanos-NEU 2 Educacion-Ciudadanos-N Educacion-Ciudadanos-P 1 Educacion-Partido_Popular-N Educacion-Partido_Popular-N 8 Educacion-Partido_Popular-N Educacion-Partido_Popular-NEU 2 Educacion-Partido_Popular-NEU Educacion-Partido_Popular-NEU 2 Educacion-Partido_Popular-NEU Educacion-Partido_Popular-P 1 Educacion-Partido_Popular-P Educacion-Partido_Popular-N 1 Educacion-Partido_Popular-P Educacion-Partido_Popular-NEU 1 Educacion-Podemos-NEU Educacion-Podemos-N 1 Educacion-Podemos-NEU Educacion-Podemos-P 1 Educacion-Podemos-P Educacion-Podemos-N 1 Educacion-Union_Progreso_y_Democracia-N Educacion-Union_Progreso_y_Democracia-NEU 1 Educacion-Union_Progreso_y_Democracia-NEU Educacion-Union_Progreso_y_Democracia-NEU 1 Educacion-Union_Progreso_y_Democracia-P Educacion-Union_Progreso_y_Democracia-NEU 1 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-NEU 2 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-N 3 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-P 1 Otros_aspectos-Ciudadanos-P Otros_aspectos-Ciudadanos-P 2 Otros_aspectos-Izquierda_Unida-N Otros_aspectos-Izquierda_Unida-N 5 Otros_aspectos-Izquierda_Unida-NEU Otros_aspectos-Izquierda_Unida-N 2 Otros_aspectos-Izquierda_Unida-P Otros_aspectos-Izquierda_Unida-NEU 1 Otros_aspectos-Izquierda_Unida-P Otros_aspectos-Izquierda_Unida-N 1 Otros_aspectos-Partido_Popular-N Otros_aspectos-Partido_Popular-N 9 Otros_aspectos-Partido_Popular-NEU Otros_aspectos-Partido_Popular-NEU 1 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-P 1 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 2 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 2 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 1 Otros_aspectos-Podemos-N Otros_aspectos-Podemos-N 3 Otros_aspectos-Podemos-N Otros_aspectos-Podemos-NEU 1 Otros_aspectos-Podemos-P Otros_aspectos-Podemos-P 1 Otros_aspectos-Podemos|Ciudadanos-N Otros_aspectos-Podemos|Ciudadanos-P 1 Otros_aspectos-Union_Progreso_y_Democracia-N Otros_aspectos-Union_Progreso_y_Democracia-N 2 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-P 1 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-NEU 3 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-N 1 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-NEU 1 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-P 5 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-N 23 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-P 2 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-NEU 5 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-N 2 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-NEU 5 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-P 5 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-N 9 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-P 20 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-NEU 8 Propio_partido-Ciudadanos|Podemos-N Propio_partido-Ciudadanos|Podemos-P 1 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-N 2 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-NEU 2 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-N 11 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-P 3 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-NEU 2 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-N 5 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-P 2 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-P 6 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-N 3 Propio_partido-Izquierda_Unida|Podemos-P Propio_partido-Izquierda_Unida|Podemos-N 1 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-N 63 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-P 6 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-NEU 4 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-N 6 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-NEU 3 Propio_partido-Partido_Popular-P Propio_partido-Partido_Popular-P 5 Propio_partido-Partido_Popular|Ciudadanos-N Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Ciudadanos-NEU Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 3 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-P 1 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-P 4 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-N 23 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 5 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 5 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-P 2 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-P 14 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 4 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-P 2 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1 Propio_partido-Podemos-N Propio_partido-Podemos-N 31 Propio_partido-Podemos-N Propio_partido-Podemos-P 7 Propio_partido-Podemos-N Propio_partido-Podemos-NEU 6 Propio_partido-Podemos-NEU Propio_partido-Podemos-N 5 Propio_partido-Podemos-NEU Propio_partido-Podemos-NEU 3 Propio_partido-Podemos-NEU Propio_partido-Podemos-P 3 Propio_partido-Podemos-P Propio_partido-Podemos-N 10 Propio_partido-Podemos-P Propio_partido-Podemos-NEU 3 Propio_partido-Podemos-P Propio_partido-Podemos-P 7 Propio_partido-Podemos|Izquierda_Unida-NEU Propio_partido-Podemos|Izquierda_Unida-N 3 Propio_partido-Podemos|Partido_Popular-NEU Propio_partido-Podemos|Partido_Popular-P 2 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-P 5 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-N 18 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-NEU 4 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-NEU 6 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-N 5 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-P 4 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-P 21 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-N 23 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-NEU 18 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-N 1 Sanidad-Ciudadanos-N Sanidad-Ciudadanos-N 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-N 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-NEU 1 Sanidad-Union_Progreso_y_Democracia-N Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-P 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-P Sanidad-Union_Progreso_y_Democracia-NEU 1 Category evaluation Cat P R F1 Economia-Ciudadanos-N 0.636 0.700 0.667 Economia-Ciudadanos-NEU 0.333 0.500 0.400 Economia-Ciudadanos-P 0.667 0.400 0.500 Economia-Ciudadanos|Partido_Popular-NEU 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-N 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-NEU 0.667 1.000 0.800 Economia-Izquierda_Unida-N 0.333 1.000 0.500 Economia-Izquierda_Unida-NEU 0.000 0.000 0.000 Economia-Izquierda_Unida-P 0.000 0.000 0.000 Economia-Izquierda_Unida|Podemos-NEU 0.000 0.000 0.000 Economia-Partido_Popular-N 0.714 0.652 0.682 Economia-Partido_Popular-NEU 0.333 1.000 0.500 Economia-Partido_Popular-P 0.375 0.300 0.333 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Economia-Partido_Socialista_Obrero_Espanol-N 0.750 0.333 0.462 Economia-Partido_Socialista_Obrero_Espanol-P 0.000 0.000 0.000 Economia-Podemos-N 1.000 0.167 0.286 Economia-Podemos-NEU 0.000 0.000 0.000 Economia-Podemos-P 0.400 1.000 0.571 Economia-Union_Progreso_y_Democracia-N 0.417 0.714 0.526 Economia-Union_Progreso_y_Democracia-NEU 0.667 0.333 0.444 Economia-Union_Progreso_y_Democracia-P 0.667 0.500 0.571 Educacion-Ciudadanos-N 0.000 0.000 0.000 Educacion-Partido_Popular-N 0.889 0.800 0.842 Educacion-Partido_Popular-NEU 0.400 0.667 0.500 Educacion-Partido_Popular-P 0.000 0.000 0.000 Educacion-Podemos-NEU 0.000 0.000 0.000 Educacion-Podemos-P 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-N 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-NEU 0.333 1.000 0.500 Educacion-Union_Progreso_y_Democracia-P 0.000 0.000 0.000 Otros_aspectos-Ciudadanos-NEU 1.000 0.333 0.500 Otros_aspectos-Ciudadanos-P 0.667 1.000 0.800 Otros_aspectos-Izquierda_Unida-N 0.625 1.000 0.769 Otros_aspectos-Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Izquierda_Unida-P 0.000 0.000 0.000 Otros_aspectos-Partido_Popular-N 1.000 1.000 1.000 Otros_aspectos-Partido_Popular-NEU 1.000 1.000 1.000 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N 0.000 0.000 0.000 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 0.500 0.667 0.571 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 0.500 0.667 0.571 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 1.000 0.333 0.500 Otros_aspectos-Podemos-N 1.000 0.750 0.857 Otros_aspectos-Podemos-P 1.000 1.000 1.000 Otros_aspectos-Podemos|Ciudadanos-N 0.000 0.000 0.000 Otros_aspectos-Union_Progreso_y_Democracia-N 0.667 1.000 0.800 Otros_aspectos-Union_Progreso_y_Democracia-NEU 0.750 0.600 0.667 Otros_aspectos-Union_Progreso_y_Democracia-P 0.833 0.833 0.833 Propio_partido-Ciudadanos-N 0.676 0.767 0.719 Propio_partido-Ciudadanos-NEU 0.278 0.417 0.333 Propio_partido-Ciudadanos-P 0.741 0.541 0.625 Propio_partido-Ciudadanos|Podemos-N 0.000 0.000 0.000 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1.000 1.000 1.000 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Propio_partido-Izquierda_Unida-N 0.579 0.688 0.629 Propio_partido-Izquierda_Unida-NEU 0.500 0.222 0.308 Propio_partido-Izquierda_Unida-P 0.545 0.667 0.600 Propio_partido-Izquierda_Unida|Podemos-P 0.000 0.000 0.000 Propio_partido-Partido_Popular-N 0.913 0.863 0.887 Propio_partido-Partido_Popular-NEU 0.429 0.333 0.375 Propio_partido-Partido_Popular-P 0.455 1.000 0.625 Propio_partido-Partido_Popular|Ciudadanos-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Ciudadanos-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N 0.000 0.000 0.000 Propio_partido-Partido_Socialista_Obrero_Espanol-N 0.920 0.719 0.807 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 0.357 0.625 0.455 Propio_partido-Partido_Socialista_Obrero_Espanol-P 0.700 0.737 0.718 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1.000 1.000 1.000 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1.000 0.333 0.500 Propio_partido-Podemos-N 0.674 0.705 0.689 Propio_partido-Podemos-NEU 0.250 0.273 0.261 Propio_partido-Podemos-P 0.412 0.350 0.378 Propio_partido-Podemos|Izquierda_Unida-NEU 0.000 0.000 0.000 Propio_partido-Podemos|Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Union_Progreso_y_Democracia-N 0.391 0.667 0.493 Propio_partido-Union_Progreso_y_Democracia-NEU 0.214 0.400 0.279 Propio_partido-Union_Progreso_y_Democracia-P 0.700 0.339 0.457 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU 0.000 0.000 0.000 Sanidad-Ciudadanos-N 1.000 1.000 1.000 Sanidad-Partido_Popular-N 1.000 0.500 0.667 Sanidad-Union_Progreso_y_Democracia-N 0.500 1.000 0.667 Sanidad-Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Sanidad-Union_Progreso_y_Democracia-P 0.000 0.000 0.000 Macroaveraged Precision: 0.436 Macroaveraged Recall: 0.459 Macroaveraged F1: 0.447