Evaluation - Task 2 - STOMPOL corpus 654 aspects in qrel, 653 aspects in run. Accuracy: 0.633 Confusion matrix Actual Pred # Economia-Ciudadanos-N Economia-Ciudadanos-N 8 Economia-Ciudadanos-N Economia-Ciudadanos-P 1 Economia-Ciudadanos-N ? 1 Economia-Ciudadanos-NEU Economia-Ciudadanos-N 1 Economia-Ciudadanos-NEU Economia-Ciudadanos-NEU 1 Economia-Ciudadanos-P Economia-Ciudadanos-N 2 Economia-Ciudadanos-P Economia-Ciudadanos-NEU 1 Economia-Ciudadanos-P Economia-Ciudadanos-P 2 Economia-Ciudadanos|Partido_Popular-NEU Economia-Ciudadanos|Partido_Popular-P 1 Economia-Ciudadanos|Podemos-N Economia-Ciudadanos|Podemos-NEU 1 Economia-Ciudadanos|Podemos-NEU Economia-Ciudadanos|Podemos-N 2 Economia-Izquierda_Unida-N Economia-Izquierda_Unida-N 1 Economia-Izquierda_Unida-NEU Economia-Izquierda_Unida-N 2 Economia-Izquierda_Unida-P Economia-Izquierda_Unida-N 2 Economia-Izquierda_Unida|Podemos-NEU Economia-Izquierda_Unida|Podemos-N 1 Economia-Partido_Popular-N Economia-Partido_Popular-N 22 Economia-Partido_Popular-N Economia-Partido_Popular-P 1 Economia-Partido_Popular-NEU Economia-Partido_Popular-N 2 Economia-Partido_Popular-P Economia-Partido_Popular-N 6 Economia-Partido_Popular-P Economia-Partido_Popular-P 4 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-N 8 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-P 1 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-P 1 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-N 1 Economia-Podemos-N Economia-Podemos-N 6 Economia-Podemos-NEU Economia-Podemos-P 1 Economia-Podemos-P Economia-Podemos-P 2 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-N 6 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-P 1 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-NEU 1 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-N 4 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-P 1 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-P 4 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-N 4 Educacion-Ciudadanos-N Educacion-Ciudadanos-NEU 1 Educacion-Ciudadanos-N Educacion-Ciudadanos-N 2 Educacion-Partido_Popular-N Educacion-Partido_Popular-N 9 Educacion-Partido_Popular-N Educacion-Partido_Popular-NEU 1 Educacion-Partido_Popular-NEU Educacion-Partido_Popular-NEU 2 Educacion-Partido_Popular-NEU Educacion-Partido_Popular-P 1 Educacion-Partido_Popular-P Educacion-Partido_Popular-P 1 Educacion-Partido_Popular-P Educacion-Partido_Popular-NEU 1 Educacion-Podemos-NEU Educacion-Podemos-N 1 Educacion-Podemos-NEU Educacion-Podemos-NEU 1 Educacion-Podemos-P Educacion-Podemos-N 1 Educacion-Union_Progreso_y_Democracia-N Educacion-Union_Progreso_y_Democracia-N 1 Educacion-Union_Progreso_y_Democracia-NEU Educacion-Union_Progreso_y_Democracia-N 1 Educacion-Union_Progreso_y_Democracia-P Educacion-Union_Progreso_y_Democracia-N 1 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-NEU 1 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-N 5 Otros_aspectos-Ciudadanos-P Otros_aspectos-Ciudadanos-P 2 Otros_aspectos-Izquierda_Unida-N Otros_aspectos-Izquierda_Unida-N 2 Otros_aspectos-Izquierda_Unida-N Otros_aspectos-Izquierda_Unida-P 3 Otros_aspectos-Izquierda_Unida-NEU Otros_aspectos-Izquierda_Unida-N 2 Otros_aspectos-Izquierda_Unida-P Otros_aspectos-Izquierda_Unida-N 2 Otros_aspectos-Partido_Popular-N Otros_aspectos-Partido_Popular-N 9 Otros_aspectos-Partido_Popular-NEU Otros_aspectos-Partido_Popular-N 1 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N 1 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 3 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 2 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Podemos-N Otros_aspectos-Podemos-N 4 Otros_aspectos-Podemos-P Otros_aspectos-Podemos-P 1 Otros_aspectos-Podemos|Ciudadanos-N Otros_aspectos-Podemos|Ciudadanos-N 1 Otros_aspectos-Union_Progreso_y_Democracia-N Otros_aspectos-Union_Progreso_y_Democracia-N 2 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-N 2 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-NEU 3 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-N 2 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-P 4 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-N 29 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-P 1 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-N 12 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-N 15 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-P 17 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-NEU 5 Propio_partido-Ciudadanos|Podemos-N Propio_partido-Ciudadanos|Podemos-N 1 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-N 2 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-N 14 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-NEU 1 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-P 1 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-NEU 2 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-N 6 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-P 1 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-P 5 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-N 3 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-NEU 1 Propio_partido-Izquierda_Unida|Podemos-P Propio_partido-Izquierda_Unida|Podemos-P 1 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-N 67 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-P 4 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-NEU 2 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-N 8 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-P 1 Propio_partido-Partido_Popular-P Propio_partido-Partido_Popular-P 4 Propio_partido-Partido_Popular-P Propio_partido-Partido_Popular-N 1 Propio_partido-Partido_Popular|Ciudadanos-N Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Ciudadanos-NEU Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 3 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-N 26 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-P 4 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 2 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-N 5 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 1 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-P 2 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-P 11 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-N 6 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 2 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 3 Propio_partido-Podemos-N Propio_partido-Podemos-N 40 Propio_partido-Podemos-N Propio_partido-Podemos-P 2 Propio_partido-Podemos-N Propio_partido-Podemos-NEU 2 Propio_partido-Podemos-NEU Propio_partido-Podemos-N 11 Propio_partido-Podemos-P Propio_partido-Podemos-N 15 Propio_partido-Podemos-P Propio_partido-Podemos-NEU 3 Propio_partido-Podemos-P Propio_partido-Podemos-P 2 Propio_partido-Podemos|Izquierda_Unida-NEU Propio_partido-Podemos|Izquierda_Unida-P 3 Propio_partido-Podemos|Partido_Popular-NEU Propio_partido-Podemos|Partido_Popular-NEU 2 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-N 25 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-P 2 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-NEU 8 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-N 4 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-P 3 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-P 26 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-N 22 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-NEU 14 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-N 1 Sanidad-Ciudadanos-N Sanidad-Ciudadanos-NEU 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-N 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-NEU 1 Sanidad-Union_Progreso_y_Democracia-N Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-P 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-P Sanidad-Union_Progreso_y_Democracia-P 1 Category evaluation Cat P R F1 Economia-Ciudadanos-N 0.727 0.800 0.762 Economia-Ciudadanos-NEU 0.500 0.500 0.500 Economia-Ciudadanos-P 0.667 0.400 0.500 Economia-Ciudadanos|Partido_Popular-NEU 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-N 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-NEU 0.000 0.000 0.000 Economia-Izquierda_Unida-N 0.200 1.000 0.333 Economia-Izquierda_Unida-NEU 0.000 0.000 0.000 Economia-Izquierda_Unida-P 0.000 0.000 0.000 Economia-Izquierda_Unida|Podemos-NEU 0.000 0.000 0.000 Economia-Partido_Popular-N 0.733 0.957 0.830 Economia-Partido_Popular-NEU 0.000 0.000 0.000 Economia-Partido_Popular-P 0.800 0.400 0.533 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Economia-Partido_Socialista_Obrero_Espanol-N 0.889 0.889 0.889 Economia-Partido_Socialista_Obrero_Espanol-P 0.500 0.500 0.500 Economia-Podemos-N 1.000 1.000 1.000 Economia-Podemos-NEU 0.000 0.000 0.000 Economia-Podemos-P 0.667 1.000 0.800 Economia-Union_Progreso_y_Democracia-N 0.429 0.857 0.571 Economia-Union_Progreso_y_Democracia-NEU 1.000 0.167 0.286 Economia-Union_Progreso_y_Democracia-P 0.667 0.500 0.571 Educacion-Ciudadanos-N 1.000 0.667 0.800 Educacion-Partido_Popular-N 1.000 0.900 0.947 Educacion-Partido_Popular-NEU 0.500 0.667 0.571 Educacion-Partido_Popular-P 0.500 0.500 0.500 Educacion-Podemos-NEU 1.000 0.500 0.667 Educacion-Podemos-P 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-N 0.333 1.000 0.500 Educacion-Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-P 0.000 0.000 0.000 Otros_aspectos-Ciudadanos-NEU 1.000 0.167 0.286 Otros_aspectos-Ciudadanos-P 1.000 1.000 1.000 Otros_aspectos-Izquierda_Unida-N 0.333 0.400 0.364 Otros_aspectos-Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Izquierda_Unida-P 0.000 0.000 0.000 Otros_aspectos-Partido_Popular-N 0.900 1.000 0.947 Otros_aspectos-Partido_Popular-NEU 0.000 0.000 0.000 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N 1.000 1.000 1.000 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 0.600 1.000 0.750 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1.000 0.333 0.500 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 0.667 0.667 0.667 Otros_aspectos-Podemos-N 1.000 1.000 1.000 Otros_aspectos-Podemos-P 1.000 1.000 1.000 Otros_aspectos-Podemos|Ciudadanos-N 1.000 1.000 1.000 Otros_aspectos-Union_Progreso_y_Democracia-N 0.333 1.000 0.500 Otros_aspectos-Union_Progreso_y_Democracia-NEU 1.000 0.600 0.750 Otros_aspectos-Union_Progreso_y_Democracia-P 1.000 0.667 0.800 Propio_partido-Ciudadanos-N 0.518 0.967 0.674 Propio_partido-Ciudadanos-NEU 0.000 0.000 0.000 Propio_partido-Ciudadanos-P 0.944 0.459 0.618 Propio_partido-Ciudadanos|Podemos-N 1.000 1.000 1.000 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1.000 1.000 1.000 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Propio_partido-Izquierda_Unida-N 0.609 0.875 0.718 Propio_partido-Izquierda_Unida-NEU 0.500 0.222 0.308 Propio_partido-Izquierda_Unida-P 0.714 0.556 0.625 Propio_partido-Izquierda_Unida|Podemos-P 1.000 1.000 1.000 Propio_partido-Partido_Popular-N 0.882 0.918 0.899 Propio_partido-Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular-P 0.444 0.800 0.571 Propio_partido-Partido_Popular|Ciudadanos-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Ciudadanos-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N 1.000 1.000 1.000 Propio_partido-Partido_Socialista_Obrero_Espanol-N 0.703 0.813 0.754 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 0.200 0.125 0.154 Propio_partido-Partido_Socialista_Obrero_Espanol-P 0.647 0.579 0.611 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1.000 1.000 1.000 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1.000 1.000 1.000 Propio_partido-Podemos-N 0.606 0.909 0.727 Propio_partido-Podemos-NEU 0.000 0.000 0.000 Propio_partido-Podemos-P 0.500 0.100 0.167 Propio_partido-Podemos|Izquierda_Unida-NEU 0.000 0.000 0.000 Propio_partido-Podemos|Partido_Popular-NEU 1.000 1.000 1.000 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Union_Progreso_y_Democracia-N 0.490 0.926 0.641 Propio_partido-Union_Progreso_y_Democracia-NEU 0.364 0.533 0.432 Propio_partido-Union_Progreso_y_Democracia-P 0.839 0.419 0.559 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU 0.000 0.000 0.000 Sanidad-Ciudadanos-N 0.000 0.000 0.000 Sanidad-Partido_Popular-N 1.000 0.500 0.667 Sanidad-Union_Progreso_y_Democracia-N 0.500 1.000 0.667 Sanidad-Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Sanidad-Union_Progreso_y_Democracia-P 0.500 1.000 0.667 Macroaveraged Precision: 0.522 Macroaveraged Recall: 0.531 Macroaveraged F1: 0.526