Evaluation - Task 2 - STOMPOL corpus 654 aspects in qrel, 654 aspects in run. Accuracy: 0.613 Confusion matrix Actual Pred # Economia-Ciudadanos-N Economia-Ciudadanos-NEU 3 Economia-Ciudadanos-N Economia-Ciudadanos-N 7 Economia-Ciudadanos-NEU Economia-Ciudadanos-N 1 Economia-Ciudadanos-NEU Economia-Ciudadanos-NEU 1 Economia-Ciudadanos-P Economia-Ciudadanos-N 5 Economia-Ciudadanos|Partido_Popular-NEU Economia-Ciudadanos|Partido_Popular-P 1 Economia-Ciudadanos|Podemos-N Economia-Ciudadanos|Podemos-NEU 1 Economia-Ciudadanos|Podemos-NEU Economia-Ciudadanos|Podemos-NEU 2 Economia-Izquierda_Unida-N Economia-Izquierda_Unida-N 1 Economia-Izquierda_Unida-NEU Economia-Izquierda_Unida-P 1 Economia-Izquierda_Unida-NEU Economia-Izquierda_Unida-N 1 Economia-Izquierda_Unida-P Economia-Izquierda_Unida-NEU 1 Economia-Izquierda_Unida-P Economia-Izquierda_Unida-N 1 Economia-Izquierda_Unida|Podemos-NEU Economia-Izquierda_Unida|Podemos-N 1 Economia-Partido_Popular-N Economia-Partido_Popular-NEU 2 Economia-Partido_Popular-N Economia-Partido_Popular-N 16 Economia-Partido_Popular-N Economia-Partido_Popular-P 5 Economia-Partido_Popular-NEU Economia-Partido_Popular-P 1 Economia-Partido_Popular-NEU Economia-Partido_Popular-NEU 1 Economia-Partido_Popular-P Economia-Partido_Popular-N 7 Economia-Partido_Popular-P Economia-Partido_Popular-P 2 Economia-Partido_Popular-P Economia-Partido_Popular-NEU 1 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-N 6 Economia-Partido_Socialista_Obrero_Espanol-N Economia-Partido_Socialista_Obrero_Espanol-P 3 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-P 1 Economia-Partido_Socialista_Obrero_Espanol-P Economia-Partido_Socialista_Obrero_Espanol-N 1 Economia-Podemos-N Economia-Podemos-NEU 2 Economia-Podemos-N Economia-Podemos-N 3 Economia-Podemos-N Economia-Podemos-P 1 Economia-Podemos-NEU Economia-Podemos-N 1 Economia-Podemos-P Economia-Podemos-N 2 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-N 6 Economia-Union_Progreso_y_Democracia-N Economia-Union_Progreso_y_Democracia-NEU 1 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-NEU 2 Economia-Union_Progreso_y_Democracia-NEU Economia-Union_Progreso_y_Democracia-N 4 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-N 5 Economia-Union_Progreso_y_Democracia-P Economia-Union_Progreso_y_Democracia-P 3 Educacion-Ciudadanos-N Educacion-Ciudadanos-N 1 Educacion-Ciudadanos-N Educacion-Ciudadanos-P 2 Educacion-Partido_Popular-N Educacion-Partido_Popular-N 8 Educacion-Partido_Popular-N Educacion-Partido_Popular-NEU 2 Educacion-Partido_Popular-NEU Educacion-Partido_Popular-NEU 3 Educacion-Partido_Popular-P Educacion-Partido_Popular-N 1 Educacion-Partido_Popular-P Educacion-Partido_Popular-NEU 1 Educacion-Podemos-NEU Educacion-Podemos-NEU 2 Educacion-Podemos-P Educacion-Podemos-N 1 Educacion-Union_Progreso_y_Democracia-N Educacion-Union_Progreso_y_Democracia-NEU 1 Educacion-Union_Progreso_y_Democracia-NEU Educacion-Union_Progreso_y_Democracia-NEU 1 Educacion-Union_Progreso_y_Democracia-P Educacion-Union_Progreso_y_Democracia-NEU 1 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-NEU 1 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-N 4 Otros_aspectos-Ciudadanos-NEU Otros_aspectos-Ciudadanos-P 1 Otros_aspectos-Ciudadanos-P Otros_aspectos-Ciudadanos-P 2 Otros_aspectos-Izquierda_Unida-N Otros_aspectos-Izquierda_Unida-N 5 Otros_aspectos-Izquierda_Unida-NEU Otros_aspectos-Izquierda_Unida-N 2 Otros_aspectos-Izquierda_Unida-P Otros_aspectos-Izquierda_Unida-P 1 Otros_aspectos-Izquierda_Unida-P Otros_aspectos-Izquierda_Unida-N 1 Otros_aspectos-Partido_Popular-N Otros_aspectos-Partido_Popular-N 8 Otros_aspectos-Partido_Popular-N Otros_aspectos-Partido_Popular-NEU 1 Otros_aspectos-Partido_Popular-NEU Otros_aspectos-Partido_Popular-NEU 1 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-NEU 1 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 2 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 2 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 1 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 1 Otros_aspectos-Podemos-N Otros_aspectos-Podemos-N 3 Otros_aspectos-Podemos-N Otros_aspectos-Podemos-NEU 1 Otros_aspectos-Podemos-P Otros_aspectos-Podemos-P 1 Otros_aspectos-Podemos|Ciudadanos-N Otros_aspectos-Podemos|Ciudadanos-N 1 Otros_aspectos-Union_Progreso_y_Democracia-N Otros_aspectos-Union_Progreso_y_Democracia-N 2 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-P 1 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-NEU 3 Otros_aspectos-Union_Progreso_y_Democracia-NEU Otros_aspectos-Union_Progreso_y_Democracia-N 1 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-NEU 1 Otros_aspectos-Union_Progreso_y_Democracia-P Otros_aspectos-Union_Progreso_y_Democracia-P 5 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-N 22 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-NEU 5 Propio_partido-Ciudadanos-N Propio_partido-Ciudadanos-P 3 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-N 1 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-NEU 7 Propio_partido-Ciudadanos-NEU Propio_partido-Ciudadanos-P 4 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-N 9 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-P 21 Propio_partido-Ciudadanos-P Propio_partido-Ciudadanos-NEU 7 Propio_partido-Ciudadanos|Podemos-N Propio_partido-Ciudadanos|Podemos-P 1 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-N 2 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-N 13 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-P 1 Propio_partido-Izquierda_Unida-N Propio_partido-Izquierda_Unida-NEU 2 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-NEU 2 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-N 5 Propio_partido-Izquierda_Unida-NEU Propio_partido-Izquierda_Unida-P 2 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-NEU 1 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-P 5 Propio_partido-Izquierda_Unida-P Propio_partido-Izquierda_Unida-N 3 Propio_partido-Izquierda_Unida|Podemos-P Propio_partido-Izquierda_Unida|Podemos-N 1 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-N 65 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-P 4 Propio_partido-Partido_Popular-N Propio_partido-Partido_Popular-NEU 4 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-N 6 Propio_partido-Partido_Popular-NEU Propio_partido-Partido_Popular-NEU 3 Propio_partido-Partido_Popular-P Propio_partido-Partido_Popular-P 5 Propio_partido-Partido_Popular|Ciudadanos-N Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Ciudadanos-NEU Propio_partido-Partido_Popular|Ciudadanos-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 1 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 3 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-P 4 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-N 24 Propio_partido-Partido_Socialista_Obrero_Espanol-N Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 4 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 5 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-P 1 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU Propio_partido-Partido_Socialista_Obrero_Espanol-N 2 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-P 14 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-N 2 Propio_partido-Partido_Socialista_Obrero_Espanol-P Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 3 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-P 2 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1 Propio_partido-Podemos-N Propio_partido-Podemos-N 36 Propio_partido-Podemos-N Propio_partido-Podemos-P 4 Propio_partido-Podemos-N Propio_partido-Podemos-NEU 4 Propio_partido-Podemos-NEU Propio_partido-Podemos-N 8 Propio_partido-Podemos-NEU Propio_partido-Podemos-P 2 Propio_partido-Podemos-NEU Propio_partido-Podemos-NEU 1 Propio_partido-Podemos-P Propio_partido-Podemos-N 9 Propio_partido-Podemos-P Propio_partido-Podemos-NEU 3 Propio_partido-Podemos-P Propio_partido-Podemos-P 8 Propio_partido-Podemos|Izquierda_Unida-NEU Propio_partido-Podemos|Izquierda_Unida-N 3 Propio_partido-Podemos|Partido_Popular-NEU Propio_partido-Podemos|Partido_Popular-N 2 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-N 22 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-NEU 3 Propio_partido-Union_Progreso_y_Democracia-N Propio_partido-Union_Progreso_y_Democracia-P 2 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-NEU 7 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-N 6 Propio_partido-Union_Progreso_y_Democracia-NEU Propio_partido-Union_Progreso_y_Democracia-P 2 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-P 24 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-N 21 Propio_partido-Union_Progreso_y_Democracia-P Propio_partido-Union_Progreso_y_Democracia-NEU 17 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-N 1 Sanidad-Ciudadanos-N Sanidad-Ciudadanos-N 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-N 1 Sanidad-Partido_Popular-N Sanidad-Partido_Popular-NEU 1 Sanidad-Union_Progreso_y_Democracia-N Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-P 1 Sanidad-Union_Progreso_y_Democracia-NEU Sanidad-Union_Progreso_y_Democracia-N 1 Sanidad-Union_Progreso_y_Democracia-P Sanidad-Union_Progreso_y_Democracia-NEU 1 Category evaluation Cat P R F1 Economia-Ciudadanos-N 0.538 0.700 0.609 Economia-Ciudadanos-NEU 0.250 0.500 0.333 Economia-Ciudadanos-P 0.000 0.000 0.000 Economia-Ciudadanos|Partido_Popular-NEU 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-N 0.000 0.000 0.000 Economia-Ciudadanos|Podemos-NEU 0.667 1.000 0.800 Economia-Izquierda_Unida-N 0.333 1.000 0.500 Economia-Izquierda_Unida-NEU 0.000 0.000 0.000 Economia-Izquierda_Unida-P 0.000 0.000 0.000 Economia-Izquierda_Unida|Podemos-NEU 0.000 0.000 0.000 Economia-Partido_Popular-N 0.696 0.696 0.696 Economia-Partido_Popular-NEU 0.250 0.500 0.333 Economia-Partido_Popular-P 0.250 0.200 0.222 Economia-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Economia-Partido_Socialista_Obrero_Espanol-N 0.857 0.667 0.750 Economia-Partido_Socialista_Obrero_Espanol-P 0.250 0.500 0.333 Economia-Podemos-N 0.500 0.500 0.500 Economia-Podemos-NEU 0.000 0.000 0.000 Economia-Podemos-P 0.000 0.000 0.000 Economia-Union_Progreso_y_Democracia-N 0.400 0.857 0.545 Economia-Union_Progreso_y_Democracia-NEU 0.667 0.333 0.444 Economia-Union_Progreso_y_Democracia-P 1.000 0.375 0.545 Educacion-Ciudadanos-N 1.000 0.333 0.500 Educacion-Partido_Popular-N 0.889 0.800 0.842 Educacion-Partido_Popular-NEU 0.500 1.000 0.667 Educacion-Partido_Popular-P 0.000 0.000 0.000 Educacion-Podemos-NEU 1.000 1.000 1.000 Educacion-Podemos-P 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-N 0.000 0.000 0.000 Educacion-Union_Progreso_y_Democracia-NEU 0.333 1.000 0.500 Educacion-Union_Progreso_y_Democracia-P 0.000 0.000 0.000 Otros_aspectos-Ciudadanos-NEU 1.000 0.167 0.286 Otros_aspectos-Ciudadanos-P 0.667 1.000 0.800 Otros_aspectos-Izquierda_Unida-N 0.625 1.000 0.769 Otros_aspectos-Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Izquierda_Unida-P 1.000 0.500 0.667 Otros_aspectos-Partido_Popular-N 1.000 0.889 0.941 Otros_aspectos-Partido_Popular-NEU 0.500 1.000 0.667 Otros_aspectos-Partido_Popular|Partido_Socialista_Obrero_Espanol|Podemos|Ciudadanos|Izquierda_Unida-N 0.000 0.000 0.000 Otros_aspectos-Partido_Popular|Union_Progreso_y_Democracia|Izquierda_Unida-NEU 0.000 0.000 0.000 Otros_aspectos-Partido_Socialista_Obrero_Espanol-N 0.500 0.667 0.571 Otros_aspectos-Partido_Socialista_Obrero_Espanol-NEU 0.500 0.667 0.571 Otros_aspectos-Partido_Socialista_Obrero_Espanol-P 1.000 0.333 0.500 Otros_aspectos-Podemos-N 1.000 0.750 0.857 Otros_aspectos-Podemos-P 1.000 1.000 1.000 Otros_aspectos-Podemos|Ciudadanos-N 1.000 1.000 1.000 Otros_aspectos-Union_Progreso_y_Democracia-N 0.667 1.000 0.800 Otros_aspectos-Union_Progreso_y_Democracia-NEU 0.750 0.600 0.667 Otros_aspectos-Union_Progreso_y_Democracia-P 0.833 0.833 0.833 Propio_partido-Ciudadanos-N 0.688 0.733 0.710 Propio_partido-Ciudadanos-NEU 0.368 0.583 0.452 Propio_partido-Ciudadanos-P 0.750 0.568 0.646 Propio_partido-Ciudadanos|Podemos-N 0.000 0.000 0.000 Propio_partido-Ciudadanos|Podemos|Izquierda_Unida-N 1.000 1.000 1.000 Propio_partido-Ciudadanos|Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Propio_partido-Izquierda_Unida-N 0.619 0.813 0.703 Propio_partido-Izquierda_Unida-NEU 0.400 0.222 0.286 Propio_partido-Izquierda_Unida-P 0.625 0.556 0.588 Propio_partido-Izquierda_Unida|Podemos-P 0.000 0.000 0.000 Propio_partido-Partido_Popular-N 0.915 0.890 0.903 Propio_partido-Partido_Popular-NEU 0.429 0.333 0.375 Propio_partido-Partido_Popular-P 0.556 1.000 0.714 Propio_partido-Partido_Popular|Ciudadanos-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Ciudadanos-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-N 0.500 1.000 0.667 Propio_partido-Partido_Popular|Izquierda_Unida|Partido_Socialista_Obrero_Espanol-NEU 0.000 0.000 0.000 Propio_partido-Partido_Popular|Partido_Socialista_Obrero_Espanol-N 1.000 1.000 1.000 Propio_partido-Partido_Popular|Union_Progreso_y_Democracia-N 1.000 1.000 1.000 Propio_partido-Partido_Socialista_Obrero_Espanol-N 0.857 0.750 0.800 Propio_partido-Partido_Socialista_Obrero_Espanol-NEU 0.417 0.625 0.500 Propio_partido-Partido_Socialista_Obrero_Espanol-P 0.737 0.737 0.737 Propio_partido-Partido_Socialista_Obrero_Espanol|Ciudadanos-N 1.000 1.000 1.000 Propio_partido-Partido_Socialista_Obrero_Espanol|Partido_Popular-N 1.000 0.333 0.500 Propio_partido-Podemos-N 0.679 0.818 0.742 Propio_partido-Podemos-NEU 0.125 0.091 0.105 Propio_partido-Podemos-P 0.571 0.400 0.471 Propio_partido-Podemos|Izquierda_Unida-NEU 0.000 0.000 0.000 Propio_partido-Podemos|Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Podemos|Partido_Socialista_Obrero_Espanol|Partido_Popular-NEU 0.000 0.000 0.000 Propio_partido-Union_Progreso_y_Democracia-N 0.449 0.815 0.579 Propio_partido-Union_Progreso_y_Democracia-NEU 0.259 0.467 0.333 Propio_partido-Union_Progreso_y_Democracia-P 0.857 0.387 0.533 Propio_partido-Union_Progreso_y_Democracia|Ciudadanos-NEU 0.000 0.000 0.000 Sanidad-Ciudadanos-N 1.000 1.000 1.000 Sanidad-Partido_Popular-N 1.000 0.500 0.667 Sanidad-Union_Progreso_y_Democracia-N 0.500 1.000 0.667 Sanidad-Union_Progreso_y_Democracia-NEU 0.000 0.000 0.000 Sanidad-Union_Progreso_y_Democracia-P 0.000 0.000 0.000 Macroaveraged Precision: 0.480 Macroaveraged Recall: 0.500 Macroaveraged F1: 0.490