Riformare l'Anvur

Riformare l’Anvur
Francesco Sylos Labini

Centro Enrico Fermi &
Istituto dei Sistemi Complessi,
CNR, Roma

1

ANVUR è una
«agenzia amministrativa»
«SOTTOPOSTA ALLA VIGILANZA
DEL MINISTRO»

(art. 1, comma 3, del D.P.R. 76/2010)

Compiti Anvur

• Valutazione strutture (VQR)
• Valutazione docenti (ASN)
• Accreditamento corsi di laurea (AVA)

Problema Anvur

Non è un problema burocratico o
un problema di risorse e/o di personale:

Problema Anvur

Non è un problema burocratico o
un problema di risorse e/o di personale:

Il problema è architettonico oltre che di
competenze specifiche delle persone

Chi valuta la ricerca?

• Il ministro stabilisce le regole
tecniche della valutazione
• La griglia di valutazione per la VQR (50:10:20:20)
• I punteggi per i singoli prodotti (1:0,8;0,5;0)
• Le penalizzazioni (-0,5) per ogni prodotto mancante

• Confusione di ruoli istituzionali (i
valutatori dettano le policy, il ministro le regole per la
valutazione)

E chi nomina i valutatori?
• I 7 membri del consiglio direttivo sono nominati
dal ministro da una rosa scelta da un comitato.
• I 7 membri hanno nominato i presidenti dei GEV
• I 7 membri ed il presidente di ogni GEV hanno
nominato i membri dei GEV
• Il presidente di ogni GEV con i membri dei GEV
hanno nominato i revisori della VQR
• I 7 membri hanno nominato i GDL per le liste di
riviste delle abilitazioni


Politica Valutazione

Ricerca


Politica

Ricerca

Is there a ranked list of
institutions’ results?

RAE2008 results are in the form
of a quality profile for each
submission made by an HEI. We
have not produced any ranked
lists of single scores for
institutions or UoAs, and nor do
we intend to.

bibliometry

VQR: gli indicatori bibliometrici

Report on the pilot exercise to
develop bibliometric indicators
for the REF • l’Impact Factor di Journal
Citation Reports di Thomson
Reuters (IF) della rivista nell’anno
di pubblicazione;
Bibliometrics are not sufficiently
robust at this stage to be used
formulaically or to replace expert • il numero di citazioni ricevute dal
review in the REF prodotto fino al 31 dicembre 2011;

!" Z Z Z =U F S S K X U NL MNI J L V K E K J F =U F S
, - . ! / 0 ! 1 / ###0 - ! ###0 / 2 2 / . ! ###1 / 3 3 - . 1 ! 4 5 ! 6 2 !
- ##0 - 7 5 ! ##- 6 , - . 2 ! ##1 / 8 2 4 9 ! 5 ! ##0 - 5 5 - ##2 . - ##: - 8 - ; ! -
+ E E F %G # $ $ $ %H%) =%? ; 1 %H%# 6 " # $ & %0%+ " & 2 * & %! C C ;
7 F I J K % J L MNL E K % O L % 2 O K P NQ NF E K %NE %+ R R F E L S K E J F %7 F I J L MK %- =# =%/ 4 / 0! C C /
$ I
NE # !
H% % %
E 1 % ? U
%
? %
%
TU F E V =% % =% 5 0C ! 0! C C 1 % =% B W%L X J =% Y% F S S L % Y%- 9 3 %. NU KE Q L
%
%

4 ##< = 4 8 0 /
5 >! 2 4 5 ! 4 8 ##0 . - 4 3 ?
0
@AAB% ' C D( @#E & AA) #' C ) + ' ) #" % F P N%, + 2 2 $ , & %- + %' (
% % % M] #@#+& O D* & #@E #@H +DA& # ^ ^ _ ` #& #' N DA% H H @F
* & +) # ' & * G + @# H @' ' @( ) # % " + & # ' ( D* ) AD# J D' C @AD# & # * ) " & ( @+D# H & +# C ) " ( & F
' & C ) A) # * @# ' ) " ) # ' ) A) # % " @ " & +& #DA#+@AA& " ( @* & " ( ) #& C ) " ) * DC ) #O A) G @F
* @" C D@( @#E D#* & ' DI #8 & A#J +@( F A& Q#- #" ) D? #, +) J & ' ' D) " D' ( D#' % A#C @* H ) #C ) * &
( & * H ) # ' D# ' ) " ) # ' % C C & E % ( & C D# H ) + + & * ) # D" # $ % & ' ( ) # C ) " ( & ' ( ) ? # = " @
AB& ' H A) ' D) " & # E & AA@# C + D' D# J D" @" K D@+ D@# @" F H +D* @# + D' H ) ' ( @# * & # AB@' H & ( ( ) # E @A# " ) ' ( +)
C L & #D" #- % +) H @#& #A@#C + D' D#E & AA& #G ) + ' & #* ) " F , + & ' DE & " ( & # D" # ) C C @' D) " & # E & AA@ # H + D* @
E D@ADM# A& # * D" @C C & M# " ) " # ( @" ( ) # N & A@( & M# E D 1 ) " J & +& " K @# 4 " " % @A& # E & D# 0 ) ( ( ) +D# 1 ) * F
% " @#+& C & ' ' D) " & #& C ) " ) * DC @#O A) G @A& #& #AB& A& F * & +C D@AD' ( D#& E #- ' H & +( D#1 ) " ( @G DAD#E & AABa a
K D) " & # E & A# " % ) N ) # , +& ' DE & " ( & # E & O AD# 6 ( @( D " ) N & * G +& # ^ ^ b #D" #C % D#@% ' H DC ) #H ) ' ' @" )
= " D( D#E B4 * & + DC @#9 @+@C P #/ G @* @Q & ' ' & +& #E & AD" & @( & #H + ) H ) ' ( & #) H & + @( DN & # H & +
3 D#' ) J J & +* & + R #G +& N & * & " ( & #' % D#H +D* D#E % & % ' C D+& #E @AA@#C + D' D#C L & #C ) * H + & " E @" ) M#) AF
& N & " ( D# C L & # ' DC % + @ * & " ( & # C D# ' ) " ) # H DS ( +& #@AA& #* D' % + & #J D' C @AD#D" C & " ( DN @" ( D##@#' ) F
C ) " O & " D@ADM#" ) ( @" E ) #' ) A) #C L & #AB& A& K D) " & ' ( & O " ) # E D# D* H + & ' & # & # J @* DO AD& # & # * D' % +&
E D#9 @+ @C P #/ G @* @M##H & + #C ) * & #@N N & " % ( @#& H & + M# AB@% ' H DC @( @# E @# ( & * H ) M# ' & * H ADJ DC @F
H & + # DA# C ) " ' & " ' ) # ) ( ( & " % ( ) M# H + ) N @# C L & # DA K D) " & # & # + @K D) " @ADK K @K D) " & # E & A# ' D' ( & * @
' ) O " ) #@* & +DC @" ) #T #@" C ) + @#G & " #N DN ) Q#. DF ( +DG % ( @+ D) M#@" C L & #' H % " ( D#E D#+DJ A& ' ' D) " & #H & +
J A& ( ( & " E ) #' & " K @#& " ( + @+ & #" & A#* & + D( ) #H ) ADF ' % H & +@+& #D#AD* D( D#E & A#' D' ( & * @#& C ) " ) * DC )
( DC ) #* @# D" # $ % & AA) #C DN DC ) #* D# C L D& E ) U#V 4 & # J D" @" K D@+ D) # ' ) H + @( ( % ( ( ) # D" # ( & + * D" D# E D
$ % @" E ) # % " # O + @" E & # ' ) O " ) # D( @AD@" ) ? W Q ! " # $ %& ' & ( $ #E & AABD* H +& ' @#& #" & AA& #* ) E @F
V < % @" E ) # N & E + & * ) # % " @# H @+ ( & C DH @K D) " & AD( c # E D#& ' & +C DK D) # E & AAB@( ( DN D( c # E D#C ) " ( +) AF
@E #% " @#C @* H @O " @#& A& ( ( ) +@A& #E D#( @A#H ) + ( @F A) Q# 4 " C L & # C ) ' d# H & +' & O % D+& * ) # $ % & AAB) G F
( @#&#J DA& #E @N @" ( D#@D#' & O O D#E D#O D) N @" D#& #* & " ) G D& ( ( DN ) #E D#V @C C + & E D( @* & " ( ) #' ) C D@A& W#C L &
O D) N @" D#H & + #) +& #C ) " N D" ( D#E D#H ) ( & +#J @+ & #A@ ( % ( ( D#C D# @% O % + D@* ) # & # C L & # C ) " ' & " ( D+c # @" F
E DJ J & +& " K @M#E D#C ) " ( @+& #C ) " #& " ( % ' D@' * ) #& H & " ' @+& # AB& C ) " ) * D@# ( ) ( @A* & " ( & # E DN & + ' ) * & +C @( ) M# * @# +DJ A& ( ( & # DA# J @AAD* & " ( ) # E D# % " C L & # @# " ) D# H + ) J & ' ' D) " D' ( D# E & AAB& C ) " ) * D@
N D' D) " & # H ) ' D( DN @ # H & + # DA# J % ( % + ) ? W# F # 3 D E @#$ % & AA) #J D" ) +@#@E ) ( ( @( ) Q#, +D* @#E D#H @+ A@F * & +C @( ) #A& #C % D#+ & O ) A& #' ) " ) #' ( @( & #E & ( ( @( & E D# H +) H ) + +& # & # H @+ ( & C DH @+ & # @AA) # ' N DA% H H )
@% O % + ) # N & + @* & " ( & # H +& ' ( ) I +& # E D# J D" & # E & A# C @H D( @AD' * ) M# ) # E D# C & +C @+& E @AAB@' ' & " K @# E D# % " # +@H H ) + ( ) # & $ % DADG +@( ) E & A#" ) ' ( + ) #, @& ' & #@A#H @+D#E & AA& #@A( +& #J ) + K &
- #N & " D@* ) #@#" ) DQ#5 @#C +D' D#J D" @" K D@+D@M#& #E D E D' H & +@( @* & " ( & # X & Y " & ' M# G D' ) O " @# H & " ' @F ( +@#H ) AD( DC @#& #@J J @+ DQ & C ) " ) * DC L & Q
C ) " ' & O % & " K @#D#' % ) D#+DJ A& ' ' D#' % AAB& C ) " ) * D@ +& #' & +D@* & " ( & #@#C ) * & #% ' C D+& #E @AA@#C +D' DQ ! " # ' & " ' ) # H DS # @* H D) # ' DC % +@* & " ( & # D# N @+ D 5 @# J ) ( ) U# % " >& J J DC @C & # A) C @" E D" @# E & A# J DA*
+& @A& M#+& " E & #% +O & " ( & #% " @#+DJ A& ' ' D) " & #' % #% " < % @" ( ) #@C C @E % ( ) #" ) " #E & N & #& ' ' & +& #D" ( & + F 7 ) N & + " D#& #A& #! ' ( D( % K D) " D#Z D" @" K D@+ D& #) H & F D" E DH & " E & " ( & # E D# 6 @ " E + ) # 9 @AE ) " D# [ ^ ^ e ` M
* ) E ) # E D# H + ) E % + +& M# E D# J @+ & # * & + C @( ) M# E D H + & ( @( ) # C ) * & # DA# J @AAD* & " ( ) # E & A# ADG & + ) + & + @" " ) #H & +#+DE % ++ & #D#( @' ' D#[ ' D#H @+ A@#E D#% " ) *' +, ' & - . %$ ' / Q

! A#' @H & +& #' ) C D& ( @+D) M#% " #C ) AA@" ( & ! " # # $%& % ' ( ) * + # % , - . $%* . $$% / . ( ) * . * 0 " %+ ( ) * ' " & % 1 )
) F E % % % X NS L % F MJ L #C L & #$ % & ' ( @#. DN D' ( @#) J J +& #A@#6 % @#C ) AA@G ) +@K D) " & #H & +#A@#E DJ J % ' D) " &
[ ML O V & ' $ ( ) * + , ( ) * & %%- ( # %%9 & , $ * + * &
C @H DAA@+& #E & O AD#/ +D& " ( @* & " ( D#6 ) C D& ( @+D#E & A#8 ) ( @+D@( ) # 2 +DN & " & ( ) M#C ) ' d#C ) " J & +* @" E ) #E D * ' $ . ( ) ( * & %%- ( $ %%) & * + $
& ' ' & +& #% " #& J J DC @C & #& #N @ADE ) #' ( +% * & " ( ) #E D#( & * H & ' ( DN @#E DN % AO @K D) " & #O D% +DE DC @M#D" E DH & " F
E & " ( & #& #@% ( ) +& N ) A& M#' & * H + &#@( ( & " ( ) #& #H +) " ( ) #@#E @+#C ) " ( ) #E & AA& #E DN & +' & #N ) C D#E & A#H @" ) F $ ) %%, + * ( ' $ + %%- $ %% * * $ %%2 & 9 $ ( * + ' $
+
+@* @# C % A( % +@A& # D" # @* G D( ) # ' ) C D& ( @+D) Q#4 # $ % & ' ( @# D* H ) +( @" ( & # N ) C @K D) " & # ' & " ( ) # E D# E ) N & +
+& " E & +& # * & +D( ) M# ' ) H +@( ( % ( ( ) # D" # $ % & ' ( ) # H @+( DC ) A@+&# * ) * & " ( ) # ' ( ) +DC ) M# H & +C L T #C ) " ( +DG % DF
' C &#@#C ) " ' ) ADE @+& #AB) H D" D) " & #E D#$ % @" ( DM#D) #( +@#$ % & ' ( DM#+D( & " O ) " ) #C L & #DA#' @H & +&#' ) C D&( @+ D) #' D@
! " ##$ %&' () ##" %* &+)
% " # C ) AA@" ( & # C L & # % " D' C & # A& # E DN & +' & # H +) J & ' ' D) " @AD( c # E & D# 1 ) * * & +C D@AD' ( D# & # E & D# 8 ) ( @DM ! " # $ %& ' $ ( ) * + , ( ) * $ %- ( $ %) & * + $ %- ( # %* ' $ . ( ) ( * &
@% ' H DC @G DA* & " ( & #) O " % " @# " & A# ' % ) # ' H & C DJ DC ) # C @* H ) # E D# D" ( & +N & " ( ) M# H & +# E @+ & # C ) +H ) # @AA@ / 01 $ ) * ( ' . $ 2 * + %%+ %%' & 3 ( ' * & %2 $ + " ' $
H +& K D) ' @#D" ( & +@K D) " & #+& C DH +) C @#@#N @" ( @O O D) #E & D#C D( ( @E D" D#& #E & AA& #D* H +& ' & Q#. DN ) AO ) #$ % D" F
4 05 ) 6 & . $ %# $ , $ * $ %7 ( ' %# + %- ( - 6 8 $ & ) ( %- ( " # $ %$ ) * ( ' ( 2 2 $
E D# % " # ' D" C & + ) # +D" O +@K D@* & " ( ) # @A# 1 ) * D( @( ) # E D# . & E @K D) " & # & # @A# ' % ) # 0 D+& ( ( ) + & # H & + # A@
E D' H ) " DG DAD( c # E D* ) ' ( +@( @M# & # +D* @" E ) # D# A& ( ( ) +D# @AA& # @A( +& # H @O D" &# E D# $ % & ' ( @# . DN D' ( @# H & + 7 + 2 2 $ . $ %%- ( # # ( %2 & 9 $ ( * : %- $ %9 + 7 $ * + # (
ABDAA% ' ( +@K D) " & # E & AA& # * @O O D) +D# " ) N D( c # E & D# " ) ' ( +D# / +D& " ( @* & " ( D# 6 ) C D& ( @+ DM# ( % ( ( D# ' & * H +& ; 9 ( 2 2 $ & ) ( %< 6 & * ( %2 =' =# =
D* H +) " ( @( D#@#J @N ) +D+& #A@#' & * H ADJ DC @K D) " & #" & A#+ DO ) +) ' ) #+D' H & ( ( ) #E & AA@#C & + ( & K K @#O D% +DE DC @Q > 0? ? # @( # 6 2 $ & ) ( %A $ 2 9 + # ( %) ( # # ( %& 7 ( ' + 8 $ & ) $ %2 * ' + & ' - $ ) + ' $ (
# ( X E K I J F %, L X U NL E F ?! $ ' + 7 %( %+ 6 * & ) & , + %& ' " + ) $ 8 8 + 8 $ & ) (
###- - - 0 %$ 1 , 2 $ & *$ - 2 $ +- 3 " / , *' *" - ) & *$ %%$ ! , " & ' +$ - 2 $ , - 3 " & 1 , ! +, - 4 " *' %, +, - 2 $ ++$ - 5 %$ - 6 $ & $ 7 , $ ? / 0? 1 + * * $ %) & * + ' $ # $ %$ ) %* ' $ . ( ) ( * & %( %$ ) %$ * + # $ +
? 4 0? B 7 ( ' - $ * + %2 6 %9 ' ( - $ * $ %$ ) %7 ' ( 2 ( ) 8 + %- $ %7 ' & 9 ( - 6 ' +
$ M% F I J L E J K % % J J KE J F % J K X K I I K #C L & #) +- 3 " / / $ %( , ' +, 1 *' - 6 $ & $ *" #L @#+D' & +N @( ) #" & O AD#% A( D* D
U KL NE A+ # # $, ( ) * + ' (
@" " D#@O AD#) +D& " ( @* & " ( D#& ' H +& ' ' D#E @A#8 ) ( @+D@( ) #E & A#2 +DN & " & ( ) #D" #* @( & +D@#' ) C D& ( @+D@#T #A@ ? 5 0? ; * ' + 2 A ( ' $ , ( ) * & %- $ %2 & 9 $ ( * : %2 * ' + ) $ ( ' + %$ ) %$ * + # $ +
* D' % +@#' D@#E & A#N @A) +& #' C D& " ( DJ DC ) #E & O AD#@H H +) J ) " E D* & " ( D#' N DA% H H @( D#E @D#8 ) ( @D#C L & #E & AA@ ? > 0! C + %< 6 + ) - & %$ ) %. $ " & ' ( %# + %) 6 & . + %* + ' $ A A +
C ) " ' DE & +@K D) " & #C L & #A@#" ) ' ( +@#, +) J & ' ' D) " & #+DN ) AO & #A) +) Q#! A#* D) #@% ' H DC D) #T #C L & #D" DK D@( DN &
C ) * & #$ % & ' ( @#' D@" ) #% " @#G @' &#E @#C % D#H @+( D+& #H & +#' N DA% H H @+& #" % ) N & #& #H + ) J DC % & #) C C @' D) " D 7 ' & A ( 2 2 $& ) + # ( % - ( $% - & * * & ' $% 9 & , , ( ' 9 $+ # $2 * $D
E D#C ) " J +) " ( ) #& #' C @* G D) #H +) J & ' ' D) " @A& M#C ) * & #H & +@A( +) #* D#H @+& #D* H ADC D( ) #" & AA& #H @+) A& #E & A ! ? 0! ! # ( %" $ & ' ) + * ( %2 6 # # + %) ( . (
, +& ' DE & " ( &#3 @+C D@" ) #[ H % G G ADC @( & #' % #$ % & ' ( ) #' ( & ' ' ) #" % * & +) #E & A#O D) +" @A& ` #C L & M#H & +@A( +) M ! 1 $ # %3 $ # + ) 9 $ & %- ( # # + %2 ( ' ( ) $ 2 2 $ , +
+D" O + @K D) #H & +#AB@( ( &" K D) " & #C L & #L @#N ) A% ( ) #& ' H +D* & +& #" & D#" ) ' ( +D#C ) " J +) " ( DQ
, L X U F %7 K Q Q K J J L
0 %$ 1 , 2 $ & *$ -2 $ ++' -3 " & 8$ %$ & 7 ' - 0 $ %/ ' & $ & *$ -8%' -! +, - 9 %2 , & , -2 $ , -. 3 : 3 - 2 $ ++$ -5 %$ - 6 $ & $ 7 , $
5 >#! 8 6 - . 2 / %%0%%$ A ' 2 %7 ( ' %# ( %7 , $

Perché questo disastro?
Clima culturale avverso all’università ed ai baroni
Assenza di «cultura della valutazione»
Creazione di una struttura di valutazione istituzionalmente
inadeguata (perché dipendente direttamente dalla politica)
Struttura di valutazione organizzativamente inadeguata
Consiglio direttivo «tecnicamente inadeguato»
Rivista Numero articoli di membri
del consiglio direttivo
Research Evaluation 2 (Bonaccorsi)
Research Policy 6 (Bonaccorsi)
Scientometrics 4 Bonaccorsi
Journal of Informetrics 0
JASIST 0

Un futuro per la valutazione in Italia
Il sistema attuale attribuisce ai politici e ad una
ristrettissima élite di consulenti un potere enorme
e senza contrappesi sul sistema della ricerca.

La valutazione guidata da una lobby di accademici
e politici può devastare ciò che di buono è stato
fatto dal mondo della ricerca italiano.

E' necessaria pertanto una modifica radicale
dell’assetto istituzionale del sistema di valutazione
della ricerca.

Ridisegno di ANVUR
Ipotesi 1. Agenzia autonoma sul
modello AERES?

Ridisegno di ANVUR
modello AERES?

Ma in Francia nel frattempo ….

Ridisegno di ANVUR
modello AERES?

Ipotesi 2. Agenzie separate per
valutazione della ricerca e attività di
valutazione ed accreditamento delle
università e dei corsi di studio.

Il ruolo del CUN
Il CUN assume la funzione di
rappresentanza istituzionale della comunità.

Ad esso spetta di definire, in raccordo
trasparente e formalizzato con le comunità
scientifiche e con le agenzie di valutazione, i
criteri di massima da usare per la realizzazione
delle attività di valutazione

Solo gli apprendisti stregoni
credono nelle ricette magiche

•Competenza scientifica

•Studio delle esperienze internazionali

•Un’agenzia di valutazione tecnicamente ed
eticamente adeguata

Riformare l'Anvur

Recomendados

Recomendados

Mais conteúdo relacionado

Semelhante a Riformare l'Anvur

Semelhante a Riformare l'Anvur (11)

Mais de Francesco Sylos Labini

Mais de Francesco Sylos Labini (20)

Riformare l'Anvur