Intervento alla tavola rotonda "L’esperienza italiana di valutazione dell’università" tenuta nell'ambito del convegno "La valutazione dell’università in una prospettiva strategica. Dilemmi senza soluzione?", 15 febbraio 2013 (ore 10 – 17) /CNR Roma Aula Marconi, P.le A.Moro, 7
Partecipanti alla tavola rotonda:
Andrea Bonaccorsi, Componente direttivo Anvur Giuseppe Colpani, Direttore Generale
Università di Bologna
Giuseppe De Nicolao, Redazione Roars
Andrea Gavosto, Direttore Fondazione Agnelli Daniele Livon, Direttore Generale Università MIUR Marco Mancini, Presidente CRUI
Marino Regini, Direttore UNIRES
Paolo Rossi, Coordinatore della commissione
per le politiche della ricerca del CUN
3. La valutazione è un esperimento sociale
“la valutazione è un
esperimento sociale
e non può evitare di
produrre effetti non
intenzionali, taluni
anche perversi”
A.Bonaccorsi
Sole 24Ore, 8 Luglio 2012
4. La valutazione è un esperimento sociale
“la valutazione è un
esperimento sociale
e non può evitare di
produrre effetti non
intenzionali, taluni
anche perversi”
A.Bonaccorsi
Sole 24Ore, 8 Luglio 2012
8. SM: Fammi male!
“qualche sede dovrà essere chiusa”
SERGIO BENEDETTO 4–02-2012
(CONSIGLIO DIRETTIVO ANVUR)
9. Is there a ranked list of institutions’ results?
RAE2008 results are in the form of a quality
profile for each submission made by an HEI.
We have not produced any ranked lists of
single scores for institutions or UoAs, and
nor do we intend to.
http://www.rae.ac.uk/faq/default.asp?selcat=15&q=225
10. F: Il feticcio bibliometrico
VQR: gli indicatori bibliometrici
In particolare verranno considerati:
• l’Impact Factor di Journal Citation
Reports di Thomson Reuters (IF) della
rivista nell’anno di pubblicazione;
• il numero di citazioni ricevute dal
prodotto fino al 31 dicembre 2011
http://www.anvur.org/sites/anvur-miur/files/gev_documenti/gev02_criteri_21_05.pdf
http://www.anvur.org/sites/anvur-miur/files/gev_documenti/gev02_criteri_21_05.pdf
11. Report on the pilot exercise to develop
bibliometric indicators for the REF
Bibliometrics are not sufficiently robust at
this stage to be used formulaically or to
replace expert review in the REF
http://www.hefce.ac.uk/pubs/year/2009/200939/
14. Perché la classifica australiana
delle riviste è stata ritirata?
• “Si è trattato quindi ... non di debolezze
metodologiche ma di pressioni politiche.”
A. Bonaccorsi, Potenzialità e limiti della analisi
bibliometrica nelle aree umanistiche e sociali,
7 marzo2012
• Fonte: “un esperto australiano che ha avuto
ruoli importanti nell’Australian Research
Council (ARC), che conosce dal di dentro la
vicenda e che, per comprensibili ragioni, mi
ha chiesto l’anonimato.”
15. Perché la classifica australiana
delle riviste è stata ritirata?
• Interroghiamo Google Scholar sulla classifiche
australiane di riviste:
Circa 473 pubblicazioni
• “in Australia ... they decided that alternative
ways of assessing quality, other than journal
rankings, were desirable ... which leaves them far
more aligned with the way we do things in this
country”
D. Sweeney, Higher Education Funding Council for England
21. “facciamo mobbing ... tagliamoli fuori
dalle commissioni ... e facciamone
degli zombies”
G. Federico, Membro Gruppo di Lavoro ANVUR
(nomina: 3 luglio 2012)
22. Art. 2 gli studiosi collaboratori esterni [...] fanno sì che le
relazioni con i colleghi siano ispirate a principi di leale
collaborazione, evitando atti e comportamenti
caratterizzati da animosità e conflittualità. [...]
Consapevoli della natura pubblica delle funzioni svolte, si
comportano in modo tale da promuovere la reputazione
dell’Agenzia e la fiducia nel suo operato.
23. Art. 8 La violazione del codice etico, da
chiunque denunciata, è accertata da un
Collegio formato da almeno due membri del
Consiglio Direttivo.
Violazione del codice etico di G. Federico denunciata senza esito da:
•S. Brasini e G. Tassinari
•CoNPAss
•P. Bevilacqua
•M. Matteuzzi
•FLC-CGIL
26. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
27. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
28. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
29. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
30. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
31. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
32. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
33. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
34. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e
di aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
35. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
36. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
37. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
38. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
39. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
40. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
41. sono stati in linea di massima esclusi:
• quotidiani, settimanali
• periodici di cultura, politica, attualità, costume,
• periodici di recensioni,
• riviste di divulgazione scientifica,
• riviste di taglio esclusivamente professionale e di
aggiornamento,
• riviste di associazioni di categoria, ordini e
associazioni professionali, enti pubblici nazionali
e locali, istituzioni pubbliche non scientifiche di
varia natura,
• riviste espressione di formazioni politiche,
sindacali, religiose,
• “house organ” aziendali – bollettini, newsletter,
• riviste promozionali, pubblicazioni non dotate di
periodicità regolare o infra-annuale (Annali, Atti
di accademie, Conferenze),
• pubblicazioni ad accesso non aperto e senza
cessione dei diritti di autore (“working papers“).
42. L’ANVUR acquisisce visibilità internazionale:
“crazy lists that ignored many journals in favour of provincial
newspapers, religious circulars and yachting magazines”
45. “Oggetto di sarcasmo è in particolare la Rivista
di suinicultura ... il cui titolo ha colpito la fantasia
dei critici. ... Del resto, Il Caffè [1764-1766]
dovrebbe forse essere escluso dal novero delle
riviste che hanno fatto la cultura italiana perché
ha un nome che lascia piuttosto pensare alla
cucina?”
(Ribolzi e Castagnaro)
49. “affamare la bestia”
Ha ragione Roberto Perotti: il sistema universitario e
della ricerca in Italia non sono riformabili. Serve un
cambiamento radicale perché riversare più fondi in
questo sistema è come buttarli al vento
R. Alesina e F. Giavazzi ww.lavoce.info 16-12-2003
che nell’università ci siano troppi professori è un
fatto ... va dato atto al ministro Gelmini di aver fatto un
importante passo avanti. La legge riconosce che i corsi
devono essere ridotti, le università snellite, alcune
chiuse
F. Giavazzi, Corriere della Sera 24-10-10
50. “L’Anvur ha ucciso la valutazione.
Viva la valutazione!”
... l’Anvur ha ucciso la
valutazione con la sua
disattenzione dei limiti
della valutazione e del
contesto nel quale essa
andava ad inserirla.
Non sono stato
completo nel dir ciò.
Bisogna anche
aggiungere che l’Anvur
S. Cassese – Primo Convegno ROARS ha ucciso se stessa...
Roma, 15 novembre 2012
51. Chi fermerà Alesina e Giavazzi?
• L’ANVUR, più di chiunque altro ha evidenziato le
degenerazioni di una valutazione contaminata
dall’ideologia e priva di basi scientifiche ed etiche.
• Una “missione suicida” che intacca la credibilità di
chi smantella l’università italiana e può (forse)
aiutarci a invertire la rotta.
• Verrà mai riconosciuto il genio creativo dei membri
del consiglio direttivo, che, attraverso autentici
capolavori di dadaismo burocratico, ci hanno
mostrato i pericoli della (cattiva) valutazione?
52. I
ANVUR
Credits:
A. Bonaccorsi
P. Almodóvar
Elio e le storie tese
J. Carpenter
F. Nietsche
Fruttero & Lucentini
Nonna Papera
S. Cassese
G. Berto