Statistiche sulla Abilitazione Nazionale
nel settore disciplinare dell'astrofisica
(con integrazione sui risultati)
(con ulteriore integrazione sui risultati della ASN 2013)
Lucio Chiappetti - IASF Milano (INAF) - settembre 2013
integrazione sui risultati aggiunta a gennaio 2014
ulteriore integrazione su ASN 2013 aggiunta a dicembre 2014
esercizio di bibliometria fai-da-te aggiunto separatamente a aprile 2014
Statistics about the National Habilitation
in the astrophysics disciplinary sector
(integrated with habilitation results)
(with further integration with results of ASN 2013)
Lucio Chiappetti - IASF Milano (INAF) - September 2013
integration about results added in January 2014
further integration about ASN 2013 added in December 2014
do-it-yourself bibliometry exercise added separately in april 2014
Introduzione
Dopo avere letto l'articolo di Giulio Marini su ROARS, ed essermi quindi reso conto che sul sito della Abilitazione Scientifica Nazionale (ASN) e' comparso l'elenco dei candidati alla prima tornata di abilitazioni (2012), ho pensato che sarebbe stato utile fare delle semplici statistiche relative al nostro settore dell'astronomia e astrofisica, con un taglio diverso e complementare a quello delle statistiche riportate nella pagina citata di ROARS.
Ritenevo in particolare che sarebbe stato interessante studiare un settore relativamente
omogeneo, e con la peculiarita' di avere una dominanza numerica di membri non universitari,
ossia il personale scientifico dell'INAF (con la coesistenza dei due ruoli storici degli
"ex-Osservatori" ed "ex-CNR").
Confesso che alla fine non e' cosi' facile come mi aspettavo per la presenza di un
numero significativo di "esterni", ma per il momento vi presento le cose al punto in
cui sono arrivato, anche a costo di presentare un lavoro "half-cooked".
Informazioni preliminari (per profani)
Ricordo agli "esterni" al nostro ambiente (rinviando per ulteriori dettagli al
sito dell'ASN)
che la legge 240 del 2010 ha previsto che per diventare professori ordinari
o professori associati nelle Universita' sia un pre-requisito ottenere la
Abilitazione Scientifica Nazionale, che viene rilasciata da specifiche
commissioni nazionali nei vari settori disciplinari.
Al momento e' in corso la prima tornata di abilitazioni, iniziata nel 2012.
Ad ogni tornata puo' partecipare (inviando il proprio curriculum e la lista delle pubblicazioni) chiunque, anche se non gia' afferente a una universita' italiana.
In particolare nel settore disciplinare dell'astrofisica la comunita' nazionale
e' formata anche, e con una prevalenza numerica sulla componente universitaria,
dal personale scientifico
dell'INAF (Istituto Nazionale di Astrofisica).
Si vedano piu' oltre le statistiche sulla comunita' di riferimento.
Al momento non esiste un equivalente della ASN per gli Enti Pubblici di Ricerca (EPR)
come l'INAF (anche se se ne e' parlato informalmente).
Ricordo inoltre che i ruoli universitari sono stati fin qui divisi in tre livelli
o fasce (ricercatore universitario, professore associato, professore ordinario).
I livelli equivalenti negli EPR sono quelli di ricercatore, primo ricercatore e
dirigente di ricerca (oppure di tecnologo, primo tecnologo e dirigente tecnologo per
il personale inquadrato in tal modo; si noti che non vi e' differenza di stipendio
tra "ricercatori" e "tecnologi" a parita' di livello).
Negli Osservatori Astronomici prima della creazione dell'attuale INAF esistevano tre
livelli identici a quelli universitari (astronomo ricercatore, astronomo associato,
astronomo ordinario). Con la creazione dell'INAF tali livelli sono stati congelati,
il personale che era in tali livelli e non ha optato per l'inquadramento degli EPR
o non ha beneficiato delle progressioni di carriera, numericamente assai limitate
negli EPR, mantiene lo status precedente.
Tutti questi livelli sono preceduti (al livello post-doc) da forme contrattuali atipiche
(spesso considerate "precariato"), a tempo determinato, quali borse di studio ed
assegni di ricerca. Questi ultimi, nella forma regolata dalla legge 240, sono ora
la forma principale di "livello di ingresso" nel mondo della ricerca.
In passato tutte le posizioni universitarie erano a tempo indeterminato, mentre negli
EPR era possibile avere, soprattutto nelle fasce iniziali di ricercatore, dei contratti
a tempo determinato (per tutto il resto identici a quelli a tempo indeterminato). La
legge 240 ha messo il ruolo dei nuovi ricercatori a tempo determinato.
Fonti dei dati
L'elenco dei candidati alla ASN e' stato estratto dal
sito ASN
esclusivamente per il settore concorsuale 02/C1 (astronomia, astrofisica,
fisica della Terra e dei pianeti), separatamente per le due fasce.
Il sito ASN fornisce anche i curriculum parte della domanda, ma essi non sono
stati consultati.
L'elenco del personale INAF e' stato estratto sede per sede dalla anagrafica dei dipendenti INAF. Oltre al personale scientifico (ricercatori e tecnologi, inclusi gli astronomi) essa fornisce anche il personale tecnico-amministrativo, fornisce sia quello a tempo indeterminato, che a tempo determinato, che gli assegni di ricerca (non sono tuttavia certo che quest'ultimo elenco centrale sia aggiornato con la situazione reale nelle singole sedi decentrate). L'anagrafica fornisce dettagli sull'inquadramento in tutti i livelli, sia fasce che classi stipendiali, sulla anzianita' e/o la data di assunzione ecc.
L'elenco del personale universitario e' stato estratto dal sito
del CINECA separamente per gli
assegnisti di ricerca
e per il personale
docente (ossia
ricercatori, associati e ordinari).
Per gli assegnisti ci si e' limitati ai settori disciplinari (SSD) FIS/05
(astronomia e astrofisica) e FIS/06 (terra e sistema circumterrestre).
Per i docenti sono stati estratti separatamente gli
elenchi per i settori disciplinari (SSD) FIS/05 e FIS/06,
il macrosettore 02/C (astronomia, astrofisica, fisica della Terra e dei
pianeti) e il settore concorsuale 02/C1 (idem). I due ultimi elenchi sono
stati trovati identici.
Il materiale e' stato ingerito in database mysql, in 3 tabelle, una per gli
abilitandi, una per lo staff INAF e una per il personale universitario.
Dopo di che si e' visto che correlando su cognome e nomi non si avevano casi di
omonimie. C'erano invece quattro casi (tutti per personale INAF, poi risolti) di persone con
nomi multipli che non venivano correlate (in quanto da una parte comparivano p.es. con
due nomi e dall'altra con tre, o con o senza il trattino).
Si e' infine provveduto a normalizzare la situazione delle fasce come
segue:
Per la tabella degli abilitandi ogni persona compare
una sola volta, e dei flag indicano se ha presentato domanda per la fascia 1,
la fascia 2 o entrambe
Sempre per la tabella egli abilitandi e' stata inserita
la fascia attuale di inquadramento, ottenuta dalla correlazione con le
altre due tabelle (INAF e universita').
Le fasce sono denominate per brevita' come segue, uniformando
le differenti categorie e trascurando dettagli piu' fini (pur se presenti nelle
tabelle)
- fascia 1 : professori ordinari, astronomi ordinari, dirigenti di ricerca e dirigenti tecnologi
- fascia 2 : professori associati, astronomi associati, primi ricercatori e primi tecnologi
- fascia 3 : ricercatori universitari, astronomi ricercatori, ricercatori EPR, tecnologi EPR; sia a tempo indeterminato che determinato
- fascia 4 : assegnisti di ricerca e affini (borsisti etc.)
- fascia -1 viene usata per quanti non si e' riusciti a classificare
La comunita' di riferimento
L'elenco del personale universitario astronomico comprende 339 persone,
di cui 116 dall'elenco assegnisti (93 FIS/05 e 23 FIS/06)
ed il resto dagli elenchi docenti (strutturati).
Di questi (223), 167 appaiono in entrambi gli elenchi (per SSD FIS/05 e per settore
concorsuale), 50 in entrambi gli elenchi (per SSD FIS/06 e settore concorsuale),
3 solo nell'elenco per SSD FIS/05, 2 solo in quello per FIS/06 ed 1 in tutti e tre
gli elenchi (settore concorsuale ed entrambi gli SSD).
Il personale universitario e' ripartito tra 35 sedi (incluse la Normale, la SISSA
e lo IUSS). Alcune di queste non sono tra le citta' comunemente associate alla
attivita' astronomica e/o hanno solo 1 persona (4 casi). 20 hanno tra 2 e 10
persone, 9 tra 10 e 20, 2 (SISSA e Roma Sapienza) poco piu' di 20 e 2 (Padova e
Bologna) oltre 40.
L'elenco del personale INAF inclusi assegnisti e assimilati presso le
sedi INAF (ossia non gli affiliati di altre istituzioni associati all'INAF)
include 1403 persone, compreso tutto il personale tecnico-amministrativo.
Di queste 915 dovrebbero costituire il personale scientifico
(ossia quelle classificate nelle fasce 1-4), e di questi 659 essere strutturati
(ossia le fasce 1-3) vuoi a tempo determinato che indeterminato.
Gli assegnisti sono 170 e i borsisti 80 (tutti flaggati come fascia 4).
Sono possibili incertezze de iure e de facto. P.es. una piccola
frazione di personale amministrativo laureato degli ex-Osservatori (gia' comparto
universita') e' stato inquadrato come "tecnologo" all'atto del passaggio al comparto
ricerca. Oppure tra il personale non strutturato (fascia=4) oltre ad assegnisti e
borsisti compaiono 4 persone classificate "equiparati a ricercatore" e 2 "equiparati
a primo ricercatore" (ma che non sono ricercatori a tempo determinato, che sarebbero
elencati fra gli strutturati).
Il personale scientifico INAF e' ripartito, dopo le recenti fusioni, tra 18 sedi,
in 12 citta' o aree geografiche,
che variano tra i 14 dell'Osservatorio di Teramo e i 108 dello IAPS Roma.
4 sedi hanno meno di 30 membri scientifici, 5 tra 30 e 50, 7 tra 50 e 80 e
2 (Arcetri e IAPS) oltre 80.
La composizione della comunita' nazionale di riferimento formata dall'INAF e dalle Universita' e la sua ripartizione tra la diverse fasce puo' essere riassunta nella tabella seguente.
Istituzione | in numero assoluto | in percentuale sul totale | in percentuale sugli strutturati | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
fascia | fascia 1 | fascia 2 | fascia 3 | fascia 4 | fascia 1 | fascia 2 | fascia 3 | fascia 4 | fascia 1 | fascia 2 | fascia 3 | ||
Universita' | 55 | 58 | 110 | 116 | 16% | 17% | 32% | 34% | 25% | 26% | 49% | ||
strutturati | 223 | 66% | 100% | ||||||||||
INAF | 42 | 137 | 480 | 256 | 5% | 15% | 52% | 28% | 6% | 21% | 73% | ||
strutturati | 659 | 72% | 100% | ||||||||||
ricercatori EPR | 14 | 61 | 201 | 6 | 1% | 7% | 22% | <1% | 2% | 9% | 30% | ||
tecnologi EPR | 2 | 14 | 143 | <1% | 1% | 15% | <1% | 2% | 22% | ||||
astronomi | 26 | 62 | 136 | 3% | 7% | 15% | 4% | 9% | 21% | ||||
Univ.+INAF | 97 | 195 | 590 | 372 | 8% | 16% | 47% | 29% | 11% | 22% | 67% | ||
strutturati | 882 | 70% | 100% |
Le statistiche sulla ASN
Il numero totali di abilitandi per il settore concorsuale dell'astrofisica (in senso lato) e' di 656, che nominalmente equivale al 52% della composizione della comunita' di riferimento.
Tuttavia e' possibile candidarsi anche se non si fa parte della comunita' di
riferimento come definita sopra. P.es. se si lavora all'estero, se si lavora
in un EPR diverso dall'INAF, se si lavora nell'universita' ma afferendo a un settore
disciplinare da quelli presi in considerazione.
Ed infatti una prima statistica derivante dalla correlazione tra le tabelle
degli abilitandi, quella del personale INAF e quella del personale universitario
indica che:
- 107 candidati (16%) sono universitari "riconosciuti"
- 246 candidati (38%) provengono dall'INAF
- 304 candidati (46%) provengono da "altrove"
Al momento non sono in grado di identificare ulteriormente i candidati "totalmente
esterni" (o apparentemente tali), a meno di consultare i curriculum individuali
(il che richiederebbe troppo tempo considerato il numero).
Ho esaminato l'elenco trovando (solo) una decina di nominativi a me conosciuti, dei
quali uno e' una omonimia, 3 o forse 4 sono all'estero (il quarto potrebbe essersi
trasferito di recente o avere lasciato il settore), 3 sono di altri EPR (CNR o INFN),
3 sono universitari italiani ma non sono presenti nelle liste che ho recuperato dal
CINECA (in quanto afferenti a settori disciplinari diversi).
Considero tuttavia infattibile al momento fare una ricerca globale (automatizzata)
sul sito CINECA per gestire questo ultimo caso.
Pertanto per i 304 "sconosciuti" non sono in grado di effettuare molte delle statistiche riportate sotto, quali quelle sull'inquadramento corrente o sulla sede di provenienza.
E' invece possibile in ogni caso contare quanti sono i candidati che hanno presentato domanda per la fascia 1 (ordinario), per la fascia 2 (associato) o per entrambe.
Fascia della domanda | in numero assoluto | in percentuale sul totale generale | in percentuale sul totale dell'istituzione | |||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|
istituzioni | tutte | univ. | INAF | esterni | tutte | univ. | INAF | esterni | tutte | univ. | INAF | esterni |
tutte le domande | 656 | 107 | 246 | 303 | 100% | 16% | 37% | 46% | 100% | 100% | 100% | 100% |
domande per sola fascia 1 | 120 | 28 | 51 | 41 | 18% | 4% | 8% | 6% | 18% | 26% | 21% | 14% |
domande per sola fascia 2 | 449 | 69 | 149 | 231 | 68% | 10% | 22% | 35% | 68% | 64% | 60% | 76% |
domande per entrambe le fasce | 87 | 10 | 46 | 31 | 13% | 2% | 7% | 5% | 13% | 9% | 19% | 10% |
E' abbastanza curioso notare come un certo numero di candidati abbia presentato domanda per entrambe le fasce, e domandarsi quale sia il razionale di cio' (si presuppone che si tratti di candidati giovani che ritengano di essere sufficientemente brillanti per ottenere una qualificazione in fascia 1, ma vogliano essere certi di ottenere come ripiego quella in fascia 2).
E' anche curioso osservare come il numero di candidati di provenienza universitaria (e che quindi presumibilmente aspirano a un avanzamento di carriera) sia minoritario rispetto all'insieme degli esterni e del personale INAF, che non possono realisticamente pensare che saranno disponibili sufficienti posti da professore universitario nelle due fasce. Inoltre il personale INAF potrebbe non essere interessato a un passaggio alla universita' qualora abbia una anzianita' stipendiale tale da non rendere conveniente l'operazione (in mancanza di una ricostruzione di carriera). E' presumibile che tale personale miri solo ad ottenere un titolo (la abilitazione) che dimostri la sua qualificazione al livello superiore, da tentare di far valere in una ipotetica futura procedura di progressione interna (dove la ricostruzione di carriera e' possibile).
E' infine curioso notare come le domande degli esterni siano prevalentemente per la fascia 2, mentre le domande doppie (per entrambe le fasce) siano piu' comuni tra il personale INAF.
Per i 353 candidati provenienti dalle universita' italiane e dall'INAF e' possibile effettuare una ulteriore statistica in base all'inquadramento attuale ossia la fascia di partenza.
La aspettativa sarebbe che chi e' gia' in fascia 1 non abbia presentato domanda, chi e' in fascia 2 abbia presentato domanda per la fascia 1, chi e' in fascia 3 o non strutturato (qui flaggato come fascia 4) abbia presentato domanda per la fascia 2 o eccezionalmente per entrambe.
Ecco una statistica in numero assoluto.
Fascia della domanda | Universita' + INAF | INAF | Universita' | |||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
fascia di partenza | indefinita | 4 | 3 | 2 | 1 | indefinita | 4 | 3 | 2 | 1 | 4 | 3 | 2 | 1 | ||
tutte le domande | 12 | 32 | 230 | 75 | 4 | 12 | 22 | 161 | 48 | 3 | 10 | 69 | 27 | 1 | ||
domande per sola fascia 1 | 1 | 5 | 69 | 4 | 1 | 5 | 42 | 3 | 27 | 1 | ||||||
domande per sola fascia 2 | 12 | 30 | 174 | 2 | 12 | 20 | 115 | 2 | 10 | 59 | ||||||
domande per entrambe le fasce | 1 | 51 | 4 | 1 | 41 | 4 | 10 |
Innanzitutto i 12 nominativi "senza fascia" sono relativi a personale INAF, concentrato in 6 sedi diverse. In 5 casi si tratta di tecnici di ruolo (CTER IV livello), che presumibilmente si sono laureati dopo la loro assunzione ed hanno finito per svolgere attivita' da ricercatore ("sottoinquadrati"). In 7 casi si tratta di collaboratori indicati come "Compensi imponibili ruoli esenti". Ignoro a che cosa corrisponda questa categoria (non sono assegnisti e non sono strutturati). Tutti e 12 hanno presentato domanda per la fascia 2.
Solo 32 assegnisti (circa 9% del totale degli assegnisti) hanno presentato domanda di abilitazione, e la stragrande maggioranza per la sola fascia 2.
Il "grosso" delle domande e' per la fascia 2 e proviene da personale strutturato della fascia 3, ossia da ricercatori della fascia iniziale. Si noti la prevalenza numerica delle domande provenienti dall'INAF rispetto a quelle dall'universita'. Un certo numero hanno presentato domanda per entrambe le fasce. Solo 5 persone (in due sedi INAF) hanno presentato domanda per "saltare" dalla fascia 3 alla fascia 1.
Un'altro blocco significativo ed atteso e' quello di coloro che dalla fascia 2 chiedono
di passare in fascia 1. Anche qui
si noti la prevalenza numerica delle domande provenienti dall'INAF rispetto a quelle
dall'universita'.
Tutavia sono curiosi 4 casi di primi ricercatori INAF (quindi gia' ora "di fascia 2")
che hanno presentato domanda per entrambe le fasce.
Altrettanto curiosi sono 4 casi di personale gia' in fascia 1 che ha comunque presentato domanda per la fascia 1. 3 sono di personale INAF (1 dirigente di ricerca e due astronomi ordinari) per cui si puo' presumere che abbiano realisticamente intenzione di transitare all'Universita' su futuri posti di cui sono a conoscenza ed intendono assicurarsi la abilitazione formale. Il quarto caso e' di un professore straordinario.
Una peculiarita' degli EPR e' la coesistenza del ruolo dei tecnologi a fianco del ruolo dei ricercatori (con le stesse tre fasce e lo stesso trattamento economico). Una peculiarita' dell'INAF e' la coesistenza del ruolo dei ricercatori e tecnologi EPR a fianco del ruolo "a esaurimento" degli astronomi (che ha invece le fasce e il trattamento economico universitario).
Per quanto riguarda i tecnologi, si nota che tra gli abilitandi ci sono (solo) 8 tecnologi
(di fascia 3, divisi tra 5 sedi, 3 ex-CNR e 2 osservatori) che hanno presentato
domanda per la fascia 2.
Uno solo di essi (con una anzianita' nominale di meno di 5 anni) ha presentato domanda per
entrambe le fasce.
Per quanto riguarda gli astronomi (che dopo le opzioni rappresentano il 34% del personale scientifico strutturato dell'INAF), 83 di essi hanno presentato domanda di abilitazione. Puo' essere interessante presentare una statistica per l'INAF ripartita tra ricercatori con contratto EPR ed astronomi con stato giuridico. Tale statistica e' riportata qui sotto (gli 8 tecnologi di cui sopra non sono inclusi con i ricercatori EPR).
Fascia della domanda | INAF tutti | INAF ricercatori EPR | INAF astronomi | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
fascia di partenza | indefinita | 4 | 3 | 2 | 1 | 3 | 2 | 1 | 3 | 2 | 1 | ||
tutte le domande | 12 | 22 | 161 | 48 | 3 | 92 | 27 | 1 | 61 | 20 | 2 | ||
domande per sola fascia 1 | 1 | 5 | 42 | 3 | 3 | 23 | 1 | 2 | 19 | 2 | |||
domande per sola fascia 2 | 12 | 20 | 115 | 2 | 63 | 45 | 1 | ||||||
domande per entrambe le fasce | 1 | 41 | 4 | 26 | 4 | 14 |
Infine riporto le due ultime tabelle in forma percentuale.
La distribuzione delle domande per fascia di partenza e di arrivo, in percentuale rispetto al numero totale di candidati (107 universitari, 246 INAF o 353 di entrambe le istituzioni) e' molto simile nei vari casi.
Fascia della domanda | Universita' + INAF | INAF | Universita' | |||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
fascia di partenza | indefinita | 4 | 3 | 2 | 1 | indefinita | 4 | 3 | 2 | 1 | 4 | 3 | 2 | 1 | ||
tutte le domande | 3% | 9% | 65% | 21% | 1% | 5% | 9% | 65% | 19% | 1% | 9% | 64% | 25% | 1% | ||
domande per sola fascia 1 | <1% | 1% | 19% | 1% | <1% | 2% | 17% | 1% | 25% | 1% | ||||||
domande per sola fascia 2 | 3% | 8% | 49% | <1% | 5% | 8% | 47% | 1% | 9% | 55% | ||||||
domande per entrambe le fasce | <1% | 14% | 1% | <1% | 16% | 1% | 9% |
La distribuzione tra ricercatori ed astronomi dell'INAF, in percentuale rispetto al numero totale di candidati (246 INAF, 120 ricercatori, 83 astronomi) sono pure alquanto simili.
Fascia della domanda | INAF tutti | INAF ricercatori EPR | INAF astronomi | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
fascia di partenza | indefinita | 4 | 3 | 2 | 1 | 3 | 2 | 1 | 3 | 2 | 1 | ||
tutte le domande | 5% | 9% | 65% | 19% | 1% | 76% | 22% | 8% | 73% | 24% | 2% | ||
domande per sola fascia 1 | <1 | 2% | 17% | 1% | 2% | 19% | 1% | 2% | 23% | 2% | |||
domande per sola fascia 2 | 5% | 8% | 47% | 1% | 52% | 65% | 1% | ||||||
domande per entrambe le fasce | <1% | 16% | 1% | 21% | 3% | 17% |
Nuova sezione sui risultati della ASN
Fonti dei dati sui risultati
I risultati della ASN stanno comparendo molto gradualmentesul sito ASN in una apposita pagina, da dove si puo' scegliere il settore disciplinare e la fascia. In particolare per l'astrofisica (02/C1) vi sono due sottopagine per la prima e seconda fasciaCiascuna di tali pagine (HTML) contiene i verbali dei lavori della commissione (presumibilmente gli stessi per entrambe le fasce dato che la commissione era comune), l'elenco dei candidati, un flag Si/No che indica l'ottenimento o meno della abilitazione, e degli ulteriori link. In particolare le domande e tutti gli ulteriori link relativi a un candidato e alla sua domanda per una particolare fascia hanno un identificatore numerico.
Tra gli ulteriori link, uno contiene gli indicatori (ossia le famose o famigerate mediane) ed uno i giudizi della commissione.
Il link per gli indicatori e' una pagina HTML che puo' venire parsata per estrarre i tre indicatori da inserire nel database mysql (separatamente per le due fasce) :
- numero di pubblicazioni normalizzate
- numero di citazioni normalizzate
- indice di Hirsch modificato ossia Hc "contemporaneo"
Il link per i giudizi e' invece un documento PDF, ma fortunatamente ha un formato standard, e puo' venire convertito in testo e quindi parsato con relativa facilita'. Ogni membro della commissione ha assegnato individualmente tre giudizi sintetici, e poi la commissione ha concordato i tre giudizi collegiali. Quindi vi e' un totale di (5+1)×3 giudizi da inserire nel database mysql. Essi sono indicati come
- G1 : pubblicazioni presentate
- G2 : attivita' scientifica globale
- G3 : responsabilita' scientifica
Tutti i dati di cui sopra sono stati inseriti nella preesistente tabella mysql degli abilitandi separatamente per le due fasce: 3 indicatori, 18 giudizi G1/2/3, il flag FIS/06 e il flag relativo all'ottenimento dell'abilitazione.
Come dati ausiliari sono stati presi in considerazione inoltre le tabelle delle mediane di riferimento per il settore concorsuale 02/C1 e l'eventuale SSD FIDS/06 per la prima e seconda fascia ed i criteri stabiliti dalla commissione e riportati in apposito verbale. Le mediane sono:
indicatore | 02/C1 generale | SSD FIS/06 | ||
---|---|---|---|---|
fascia 1 | fascia 2 | fascia 1 | fascia 2 | |
Pubblicazioni | 49 | 32 | 27.5 | 17 |
Citazioni | 86.08 | 35.83 | 22.01 | 14 |
Hc | 18 | 10 | 9 | 6 |
I giudizi G1/2/3 non sono stati calcolati se nessuna mediana e' stata superata. L'abilitazione e' stata concessa se
- criterio 1: sono superate 3 mediane e almeno due giudizi G1/2/3 valgono 3
- criterio 2: sono superate 2 mediane e almeno due giudizi G1/2/3 valgono 4
- criterio 3: e' superata 1 mediane e tutti i giudizi G1/2/3 valgono 4
Statistiche sui risultati
Una prima statistica riguarda il numero di abilitati (in valore assoluto e come percentuale del numero di candidati), ripartiti secondo vari criteri.
Criterio | Fascia 1 | Fascia 2 | ||||
---|---|---|---|---|---|---|
candidati | abilitati | percentuale | candidati | abilitati | percentuale | |
Numero totale | 207 | 55 | 26.6% | 536 | 235 | 43.6% |
Affiliati universita' | 38 | 16 | 42.1% | 79 | 41 | 51.9% |
Affiliati INAF | 97 | 29 | 29.9% | 195 | 103 | 52.8% |
Esterni | 72 | 10 | 13.9% | 262 | 91 | 34.7% |
Tra il personale INAF | ||||||
sono ricercatori EPR | 57 | 16 | 28.0% | 93 | 56 | 50.2% |
sono astronomi ex-Osservatorii | 37 | 13 | 35.1% | 60 | 40 | 66.7% |
sono tecnologi EPR | 1 | 0 | -- | 8 | 4 | 50.0% |
universita' ed esterni | 112 | 26 | 23.2% | 375 | 135 | 36.0% |
In base alla fascia corrente | ||||||
gia' in prima fascia | 4 | 3 | 75.0% | -- | -- | -- |
gia' in seconda fascia | 73 | 42 | 57.5% | 6 | 4 | 66.7% |
gia' in terza fascia | 56 | 0 | -- | 225 | 137 | 60.9% |
assegnisti di ricerca | 2 | 0 | -- | 31 | 3 | 9.7% |
sconosciuta | 72 | 10 | 13.9% | 274 | 91 | 33.2% |
Le statistiche di cui sopra sono state condotte sul campione totale senza distinguere i candidati afferenti al SSD FIS/06.
La percentuale di abilitati e' significativamente piu' alta per la seconda fascia che
per la prima. Vi sono poche differenze tra personale universitario ed INAF, specie per
la seconda fascia, mentre tra gli esterni vi sono meno abilitati.
Vi sono anche poche differenze entro il personale INAF tra quelli inquadrati col contratto
da ricercatore EPR e quelli con lo stato giuridico degli astronomi ex-Osservatorii. Il
numero di tecnologi EPR tra i candidati e' notoriamente limitato.
Non sorprende che la maggior parte degli abilitati ad una fascia provenga dalla fascia immediatamente precedente.
E' curioso notare come dei 4 candidati gia' di fatto in prima fascia (un professore
straordinario, due astronomi ordinari e un dirigente di ricerca) siano stati abilitati
solo tre , omettendo un astronomo ordinario
Tra i 42 abilitati alla prima fascia provenienti de facto dalla seconda (professori
associati, astronomi associati, primi ricercatori) vi sono 15 universitari e 27 INAF
(15 primi ricercatori e 12 astronomi associati).
Solo tre degli abilitati alla seconda fascia sono assegnisti o affini
.
Su 6 candidati gia' di fatto in seconda fascia (primi ricercatori o astronomi
associati) 4 hanno chiesto e ottenuto la abilitazione
e 2 no
Degli 87 candidati che avevano presentato domanda per entrambe le fasce, 15 non hanno ottenuto alcuna abilitazione, 71 sono stati abilitati in seconda fascia, e 1 solo in entrambe.
Per il personale universitario ed INAF e' possibile effettuare anche una statistica per sedi. Si indica il numero di abilitati e la percentuale rispetto ai candidati di quella sede (da questo si puo' facilmente inferire quali sedi sono piu' o meno popolose).
Nella prima fascia entro INAF gli abilitati sono 9 ad Arcetri (90%), 4 a Brera(30%), 3 a IASF-Mi (50%) 2 a OARM (22%), OATS (50%), IAPS (28%) e OABO (20%) e 1 ciascuno a OAPA (100%), OATE (100%), Capodimonte (17%), IASF-Bo (11%) e IRA (50%).
Nella prima fascia gli abilitati delle Universita' sono 3 alla SISSA (100%), 2 a Roma 2 (66%), e 1 ciascuno a Bologna, Milano 1, Palermo (33%), a Trieste e Padova (50%) e all'Insubria, Calabria, Milano Bicocca, Roma3 e Cagliari (100%).
Nella seconda fascia entro INAF gli abilitati sono 15 a OAPD (88%), 13 a OABO (65%), 12 a IASFBo (80%), 10 a Brera (52%), 9 a IAPS (36%), 8 a OARM (40%), 7 a OATS (70%), 6 a OACT (75%), 4 a IASFMi (36%), 4 a Capodimonte (57%), 3 a IASFPa (50%), IRA (37%), Arcetri (30%), 2 a OATO (17%) e OAPA (33%). 1 a OACA e OATE (entrambi 100%).
Nella seconda fascia gli abilitati delle Universita' sono 7 a Padova (63%), 6 a Bologna (50%), 5 a Roma 1 (83%), 3 a Trieste (75%), Aquila (60%) e Napoli (75%), 2 a Roma 2 (33%), Milano 1, Perugia e Palermo (100%), Salento (67%), 1 a Torino (25%), Basilicata e Ferrara (50%), e Pisa (100%).
Considerando ora i candidati del SSD FIS/06 si nota quanto segue:
Su 31 candidati alla prima fascia, sono abilitati solo 5 (2 universitari e 3 esterni)
per una percentuale del 16%. La maggior parte dei candidati erano esterni (solo altri
4 universitari e 1 dallo IAPS INAF).
Su 83 candidati alla seconda fascia, ne sono abilitati 43 (9 universitari e il resto
esterni) per una percentuale del 51.8% ! Anche qui la maggior parte dei candidati
erano esterni (solo altri 5 universitari e 1 dallo IAPS INAF).
Si nota che nei verbali la commissione ha fatto notare la disomogeneita' di dover
gestire il SSD FIS/06 insieme con il resto.
Non e' invece stato fatto osservare (ma lo aggiungo io) come invece anche l'intero
settore dell'astrofisica possa essere eccessivamente vasto ed internamente disomogeneo,
rispetto p.es. alle suddivisioni usuali come le macroaree dell'INAF.
Per quanto riguarda gli indicatori si rimanda anche alle considerazioni soggettive di cui sotto per eventuali stranezze.
Come banale verifica si nota che degli 87 candidati che hanno presentato domanda per
entrambe le fasce, essi normalmente ottengono gli stessi indicatori per entrambe.
12 hanno un numero di pubblicazioni diverso (solitamente di 1 o meno, raramente di
piu'), 15 hanno un numero di citazioni diverso (solitamente di una frazione di punto,
a volte di piu'), 6 hanno un Hc diverso (solitamente di 1 unita').
Non sono in grado di dire se dipenda da diversita' nella presentazione della domanda
o da artefatti nel calcolo da parte del CINECA.
Per quanto riguarda i giudizi G1, G2, G3 noto intanto che i candidati sotto le tre mediane per la rispettiva fascia, conformemente alla procedura stabilita, non hanno avuti i giudizi calcolati (che pertando compaiono come zero nel database).
Si tratta di 30 candidati per la prima fascia e 68 per la seconda fascia. Su di questi si veda oltre nelle considerazioni soggettive.
Per i rimanenti candidati si nota una buona omogeneita' di giudizio tra i commissari. Questa e' stata verificata facendo la media numerica dei 5 giudizi (il che e' ovviamente una approssimazione grossolana).
Per i candidati di prima fascia in 129, 119 e 143 casi il valore di G1, G2 o G3
collegiale e' esattamente uguale alla media.
Per 203, 205 e 205 casi il valore di G1, G2, G3 e' uguale alla media arrotondata
per difetto o eccesso (funzione ROUND di mysql).
In 3 casi G1 e' stato alzato da 3.4 a 4 e in 1 da 2.2 a 3,
in 2 casi G2 abbassato da 1.6 a 1,
in 2 casi G3 alzato da 3.2 a 4.
Per i candidati di seconda fascia in 490, 380, 464 casi il valore di G1, G2 o G3
collegiale e' esattamente uguale alla media, e nella totalita' dei 536 casi
e' uguale alla media arrotondata.
Considerato che la differenza tra il miglior giudizio individuale e il giudizio collegiale non e' praticamente mai maggiore di 1 grado (solo in 2 casi per G2 in prima fascia, e in 1 caso per G1 e G2 in seconda fascia), non si ritiene necessario calcolare delle RMS o deviazioni standard, e non si procede oltre.
Considerando ora il numero di mediane superate si ottiene la seguente
distribuzione. Si nota una singola minima anomalia (un candidato alla seconda fascia
nel SSD FIS/06 ha la terza mediana esattamente uguale al valore di
riferimento, quindi dovrebbe superarne una, ma non ha calcolati i giudizi G1/2/3.
Per il resto, conformemente alla procedura, i candidati con zero mediane superate
hanno, come aspettato, G1=G2=G3=0.
Si nota (pur con i dubbi di cui alle considerazioni soggettive)
come una notevole frazione di candidati risulti superare le tre mediane (e quindi
come siano necessari ulteriori criteri).
numero di mediane superate | fascia 1 | fascia 2 |
---|---|---|
nessuna | 30 | 67 |
una | 17 | 30 |
due | 39 | 72 |
tre | 121 | 367 |
Considerando ora i giudizi ed i relativi criteri si ottiene la seguente distribuzione degli abilitati (che come corollari indica come la commissione abbia applicato correttamente la procedura stabilita, ed inoltre indica come il criterio bibliometrico delle mediane sia stato prevalente).
criterio | fascia 1 | fascia 2 |
---|---|---|
1: 3 mediane, 2 ottimi | 45 | 222 |
2: 2 mediane, 2 eccellenti | 10 | 12 |
3: 1 mediane, 3 eccellenti | 0 | 1 |
I dati possono anche essere presentati in forma grafica, a sinistra per i candidati
alla fascia 1, a destra per quelli alla (sola) fascia 2. In tutti i grafici (di cui
si puo' ottenere una versione postscript scalabile cliccando sulla preview) i colori
indicano:
La prima famiglia di grafici confronta gli indicatori 1 e 2 (pubblicazioni e citazioni
normalizzate). La correlazione tra i due ha un certo spread, vi sono candidati con un
indicatore elevato non abilitati, ma soprattutto si noti come i candidati alla
seconda fascia hanno valori, soprattutto per le citazioni, spesso piu' elevate e
comunque comparabili a quelle dei candidati per la prima fascia.
La seconda famiglia di grafici confronta gli indicatori 1 e 3 (pubblicazioni e Hc).
Anche qui si vede una certa correlazione con un certo spread, ed intervalli di Hc
comparabili per le due fasce.
La terza famiglia di grafici chiude il loop confrontando gli indicatori 2 e 3 (citazioni e Hc).
con risultati ovviamente complementari ai precedenti.
Un approccio diverso e complementare si ha riportando l'istogramma di ogni indicatore.
Le tre figure sottostanti si riferiscono al primo indicatore (pubblicazioni, a sin.),
al secondo indicatore (citazioni, al centro) e al terzo (Hc), a destra).
Ogni figura e' divisa in due pannelli, quello superiore per la prima fascia e quello
inferiore per la seconda fascia. La riga rosa verticale (continua o tratteggiata) indica
la mediana di riferimento.
Per cercare di quantificare la distribuzione dei giudizi
(sintetici ma non bibliometrici) G1/2/3 si puo'
riportare in forma di istogramma (analogamente a quanto sopra) la somma dei valori
numerici (descritti piu'sopra) G1+G2+G3. Questo viene fatto nella figura sottostante.
Per chiudere il loop si riportano su due righe separate (per la prima e seconda fascia)
i grafici del punteggio complessivo G1+G2+G3 in funzione di ognuno dei tre indicatori
(usando colori e simboli come nelle figure soprastanti degli indicatori tra loro).
In conclusione la commissione ha sicuramente dovuto fare un lavoro ponderoso
esaminando circa 700 domande, e lo ha fatto correttamente in base agli input
ricevuti.
Non posso dirmi personalmente sorpreso dal fatto di non essere
risultato abilitato. Perlomeno guardando i risultati globali face-value, ossia
confrontandomi con gli altri abilitati che conosco, che sicuramente hanno ultimamente
svolto attivita' di misura e qualita' superiore.
Ma resto invece spiacevolmente sorpreso dal vedere negli indicatori un numero
di pubblicazioni normalizzate pari a 22 (!) con 85.29 citazioni normalizzate a fronte
di aver presentato nel CV 273 lavori (126 su rivista, 49 proceedings, 3 abstract,
5 poster, 11 database, 24 software e 24 altri). O di uno score ANVUR (VQR) di 5.6/6.
Alcune simulazioni precedenti indicavano p.es. usando il tool
YouAstro per 103 paper su rivista di cui 25
dopo il 2002, e una eta' accademica di 32 anni, un numero di lavori normalizzato
di 103, con 98.7 citazioni normalizzate, un H standard di 30 e un Hc di 18
(unico parametro che torna nei calcoli del CINECA).
Ripetendo oggi gli stessi calcoli (ma l'ADS e' stato aggiornato nel frattempo) sugli
stessi 103 paper, ne da' 21 dopo il 2002 (?), 3427 citazioni, 107.09 citazioni normalizzate,
un H standard di 32 e un Hc di 20.
Usando i dati raccolti a fine 2010 descritti nella sezione successiva
ho 180 lavori indicizzati da ADS dall'inizio attivita' (1979) fino al 2010 incluso.
di cui 118 hanno almeno una citazione, per un totale di 2925 citazioni, ed un
HA=30.
La perplessita' aumenta nel vedere tra i non-abilitati alcuni altri colleghi che
conosco, sicuramente piu' attivi di me (in almeno un paio di casi molto piu'
attivi e/o con grosse responsabilita' di progetto). Addirittura in tali casi non sono
stati calcolati i giudizi, in quanto nessuna delle tre mediane risulta superata !
Il che non torna affatto con la loro produzione.
Tuttavia nel mio caso (e in altri ?) la lista dei lavori era completa, ed al momento
non appare esservi pubblicita' dei calcoli fatti dal CINECA (mentre le azioni delle
commissioni sono pubbliche e complete).
E' possibile tuttavia che abbia trascurato un fattore. Supponendo che questo
documento ASN
sia quello applicabile a descrivere la procedura di normalizzazione, io avevo assunto
che si normalizzassero tutte le pubblicazioni a 10 anni mentre invece pare
siano state contate solo le pubblicazioni degli ultimi 10 anni (ho pure sempre
il dubbio che le banche dati usate dal CINECA siano incomplete ... nella domanda io
elencavo 59 lavori, tra i 273 totali, per l'intervallo 2002-2012 (26 su rivista, 10
atti di congressi, 6 poster, 18 rapporti di varia natura).
E' possibile quindi che si siano verificati errori negli agganci con le banche dati
"commerciali" usate dal CINECA, oppure che vi siano discrepanze tra queste e l'ADS
comunemente utilizzato nella comunita' astronomica.
Tutti gli istogrammi sono in percentuale del totale dei candidati per quella fascia.
L'istogramma nero si riferisce a tutti i candidati, quello rosso agli abilitati (quindi
si puo' leggere implicitamente anche la frazione di abilitati).
In questo caso il grosso delle distribuzioni (non le code) appaiono chiaramente diverse
per le due fasce.
Si noti che questa rappresentazione e' grossolana. Un punteggio zero si ottiene solo
per i candidati "non classificati" che non hanno superato le mediane (per cui si veda
tuttavia la sezione successiva). Altrimenti il punteggio minimo e' 3
(tutti gli indicatori uguali a "discreto"). Un punteggio di 7 puo' corrispondere a
casi che soddisfano il "criterio 1" descritto sopra (2 "ottimo" e 1 "discreto" come
minimo) ma anche a combinazioni che non lo soddisfano. I punteggi 8 e 9 soddisfano il
criterio 1, il punteggio 10 puo' soddisfare i criteri 1 oppure 2, i punteggi 11 e 12
corrispondono in modo non ambiguo ai criteri 2 e 3.
Tuttavia le considerazioni che seguono destano qualche dubbio sulla qualita'
di parte di tali input.
Considerazioni soggettive
Ne' in tale contesto posso lamentarmi dei giudizi della commissione (anche se posso
essere sorpreso di avere ottenuto una "discreta" attivita' scientifica e una "ottima"
responsabilita' scientifica, quando non ho mai voluto rivestire ruoli da PI o Project
Manager, e tantomeno negli ultimi tempi seguito dei grossi progetti. Io avrei forse
invertito o mediato tali giudizi !).
E' possibile che in taluni casi abbiano sbagliato i candidati (p.es. elencando solo
le pubblicazioni sottomesse in PDF senza "ticcare" le altre caricate sul "sito docente"
del CINECA e quindi "connetterle" con la domanda), e l'incompletezza di molte domande
e' stata notata dalla commissione che ha verbalizzato la cosa
(si veda questo estratto).
Ulteriori considerazioni
La banca dati comunemente utilizzata dalla comunita' astronomica e' infatti NASA ADS, che e' ritenuta affidabile e non e' soggetta a limitazioni commerciali per quanto riguarda l'accesso (incidentalmente e' anche utilizzata entro INAF per il proprio database interno, INAF CRIS).
Purtroppo non e' ne' facile ne' immediato ottenere ora da ADS i dati equivalenti a quelli utilizzati dal CINECA tramite le banche dati commerciali. Oltre alle banali motivazioni della quantia' di lavoro e del tempo necessario, uno dei problemi (con cui si confronta INAF CRIS) e' quello delle omonimie (ed infatti il personale INAF periodicamente deve verificare che i paper caricati automaticamente nel CRIS dall'ADS siano effettivamente i propri).
Tuttavia posso effettuare un confronto parziale con un insieme di dati che avevo raccolto sistematicamente alla fine del 2010 (che sono presentati pero' solo in un draft tuttora non finito). In tale dataset dispongo del numero di lavori nominalmente associati a una data persona (quindi senza verifica delle omonimie), per il personale strutturato INAF in forza a fine 2010. I dati immediatamente disponibili per persona sono:
- il numero totale di lavori elencati da ADS
- il numero totali di lavori elencati da Google Scholar (altra banca dati ad accesso pubblico ma probabilmente meno affidabili)
- l'indice di Hirsch "classico" HA calcolato dai dati ADS
- l'indice di Hirsch "classico" HG calcolato dai dati Google Scholar
- l'anno della prima pubblicazione su ADS
- l'anzianita' nella posizione lavorativa entro INAF (ed altre informazioni dalla "anagrafica INAF").
Ora la tabella degli abilitandi ASN contiene 246 persone per cui (si veda sopra)
ho ricostruito una affiliazione INAF al momento presente. La tabella dello staff INAF
al 2010 contiene 570 membri del personale scientifico per cui sono stati raccolti
i dati da ADS e Google Scholar.
Ovviamente non tutto il personale INAF ha applicato per l'ASN, e non tutti i candidati
ASN affiliati all'INAF erano in forza all'INAF nel 2010. In particolare tra i candidati
vi sono 21 assegnisti (non inclusi nel personale strutturato del 2010), 39
ricercatori probabilmente reclutati a tempo indeterminato o determinato dopo il 2010,
e 11 non classificati (tra cui p.es. 4 tecnici CTER per cui non erano stati ricercati
i dati ADS nel 2010). 11 casi di possibili omonimie sono stati arbitrati manualmente
(in 2 casi si tratta della stessa persona che ha indicato nomi personali diversi nella
domanda ASN rispetto all'anagrafica INAF, in altri casi di omonimie tra personale nuovo
e personale tecnico preesistente, oppure di personale di ricerca diverso, per cui
l'omonimia del cognome e' stata risolta usando il nome e la sede di lavoro).
In conclusione e' possibile fare un confronto su (sole) 175 persone. Di queste 91 hanno presentato domanda (almeno) per la prima fascia (29 abilitati), e 84 hanno presentato domanda (solo) per la seconda fascia (48 abilitati).
Nelle figure che seguono, le croci indicano i candidati alla prima fascia, gli asterischi quelli alla seconda fascia. Il colore nero i candidati non abilitati, e il colore rosso quelli abilitati. Cliccando su ogni figura si ha accesso a una versione postscript (scalabile a piena risoluzione) della figura stessa.
Come primo set di due figure relativa puramente al mio dataset e per evidenziarne le
limitazioni, e l'effetto di banche dati diverse.
confronto (a sinistra) il numero di lavori indiciati in ADS e in Google Scholar (GS)
alla data di raccolta (termine 2010). Il fatto che il numero di lavori GS (ove siano
disponibili) sia superiore a quello ADS e' presumibilmente dovuto ad omonimie, magari
con non-astrofisici. A destra invece sono confrontati gli indici di Hirsch H calcolati
dalle citazioni ADS e GS relativi agli stessi dati.
In tutti i casi i dati degli abilitati e dei non abilitati appaiono mescolati.
Passando agli indicatori ASN,
la terza figura (a sinistra) confronta il numero totale di lavori indiciati in ADS fino a fine 2010
con il primo indicatore ASN (ossia presumibilmente i lavori dal 2002 al 2012
contenutoi nelle banche dati usate dal CINECA). Le linee rosa orizzontali continua e
tratteggiata sono le mediane ASN del primo indicatore per la prima e la seconda fascia.
Non vi e' una chiara correlazione tra i due valori, vi e' un certo mescolamento tra
abilitati e non abilitati, e vi sono comunque alcuni non-abilitati con un numero
(notoriamente) elevato di pubblicazioni che appaiono averne assai poche nell'indicatore
ASN (vuoi perche' il candidato non le ha allegate, vuoi perche' le banche dati del
CINECA non le hanno agganciate, o vuoi perche' prevalentemente anteriori al 2002 ?).
La quarta figura (a destra) cerca di ovviare normalizzando la produzione ADS
a un periodo di 10 anni (considerando che invece copre un periodo di 2011-oldest
anni, dove oldest e' l'anno della prima pubblicazione in ADS per una data persona.
Quanto sopra assume una produttivita' costante. Se la produttivita' diminuisce con
l'eta' il numero di lavori ASN (nel caso l'elenco del CINECA sia completo) sarebbe
minore di quello estrapolato dall'ADS, il che pare accadere anche se non sempre.
In ogni caso non vi sono ovvie relazioni con l'avere o meno ottenuto l'abilitazione.
Nel tentativo di districare la situazione, la quinta figura (a sinistra)
riporta il rapporto tra l'indicatore 1 ASN (lavori nei 10 anni 2002-2012 ?)
e il numero di lavori estrapolati su 10 anni in base all'ADS (fino al 2010 incluso),
in funzione dell'anno del primo lavoro riportato da ADS. Una produttivita' costante
dovrebbe dare un rapporto unitario.
Appare ovvio che alcune stime di eta' (primo lavoro ADS) sono irrealistiche e
proabilmente dovute ad omonimie.
In ogni caso la sesta figura (a destra) riporta invece il rapporto tra il numero totale di lavori ADS (fino al 2010 incluso) e l'indicatore 1 ASN. In questo caso, anche omettendo di guardare i dati anteriori al 1970, si vede che vi sono candidati ad alta produzione "storica" che sono stati penalizzati dal valore dell'indicatore 1.
La ottava figura (a destra !) confronta l'indicatore 3 di ASN (cosiddetto
H contemporaneo) con l'indice di Hirsch classico derivato dai dati ADS, quantita' gia'
a disposizione e di natura affine. Anche qui e nella altra figura per l'indicatore 2
le linee orizzontali sono le mediane ASN per le due fasce.
Mentre non sorprende che Hc sia piu' basso di HA, il grafico non
mostra alcuna ovvia tendenza.
Per quanto riguarda l'indicatore 2 ossia le citazioni per anno, esse sono state
ricostruite per il campione ADS usando i dati raccolti (e salvati offline) a fine 2010
e dividendoli per 2011-oldest, e sono riportati nella settima figura
(a sinistra !).
La correlazione pare accettabile (i dati ASN possono avere piu' citazioni riferendosi
a un intervallo piu' recente), tuttavia vi sono un certo numero di deviazioni.
In conclusione da una parte c'e' qualche dubbio sulla rispondenza dei dati raccolti dal CINECA rispetto a quelli che si potrebbero raccogliere dall'ADS e sulla validita' complessiva del campione bibliometrico.
Dall'altra parte l'uso del metodo bibliometrico non sembra essere servito ad effettuare uno screening preliminare delle candidature in modo da alleggerire il lavoro della commissione, in quanto le candidature rigettate perche' sotto soglia sono poche e perlopiu' possibilmente affette da errori (vuoi del candidato, vuoi del CINECA), e probabilmente gli stessi errori hanno perturbato parzialmente i criteri successivi basati sulle mediane.
Questo se si vuole vedere il bicchiere mezzo vuoto. Chi vuol vedere il bicchiere mezzo pieno potrebbe notare invece come la qualita' dei candidati sia comunque elevata se basata sugli indici bibliometrici (perlomeno per i casi in cui non si ha ragione di dubitare degli stessi, tant'e' che si e' comunque dovuti ricorrere ad ulteriori criteri e giudizi per estrarne un campione numericamente limitato di abilitati.
Per il futuro, ed in particolare per eventuali concorsi di progressione interni all'INAF se si volesse seguire il modello dell'ASN, ma anche per future tornate ASN, andrebbero probabilmente considerate le seguenti cose:
- uso di ADS come banca dati di riferimento (o quanto meno in aggiunta alle altre) per la raccolta dei dati bibliometrici per gli astrofisici
- trasparenza e pubblicita' nel calcolo dei parametri bibliometrici
- chiarezza nelle modalita' di presentazione della domanda in modo da minimizzare gli errori da parte dei candidati (e annullare quelli nel post-processing).
Nuova sezione sulla seconda tornata (ASN 2013)
Fonti dei dati su ASN 2013
Sui candidati
Analogamente a quanto fatto sopra per la ASN 2012 l'elenco dei candidati (ignorando i curriculum) e' stato ottenuto dal sito ASN (si noti che i link indicati sopra possono essere parzialmente funzionali per decisioni ministeriali, ossia i documenti recuperati a suo tempo sono stati rimossi dal Ministero).L'elenco per il consueto settore disciplinare astrofisico e' stato recuperato, processato e ingerito nel database mysql degli abilitandi come descritto sopra. Non sono stati aggiornati gli elenchi del personale INAF ed universitario che restano quelli caricati a settembre 2013,
Si e' provveduto alla correlazione tra i tre elenchi come descritto sopra.
Si noti che i candidati alla ASN 2013 sono stati in genere aggiunti all'elenco preesistente, dopo avere flaggato i record esistenti come tornata=2012. I nuovi record sono flaggati come tornata=2013. I pochi casi di candidati che hanno applicato a entrambe le tornate, descritti nella sezione sulla statistica, sono flaggati tornata=4025. In alcuni casi per tali candidati esiste un vecchio record relativo al 2012. Poiche' l'elenco e' indiciato su nome e cognome, nei vecchi record il cognome e' stato modificato, aggiungendo -1 (per cui Rossi Mario e' stato sdoppiato in un nuovo record Rossi Mario e uno vecchio Rossi-1 Mario).
Sui risultati
Anche qui in analogia con quanto fatto piu' sopra per la ASN 2012 le informazioni sui risultati sono state ottenute dalla apposita pagina ASN che consente di accedere a una pagina sommario separata per ogni fascia, ed agli indicatori ed ai giudizi per ogni candidato.Si e' proceduto in piena analogia a quanto fatto per ASN 2012 salvo alcune modifiche tecniche:
- non e' piu' tecnicamente possibile ottenere i files PDF dei giudizi dal sito in modo automatico tramite ad.es wget per cui sono stati recuperati a mano (per fortuna sono relativamente pochi)
- il formato della pagina HTML con gli indicatori e' lievemente cambiato, per cui e' stato necessario editare il parser relativo
- invece il parser per i files PDF dei giudizi puo' essere usato invariato purche' si gestisca il cambio nel nome del file (che ora ha un prefisso Giudizinnnn.pdf invece di nnnn.pdf
Statistiche su ASN 2013
Sui candidati
Il numero totale di candidati per la seconda tornata ASN 2013 e' di 85, ossia circa 1/8 o il 13% dei partecipanti alla precedente tornata ASN 2012.- 20 (23%) sono universitari riconosciuti
- 18 (21%) sono personale INAF
- 47 (55%) sono esterni
- 12 sono nuovi candidati alla fascia 1
- 54 sono nuovi candidati alla fascia 2
- 19 si sono ricandidati dopo avere partecipato ad ASN 2012 e sono
ripartiti come segue
- 4 candidati abilitati alla fascia 2 in ASN 2012 che ora partecipano per la fascia 1 (superiore)
- 1 candidato abilitato alla fascia 1 in ASN 2012 che partecipa ancora per la stessa fascia 1 (per estendere l'abilitazione ?)
- 3 candidati abilitati alla fascia 2 in ASN 2012 ma non abilitati alla fascia 1, che si ripresentano per la fascia 2 (per estendere l'abilitazione ?)
- 4 candidati abilitati alla fascia 2 in ASN 2012 che non avevano partecipato per la fascia 1, che si ripresentano per la fascia 2 (per estendere l'abilitazione ?)
- 2 candidati non abilitati alla fascia 1 in ASN 2012 che ora si presentano per la fascia 2
- 4 candidati alla fascia 1 in ASN 2012 che non erano stati valutati (presumibilmente si erano ritirati) e ora si presentano per la fascia 2
- 1 candidato non abilitato in entrambe le fasce in ASN 2012 che si ripresenta per la sola fascia 2
Se ora si considera la ripartizione tra esterni, universitari ed INAF, quella relativa all'inquadramento attuale, e quella interna al personale INAF si puo' notare che
- 13 nuovi candidati sono INAF, mentre dei ricandidati 3 erano gia' indicati come INAF e 2 sono stati aggiunti
- Tra i ricandidati INAF 4 hanno il contratto EPR e uno lo stato giuridico di astronomo
- Tra i nuovi candidati 6 hanno il contratto EPR, 5 lo stato giuridico di astronomo e
2 sono "compensi imponibili ruoli esenti" qualsiasi cosa cio' significhi
Non si sono presentati assegnisti o borsisti - Del personale strutturato INAF, tutti sono della fascia iniziale (ricercatore o
ricercatore astronomo) salvo un primo ricercatore (e direttore di struttura) e
un astronomo ordinario
- Tra i 15 nuovi candidati universitari, 4 sono professori associati, 7 ricercatori e 4 assegnisti
- I 5 ricandidati universitari sono tutti ricercatori
- I nuovi candidati alla fascia 2 sono 33 esterni, 7 ricercatori universitari, 8 ricercatori INAF piu' i 2 "compensi imponibili ruoli esenti", 4 assegnisti universitari
- I nuovi candidati alla fascia 1 sono 5 esterni, 5 professori associati, 1 primo ricercatore, 1 ricercatore INAF e 1 astronomo ordinario
- Tra i ricandidati alla fascia 2 ci sono 3 esterni, 3 ricercatori universitari e 1 ricercatore astronomo
- Tra i ricandidati alla fascia 1 6 esterni, 2 ricercatori universitari e 4 ricercatori INAF
Sui risultati
E' possibile confrontare i nuovi risultati con quelli della tornata ASN 2012 innanzitutto per il numero di abilitati (assoluto e percentuale):- Su 22 candidati alla fascia 1 ne sono stati abilitati 8 (il 36% contro il 27% della precedente tornata)
- Di questi 8, 7 sono nuovi candidati e 1 un ricandidato
- Su 69 candidati alla fascia 2 ne sono stati abilitati 28 (il 40% contro il 44% della precedente tornata)
- Di questi 28, 16 sono nuovi candidati e 12 ricandidati (come spiegato
appena qui sopra)
- Per la fascia 1, su 6 candidati universitari sono stati abilitati 3 (50% contro il 42% delle tornata precedente)
- Su 8 candidati INAF solo 1 e' stato abilitato (12% contro il 30% precedente)
Si noti che il candidato gia' astronomo ordinario non e' stato abilitato ! - Su 11 candidati esterni ne sono stati abilitati 4 (36% contro il 14% precedente)
- Per la fascia 2, su 18 candidati universitari sono stati abilitati 6 (37% contro il 51% delle tornata precedente)
- Su 16 candidati INAF sono stati abilitati 9 (56% contro il 53% precedente)
- Su 41 candidati esterni ne sono stati abilitati 13 (32% contro il 35% precedente)
- Per quanto riguarda la fascia di provenienza dei candidati alla prima fascia
1 era gia' in prima fascia quale astronomo ordinario ma non e' stato abilitato
5 erano in fascia 2 di cui 4 abilitati
degli 8 candidati in fascia 3 nessuno e' stato abilitato
i rimanenti 4 abilitati sono gli esterni citati sopra - Per la seconda fascia
su 26 candidati in fascia 3 ne sono stati abilitati 15
nessuno dei 4 assegnisti candidati e' stato abilitato
i rimanenti abilitati sono gli esterni citati sopra
- il singolo abilitato INAF alla prima fascia e' il direttore di OACT
- gli abilitati universitari alla prima fascia sono a Trento, Bologna e Roma 3.
- gli abilitati INAF alla seconda fascia sono 2 ad Arcetri e OACT, ed 1 in ognuna di altre 5 sedi
- gli abilitati universitari alla seconda fascia sono 2 a Napoli ed 1 in ognuna di altre 4 sedi.
- i candidati di FIS/06 sono 21 (33% del totale) mentre erano il 16% in ASN 2012
- 2 su 5 candidati sono stati abilitati in prima fascia (40% rispetto al 16% di ASN 2012), di cui 1 universitario, 1 esterno e nessuno INAF
- 11 su 16 candidati sono stati abilitati in seconda fascia (69% rispetto al 52% di ASN 2012), di cui 3 univresitari, 8 esterni e nessuno INAF
Per quanto riguarda i giudizi sintetici della commissione, come per ASN 2012
anche qui i candidati che non hanno superato alcuna delle 3 mediane degli indicatori
bibliometrici non sono stati valutati. Si tratta di 7 casi in fascia 1 e 9 in fascia 2.
Si possono notare due peculiarita'. La prima e' che un astronomo ordinario e' risultato
sotto tutte le mediane, avendo verosimilmente presentato solo i lavori di cui e' stata
sottomessa copia PDF, che sono molto meno del suo reale complesso di pubblicazioni.
Questo fraintendimento aveva colpito molti piu' candidati in ASN 2012.
La seconda curiosita' riguarda un candidato che ha ripresentato gli stessi lavori
(sotto soglia per la fascia 1) in ASN 2013, con i quali era stato abilitato in fascia 2
in ASN 2012.
Ho anche prodotto qualche grafico da confrontare con la versione prodotta per la ASN 2012. Dato che non vi sono differenze degne di nota, non ho prodotto una preview PNG ma fornisco solo i link per retrievare i files postscript sia per entrambe le ASN che per la ASN 2012 (gli stessi gia' riportati sopra). Le nuove figure riportano sia i dati vecchi che quelli nuovi, modificando la simbologia come segue.
- le croci si riferiscono ai risultati ASN 2012
- i quadrati spessi si riferiscono ai risultati ASN 2013
- in nero i candidati universitari
- in verde i candidati INAF
- in blu i candidati esterni
- i rombi rossi (2012) o magenta (2013) spessi circondano il simbolo dei candidati abilitati
- le righe rosa indicano il livello della mediana dell'indicatore per la fascia in oggetto
- 2012 oppure 2012 e 2013 pubblicazioni vs citazioni
- 2012 oppure 2012 e 2013
- 2012 oppure 2012 e 2013 citazioni vs H-contemporary
- 2012 oppure 2013 istogramma pubblicazioni
- 2012 oppure 2013 istogramma citazioni
- 2012 oppure 2013 istogramma H-contemporary
- 2012 oppure 2013 istogramma punteggio complessivo G1+G2+G3
Considerazioni finali
Il numero dei candidati per la seconda tornata ASN 2013 e' significativamente inferiore al picco della prima tornata. Si puo' forse osservare un minor interesse da parte del personale INAF.
Si potrebbe anche commentare che se alle abilitazioni della prima tornata fossero
seguiti un numero adeguato di inserimenti in ruolo, i numeri piu' ridotti potrebbero
indicare che il meccanismo sia giunto a regime.
Oppure che non essendosi ancora tradotte le abilitazioni in reali inquadramenti, sia
venuto a scemare l'interesse.
Le altre variazioni paiono di natura fisiologica.
Introduction
After I read the page by Giulio Marini on ROARS, I realized that the site of the National Scientific Habilitation (ASN in Italian) was reporting the list of candidates to the first round (2012) of habilitations, and therefore I thought useful to make some simple statistics relevant to our sector of astronomy and astrophysics, with a cut different and complementary with respect to the statistics reported in the quoted ROARS page.
In particular I thought interesting to study a sector which is relatively
homogeneous, and with the peculiarity to be numerically dominated by non-university members,
i.e. the scientific staff of INAF (with the co-existence of the two historical groups of
"former Observatories" and "former CNR").
I admit that at the end it wasn't so easy as I expected because of the presence of a
substantial number of "external people", but for the time being I present things as I could
process them, even at the cost to present an "half-cooked job".
Preliminary information (for laymen)
I remind to "outsiders" of our environment (referring for further details to the
ASN site)
that Law 240 (2010) foresees that a pre-requisite to become full professors or
associate professors in Universities is to have obtained the
National Scientific Habilitation, which is granted by specific national
commissions for each disciplinary sector.
The first round of habiilitations, begun in 2012, is presently in progress.
Everybody, even if not affiliated to an italian university, can partecipate to any round (sending one's own CV and publication list).
In particular in the astrophysics sector the national community is formed also,
and with a numeric prevalence with respect to the university component,
by the scientific staff of
INAF (National Institute for Astrophysics).
See further below the statistics on the reference community.
Currently there is no equivalent to ASN for Public Research Organizations (PRO)
like'INAF (even if there have been informal talks).
Moreover I remind that university staff has been so far divided in three grades (in
italian "fasce" i.e. belts), i.e.
university researcher, associate professor, full professor.
The equivalent grades in PROs are those of researcher, senior researcher and
research director (or of technologist, senior technologist and technologist-director for
staff classified that way; note that there is no salary difference between
"researchers" and "technologists" of same grade.
In Astronomical Observatories before of the establishment of current INAF, there were three
grades identical to the university ones (researcher-astronomer, associate astronomer,
full astronomer). With the establishment of INAF such grades have been frozen,
staff in such grades who did not opt to pass in the PRO grades or did not enjoy
any career progression (which are numerically very limited in PROs),
mantains the previous status.
All these grades are preceded (at the post-doc level) from "atypical contracts"
(often named "precarious"), non tenured, like grants and fellowships (in italian
assegni di ricerca). The latter, in the form regulated by Law 240, are nowadays
the main form of "entry level" in resaerch activities.
In the past all university positions were permanent, while in PROs it was possible
to have, specially for the initial grade of researcher, non-permanent contracts
(for anyhting else at all identical to the permanent ones). Law 240 has transformed
the status of new university researches in non-permanent.
Data sources
The list of candidates to ASN has been retrieved from the
ASN site
exclusively for the sector 02/C1 (astronomy, astrophyics, Earth physics and
physics of planets), separately for the two grades (of full and associate
professors).
The ASN site supplies also the CVs part of the application, but they were not
consulted.
The list of INAF staff has been retrieved, seat by seat, from the registry of INAF employees. Beyond scientific staff (researchers and technologists, astronomers included) it contains also technical and administrative staff. It contains both permanent and non-permanent staff, as well as fellows (assegni di ricerca), but I am not sure that the latter list kept centrally be up to date with the real situation in the invidiual local seats). The registry contains details on all levels, like grades, salary steps, seniority in the position and/or hire date etc.
The list of university staff has been retrieved from the
CINECA site separately for
fellows (assegnisti di ricerca)
and for
teaching staff (i.e.
researchers, associate and full professors).
For fellows retrieval was limited to disciplinary sectors (SSD) FIS/05
(astronomy and astrophysics) and FIS/06 (Earth and circumterrestrial system).
For teaching staff separate retrievals were made from the lists for
disciplinary sectors (SSD) FIS/05 e FIS/06, for
macrosector 02/C (astronomy, astrophysics, Earth physics and planet physics)
and for the "evaluation grouping" (settore concorsuale) 02/C1 (idem). The last two lists were
found to be identical.
Retrieved material was ingested in a mysql database, in 3 tables, one for
habilitation candidates, one for INAF staff and one for university staff.
Then I verified that correlating on surname and names there were no homonimies.
I found instead four cases (all for INAF staff, later solved) of persons with more than
one name who weren't correlated (since in one table they appeared e.g. with two names
and in another with three, or with and without an hyphen).
Finally I normalized the reference to grades as follows:
For the candidate tables, each person appears
only one , and flags indicate whether he/she appliea for grade 1,
grade 2 or both
In the same candidate table I inserted the
la current grade of each applicant, obtained correlating with the other
two tables (INAF and university staff).
Grades are numbered for brevity as follows, uniforming
different categories and neglecting finer details (even if present in the
tables)
- grade 1 : full professors, full astronomers, research directors and technologists-directors
- grade 2 : associate professors, associate astronomers, senior researchers and senior technologists
- grade 3 : university researchers, researcher-astronomerss, PRO researchers, PRO technologists; both permanent and temporary contracts
- grade 4 : fellows (assegnisti di ricerca) and alike (grant holders etc.)
- grade -1 is used for those who could not be classified otherwise
The reference community
The list of university staff for astronomy includes 339 persons,
of which 116 from the fellows list (93 FIS/05 and 23 FIS/06)
and the rest from the teaching (structured) staff lists.
Of the latter 223), 167 appear in both lists (by SSD FIS/05 and by "settore
concorsuale"), 50 in both lists (by SSD FIS/06 and settore concorsuale),
3 only in the list for FIS/05, 2 only in the one for FIS/06 and 1 in all three lists
(settore concorsuale and both SSDs).
University staff works in 35 seats (including Scuola Normale Superiore, SISSA/ISAS and
IUSS). Some seats are not in cities commonly associated to astronomical
activity and/or have only 1 person (4 cases). 20 have between 2 and
persons, 9 between 10 and 20, 2 (SISSA and Roma Sapienza) slightly more than 20 and 2 (Padova and
Bologna) above 40.
The list of INAF staff inclusive of fellows and alike working at INAF seats
(but excluding affiliates of other institutions associate to INAF)
amounts to 1403 persons, included all technicak-administrative staff.
Of these 915 should correspond to scientific staff
(i.e. those classified in grades 1-4), and of the latter 659
(grades 1-3) are structured staff with permanent or temporary positions.
Fellows proper (assegnisti) are 170 and grant holders 80 (all flagged as grade 4).
There are possible uncertainties both de iure or de facto. E.g. a small
fraction of graduated administrative staff from former Observatories (i.e. formerly in the
university contractual compartment) has been classified as "technologists" at the moment of transition to the research
contractual compartment. Moreover unstructured staff (grade=4) includes, beyond fellows and grant
holders, 4 persons classified as "equivalent to researcher" and 2 "equivalent to senior
researcher" (but they are not temporary contract researchers, who would be listed with
structured staff).
INAF scientific staff works, after recent nergings, in 18 seats, located
in 12 cities or geographical areas, with a complement
varying from 14 for Teramo Observatory to 108 for IAPS Roma.
4 seats have less than 30 scientific staff members, 5 between 30 and 50, 7 between 50 and 80, and
2 (Arcetri and IAPS) beyond 80.
The composition of the national reference community formed by INAF and Universities and the breakdown in the different grades can be suummarized in the following table.
Institution | in absolute number | as percentage of total staff | as percentage of structured staff | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
grade | grade 1 | grade 2 | grade 3 | grade 4 | grade 1 | grade 2 | grade 3 | grade 4 | grade 1 | grade 2 | grade 3 | ||
Universities | 55 | 58 | 110 | 116 | 16% | 17% | 32% | 34% | 25% | 26% | 49% | ||
structured staff | 223 | 66% | 100% | ||||||||||
INAF | 42 | 137 | 480 | 256 | 5% | 15% | 52% | 28% | 6% | 21% | 73% | ||
structured staff | 659 | 72% | 100% | ||||||||||
PRO researchers | 14 | 61 | 201 | 6 | 1% | 7% | 22% | <1% | 2% | 9% | 30% | ||
PRO technologists | 2 | 14 | 143 | <1% | 1% | 15% | <1% | 2% | 22% | ||||
astronomers | 26 | 62 | 136 | 3% | 7% | 15% | 4% | 9% | 21% | ||||
Univ.+INAF | 97 | 195 | 590 | 372 | 8% | 16% | 47% | 29% | 11% | 22% | 67% | ||
structured staff | 882 | 70% | 100% |
Statistics about ASN
The total number of candidates for the settore concorsuale (evaluation gropu) for astrophysics (at large) is 656, nominallly equivalent to 52% of the composition of the reference community.
However anybody can apply to ASN even if not a member of the reference community defined
above. E.g. if one is working abroad, if one is working in a PRO different from INAF,
if one is working in an italian university but is affiliated to a different disciplinary
sector not included in those taken into account.
In fact a first statistics, based on the correlation among the tables of
candidates, INAF staff and university staff, indicates that:
- 107 candidates (16%) are "known" university staff
- 246 candidates (38%) come from INAF
- 304 candidates (46%) are "outsiders"
I am presently unable to identify any further where the (apparent) "outsiders"
come from, unless by consulting individual CVs (which would be excessively time consuming
in consideration of the large number).
I looked at the outsider lists, and found (only) two handfuls of names known to mei, of which
one is an homonimy, 3 or perhaps 4 are abroad (the fourth might have moved recently,
or have quitted science), 3 are staff of other PROs (CNR or INFN),
3 are italian university staff, but are not present in the lists I retrieved from
CINECA (as affiliated to other disciplinary sectors).
I regard as currently not viable to run a global (automatic) search on the
CINECA site to manage the latter case.
Therefore, for the 304 "unknown people", I am not able to perform many of the statistics reported below, like the one on the current grade, or the seat of work.
In any case it is instead possible to count how many candidates applied for grade 1 (full professor), for grade 2 (associate professor) or for both.
Application to grade | in absolute number | as percentage of overall total | as percentage of institution total | |||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|
institutions | all | univ. | INAF | outsiders | all | univ. | INAF | outsiders | all | univ. | INAF | outsiders |
all applications | 656 | 107 | 246 | 303 | 100% | 16% | 37% | 46% | 100% | 100% | 100% | 100% |
applications to grade 1 only | 120 | 28 | 51 | 41 | 18% | 4% | 8% | 6% | 18% | 26% | 21% | 14% |
applications to grade 2 only | 449 | 69 | 149 | 231 | 68% | 10% | 22% | 35% | 68% | 64% | 60% | 76% |
application to both grades | 87 | 10 | 46 | 31 | 13% | 2% | 7% | 5% | 13% | 9% | 19% | 10% |
It is rather curious to note that some candidates applied for both grades. Onw wonders what is the rationale behind it (maybe these are young candidates who think to be brilliant enough to qualify for grade 1, but want to be sure to obtain as fallback a grade 2 habilitation).
It is also curious to observe that the number of candidates from the universities (which presumably wish a career advancement) is a minority with respect to outsiders and INAF staff taken together. The latter may not realistically think that a sufficient number of university professor postions in the two grades will be available for all. Moreover INAF staff might not be interested to move to an university, in the case the salary seniority makes the operation not convenient (in lack of career reconstruction). It is plausible that such staff aims only to obtain a title (habilitation) demonstrating one's qualification to the upper grade, which could be tentatively exploited in a future internal progression procedure (where career reconstruction is possible).
Finally it is curious to note like applications by outsiders are mainly for grade 2, while double applications (for both grades) are more common among INAF staff.
For the 353 candidates coming from italian universities and from INAF it is possible to make a further statistics of the current grade (or starting grade).
The expectation would be that who is already in grade 1 did not apply, who is in grade 2 applied for grade 1, who is in grade 3 or not structured (here flagged as grade 4) applied for grade 2 or exceptionally for both grades.
Here is a statistics in absolute number.
Application to grade | University + INAF | INAF | University | |||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
starting grade | undefined | 4 | 3 | 2 | 1 | undefined | 4 | 3 | 2 | 1 | 4 | 3 | 2 | 1 | ||
all applications | 12 | 32 | 230 | 75 | 4 | 12 | 22 | 161 | 48 | 3 | 10 | 69 | 27 | 1 | ||
applications to grade 1 only | 1 | 5 | 69 | 4 | 1 | 5 | 42 | 3 | 27 | 1 | ||||||
applications to grade 2 only | 12 | 30 | 174 | 2 | 12 | 20 | 115 | 2 | 10 | 59 | ||||||
applications to both grades | 1 | 51 | 4 | 1 | 41 | 4 | 10 |
First of all the 12 persons "without grade" refer to INAF staff, concentrated in 6 different seats. In 5 cases they are permanent technicians (CTER IV level), who presumably graduated after they were hired and ended doing research activities ("underclassified"). In 7 cases they are collaborators listed as "Compensi imponibili ruoli esenti". I ignore what this category is (they are not fellows and are not structured). All 12 applied for grade 2.
Only 32 fellows (about 9% of the total of fellows) submitted an application for ASN, and the vast majority only for grade 2.
The bulk of applications is for grade 2 and has been submitted by structured staff of grade 3, i.e. researchers of the initial grade. Note the numeric prevalence of applications from INAF staff with respect to those from university staff. Some people have applied for both grades. Only 5 persons (in two INAF seats) applied to "jump" from grade 3 to grade 1.
An other significant and expected "bulk" is the one of those who from grade 2 applied
to pass to grade 1. Here too
note the numeric prevalence of applications from INAF staff with respect to those from
university staff.
However there are 4 curious cases of INAF senior researchers (that is, already now "in grade 2")
who submitted applications for both grades.
Equally curious are 4 cases of staff already in grade 1 who anyhow submitted application to grade 1. 3 are from INAF staff (1 research director and two full astronomers) which presumably have a real intent to move to University on future positions they are aware of, and therefore intend to ensure a formal habilitation. The fourth case is a full professor under probation ("straordinario").
A peculiarity of PROs are the parallel roles of technologists side by side with researchers (with the same three grades and the same salary scale). A peculiarity of INAF are the parallel roles of PRO "researchers and technologists" along with the "frozen" role of astronomers (with the grades and salary scale of university staff).
For what concerns technologists, note that among the candidates there are (only) 8 technologists
(of grade 3, working in 5 seats, 3 former CNR institutes and 2 observatories) who all
applied for grade 2.
Only one of them (with a nominal seniority of less than 5 years) applied to both grades.
For what astronomers are concerned (after the option phase they constitute 34% of structured scientific INAF staff), 83 of them submitted an application for ASN. It can be interesting to present a statistics for INAF with a breakdown between researchers with a PRO contract and astronomers with "juridical status". Such statistics is reported here below (the 8 technologists quoted above are not included with PRO researchers).
Application to grade | INAF all | INAF PRO researchers | INAF astronomers | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
starting grade | undefined | 4 | 3 | 2 | 1 | 3 | 2 | 1 | 3 | 2 | 1 | ||
all applications | 12 | 22 | 161 | 48 | 3 | 92 | 27 | 1 | 61 | 20 | 2 | ||
applications to grade 1 only | 1 | 5 | 42 | 3 | 3 | 23 | 1 | 2 | 19 | 2 | |||
applications to grade 2 only | 12 | 20 | 115 | 2 | 63 | 45 | 1 | ||||||
applications to both grades | 1 | 41 | 4 | 26 | 4 | 14 |
Finally the latter two tables are reported as percentages.
The distribution of applications by starting grade and by the grade applied for, in percentage of the total number of candidates (107 university staff, 246 INAF staff or 353 from both institutions) is very similar in the various cases.
Application to grade | University + INAF | INAF | University | |||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
starting grade | undefined | 4 | 3 | 2 | 1 | undefined | 4 | 3 | 2 | 1 | 4 | 3 | 2 | 1 | ||
all applications | 3% | 9% | 65% | 21% | 1% | 5% | 9% | 65% | 19% | 1% | 9% | 64% | 25% | 1% | ||
applications to grade 1 only | <1% | 1% | 19% | 1% | <1% | 2% | 17% | 1% | 25% | 1% | ||||||
applications to grade 2 only | 3% | 8% | 49% | <1% | 5% | 8% | 47% | 1% | 9% | 55% | ||||||
applications to both grades | <1% | 14% | 1% | <1% | 16% | 1% | 9% |
The distribution between researchers and astronomers within INAF, in percentage of the total number of candidates (246 INAF staff, 120 researchers, 83 astronomers) are also rather similar.
Application to grade | INAF tutti | INAF PRO researchers | INAF astronomi | ||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
starting grade | undefined | 4 | 3 | 2 | 1 | 3 | 2 | 1 | 3 | 2 | 1 | ||
all applications | 5% | 9% | 65% | 19% | 1% | 76% | 22% | 8% | 73% | 24% | 2% | ||
applications to grade 1 only | <1 | 2% | 17% | 1% | 2% | 19% | 1% | 2% | 23% | 2% | |||
applications to grade 2 only | 5% | 8% | 47% | 1% | 52% | 65% | 1% | ||||||
applications to both grades | <1% | 16% | 1% | 21% | 3% | 17% |
New section about National Scientific Habilitation (ASN) results
Data sources about results
The results of the National Scientific Habilitation (ASN for short in the remainder of this document) are very gradually appearing on the ASN site in a dedicated page, where one can choose the disciplinary sector and the grade of the applications. In particular for astrophysics (sector 02/C1) there are two sub-pages for the grade 1 and grade 2.Each of those (HTML) pages contains the minutes of the sessions of the "commission" (Evaluation Board) (presumably the same minutes for both grades since the Board is common to both), the list of candidates, a Yes/No flag indicating whether habilitation was granted or not, and further links. In particular CVs and all further links related to a given candidate and her/his application for a particular grade have a numeric identifier.
Among further links, one contains the indicators (i.e. the famous or infamous medians) and another the scores of the Board.
The link for indicators is an HTML page which can be parsed to extract the three indicators to be inserted in the mysql database (separately for the two grades) :
- number of normalized publications
- number of normalized citations
- modifed Hirsch index i.e. "contemporary" Hc
The link for scores is instead a PDF document, but fortunately in a standard format, which can be converted to text and then parsed relatively easily. Each Board member assigned individually three synthetic scores, then the entire Board has agreed three collegial scores. Therefore we have a total of (5+1)×3 scores to be inserted in the mysql database. They are indicates as
- G1 : submitted publications
- G2 : global scientific activity
- G3 : scientific responsibility
All above data have been inserted into the pre-existing mysql table of habilitation candidates separately for the two grades: 3 indicators, 18 G1/2/3 scores, the FIS/06 flag and the habilitation flag.
The following auxiliary data have additionally being retrieved: the tables of the reference medians for sector 02/C1 and eventual FIS/06 SSD for grade 1 and grade 2 and the criteria established by the Board and reported in the appropriate minute. The medians are:
indicator | 02/C1 overall | SSD FIS/06 | ||
---|---|---|---|---|
grade 1 | grade 2 | grade 1 | grade 2 | |
Publications | 49 | 32 | 27.5 | 17 |
Citations | 86.08 | 35.83 | 22.01 | 14 |
Hc | 18 | 10 | 9 | 6 |
Scores G1/2/3 was not computed if no median was passed. Habilitation was granted if
- criterion 1: 3 medians passed and at least two of G1/2/3 are 3 (very good)
- criterion 2: 2 medians passed and at least two of G1/2/3 are 4 (excellent)
- criterion 3: 1 median passed and all G1/2/3 are 4
Statistics about results
A first statistics concerns the number of habilitated (in absolute value and as percentage of the number of candidates), grouped according various criteria.
Criterion | Grade 1 | Grade 2 | ||||
---|---|---|---|---|---|---|
candidates | habilitated | percentage | candidates | habilitated | percentage | |
Total number | 207 | 55 | 26.6% | 536 | 235 | 43.6% |
Affiliated to universities | 38 | 16 | 42.1% | 79 | 41 | 51.9% |
Affiliated to INAF | 97 | 29 | 29.9% | 195 | 103 | 52.8% |
Outsiders | 72 | 10 | 13.9% | 262 | 91 | 34.7% |
Among INAF staff | ||||||
are PRO researchers | 57 | 16 | 28.0% | 93 | 56 | 50.2% |
are former Observatory astronomers | 37 | 13 | 35.1% | 60 | 40 | 66.7% |
are PRO technologists | 1 | 0 | -- | 8 | 4 | 50.0% |
university and outsiders | 112 | 26 | 23.2% | 375 | 135 | 36.0% |
According to current grade | ||||||
already in grade 1 | 4 | 3 | 75.0% | -- | -- | -- |
already in grade 2 | 73 | 42 | 57.5% | 6 | 4 | 66.7% |
already in grade 3 | 56 | 0 | -- | 225 | 137 | 60.9% |
fellows and alike | 2 | 0 | -- | 31 | 3 | 9.7% |
unknown | 72 | 10 | 13.9% | 274 | 91 | 33.2% |
Above statistics have been computed on the total sample without separating candidates who applied for sector SSD FIS/06.
The percentage of habilitated is significatively higher for grade 2 than for
grade 1. There are few differences among university and INAF staff, specially for
grade 2, while there are less habilitated among outsiders.
There are also few differences within INAF staff, between those with the contractual status
of PRO researcher, and those with the juridical status of former Observatory astronomers.
The number of PRO technologists among candidates is notoriously limited.
Unsurprisingly the majority of the habilitated to one grade comes from the grade immediately below.
It is curious to note that of 4 candidates already de facto in grade 1 (one full professor in probation,
two full astronomers and one research director) only three
were habilitated, excepting one full astronomer
Among the 42 habilitated to grade 1 coming de facto from grade 2 (associate professors,
associate astronomers, senior researchers) there are 15 university and 27 INAF staff
(15 senior researchers and 12 associate astronomers).
Only three habilitated to grade 2 are fellows or alike.
Of 6 candidates already de facto in grade 2 (senior researchers or
associate astronomers) 4 applied for and obtained habilitation while
2 did not obtain it.
Of 87 candidates who applied for both grades, 15 did not obtain any habilitation, 71 have been habilitated to grade 2, and 1 only to both grades.
For university and INAF staff it is also possible to make a statistics by seat. We list the number of habilitated and the percentage w.r.t. the candidates in such seat (from which it is easy to inferir which seats are more or less populated).
In grade 1 within INAF habilitated are 9 at Arcetri (90%), 4 at Brera(30%), 3 at IASF-Mi (50%) 2 at OARM (22%), OATS (50%), IAPS (28%) and OABO (20%) and 1 each at OAPA (100%), OATE (100%), Capodimonte (17%), IASF-Bo (11%) and IRA (50%).
In grade 1 habilitated in Universities are 3 in SISSA (100%), 2 in Roma 2 (66%), and one each in Bologna, Milano 1, Palermo (33%), Trieste and Padova (50%) and at Insubria, Calabria, Milano Bicocca, Roma3 and Cagliari (100%).
In grade 2 within INAF habilitated are 15 at OAPD (88%), 13 at OABO (65%), 12 at IASFBo (80%), 10 at Brera (52%), 9 at IAPS (36%), 8 at OARM (40%), 7 at OATS (70%), 6 at OACT (75%), 4 at IASFMi (36%), 4 at Capodimonte (57%), 3 at IASFPa (50%), IRA (37%), Arcetri (30%), 2 at OATO (17%) and OAPA (33%). 1 at OACA and OATE (both 100%).
In grade 2 habilitated in Universities are 7 at Padova (63%), 6 at Bologna (50%), 5 at Roma 1 (83%), 3 at Trieste (75%), Aquila (60%) and Napoli (75%), 2 at Roma 2 (33%), Milano 1, Perugia and Palermo (100%), Salento (67%), 1 at Torino (25%), Basilicata e Ferrara (50%), and Pisa (100%).
Considering now candidates in the sub-sector SSD FIS/06 one notes the following:
Of 31 candidates to grade 1, only 5 are habilitated (2 university staff and 3 outsiders)
with a percentage of 16%. Most candidates were outsiders (only 4 more
university staff and 1 from IAPS INAF).
Of 83 candidates to grade 2, 43 were habilitated (9 university staff, and the rest
outsiders) with a percentage of 51.8% ! Here too most candidates were outsiders
(just 5 more university staff and 1 from IAPS INAF).
Note that the Board in its minutes has remarked about the dishomogeneity related to
the requirement to manage SSD FIS/06 together with the rest.
They did not remark instead (but I add such comment) that also the entire sector
of astrophysics could be considered excessively large and internally dishomogeneous,
e.g. w.r.t. usual subdivisions like INAF macro-areas.
For what indicators are concerned, see also subjective considerations below for eventual quirks.
A trivial verification is that, of the 87 candidates who applied for both grades,
they usually get the same indicators for both.
12 have a different publication number (usually by 1 or less, seldom more),
15 have a different citationi number (usually by a fraction of a point,
sometimes more), 6 have a different Hc (usually by 1 unit).
I am not able to tell whether it depends on differences in the actual submitted application
or on computing artefacts occurred at CINECA.
For what concerns scores G1, G2, G3 I first note that candidates under all 3 medians for the respective grade, according to the established procedure, did not have any score computed (which therefore appear as zero in the database).
This happens for 30 candidates to grade 1 and 68 to grade 2. About all these see also below in the subjective considerations.
For the rest of the candidates one notes a good homogeneity in the scores among different Board members. This was verified taking the numeric average of the 5 scores (which obviously is a rough approximation).
For candidates to grade 1 in 129, 119 and 143 cases the value of the G1, G2 or G3
collegial indicator is exactly equal to the average.
For 203, 205 and 205 cases the value of G1, G2, G3 is equal to the average rounded by
defect or excess (function ROUND in mysql).
In 3 cases G1 was raised from 3.4 to 4 and in 1 from 2.2 to 3,
in 2 cases G2 lowered from 1.6 to 1,
in 2 cases G3 raised from 3.2 to 4.
For candidatesto grade 2 in 490, 380, 464 cases the value of the G1, G2 or G3
collegial indicator is exactly equal to the average, and for all 536 cases
is equal to the rounded average.
Considering that the difference between the best individual score and the collegial score is practically never larger than 1 step (only in 2 cases for G2 in grade 1, and in 1 case for G1 and G2 in grade 2), it is not necessary to compute RMS or standard deviations, and I won't proceed any further.
Considering now the number of passed medians one obtains the following
distribution. One can note a single very small anomaly (a candidate to grade 2 in sector
SSD FIS/06 has the third median exactly equal to the reference value,
therefore he should pass one median, but scores G1/2/3 are not computed).
For the rest, in compliance with the procedure, candidates with zero medians passed
have, as expected, G1=G2=G3=0.
It can be noted (though with the doubts raised under subjective considerations)
that a sizeable fraction of candidates appear to pass all three medians (and that therefore
further criteria are necessary).
number of passed medians | grade 1 | grade 2 |
---|---|---|
none | 30 | 67 |
one | 17 | 30 |
two | 39 | 72 |
three | 121 | 367 |
Considering now the scores and their relevant criteria one obtains the following distribution of habilitated (which as corollaries indicates how the Board has correctly applied the established procedure, and moreover indicates how the bibliometric criterion of medians has prevailed).
criterion | grade 1 | grade 2 |
---|---|---|
1: 3 medians, 2 very good | 45 | 222 |
2: 2 medians, 2 excellent | 10 | 12 |
3: 1 medians, 3 excellent | 0 | 1 |
Data can be presented also in graphical form, on the left for candidates
to grade 1, on the right for those to (only) grade 2. In all plots (of which one can
obtain a fully scalable postscript version clicking on the preview) colours
indicate;
A first family of plots compares indicators 1 and 2 (normalized publications and citations).
The correlation between the two has a certain spread, there are candidates with a high
indicator which weren't habilitated, but in particular note how candidates to grade 2
show values, specially for citations, often higher and anyhow
comparable to those of the candidates to grade 1.
A second family of plots compares indicators 1 and 3 (publications and Hc).
Here too one can see a certain correlation with some spread, and intervals of Hc
comparable for the two grades.
The third family of plots closes the loop comparing indicators 2 and 3 (citations and Hc).
with results obviously complementary to the previous ones.
A different and complementary approach reports the histogram of each indicator.
The three plots below refer to the first indicator (publications, on the left),
the second (citations, at centre) and the third (Hc, on the right).
Each plot is divided in two panels, the top one for grade 1 and the bottom one
for grade 2. The vertical pink line (solid or dashed) indicates the reference
median.
As an an attempt to quantify the distribution of scores
(synthetic but not bibliometric) G1/2/3 one can
report in histogram form (analogously to what above) the sum of numeric values
(described further above) G1+G2+G3. This is done in the plot below here.
To close the loop we report on the separate rows (for grades 1 and 2)
the plots of overall score G1+G2+G3 as function of each of the three bibliometric indicators
(using colours and symbols as in the above plots of indicators among themselves).
In conclusion the Board has been certainly done an heavy work
examining about 700 applications, and has done it correctly based on received inputs.
I cannot say to be personally surprised by the fact I had not been
habilitated. At least looking at face-value the global results, i.e.
comparing myself with other habilitated I know, who surely have lately a record of
activities higher in terms of measure and quality.
But I remain unpleasantly surprised to see among indicators a number of
normalized publications equal to 22 (!) with 85.29 normalized citations when I submitted
in the CV 273 works (126 journal papers, 49 proceedings, 3 abstracts,
5 posters, 11 databases, 24 software and 24 other reports). Or when I achieved an ANVUR
(VQR) score di 5.6/6 (this was computed on "the best papers for INAF").
Earlier simulation suggested e.g. using tool
YouAstro for 103 journal papers of which 25
after 2002, and an academic age of 32 years, a normalized number of works of
103, with 98.7 normalized citations, a standard H of 30 and an Hc of 18
(only parameter matching with computations by CINECA).
Repeating today the same exercise (but ADS has been updated in the meanwhile) on the
same 103 papers, it gives 21 after 2002 (?), 3427 citations, 107.09 normalized citations,
a standard H of 32 and an Hc of 20.
Using data collected at end 2010 described in the next section
I have 180 works indexed by ADS since beginning of my activity (1979) until 2010 included,
of which 118 have at least one citation, for a total of 2925 citations, and an
HA=30.
Perplexity increases seeing among non-habilitated some other colleagues which I
know, who are certainly more active than I am (in at least a pair of cases much more
active and/or with large project responsibilities). In such case the scores weren't even
computed, since none of the three medians appear to be passed !
Which does not match at all their production.
However in my case (and other ?) the list of papers was complete, and presently
the computations done by CINECA do not appear to be public (while actions by the Boards
are public and complete).
It could be however possible I neglected one issue. Assuming that this
ASN document
be the applicable one to describe the normalization procedure, I assumed that
all publications be normalized to 10 years while instead it looks like
only publications of the last 10 years were counted (I also still have the doubt
that databases used by CINECA can be incomplete ... in the application I listed
59 works, among 273 total, for the interval 2002-2012 (26 journal papers, 10
conference proceedings, 6 posters, 18 reports of various nature).
It is therefore possible that errors occurred when hooking with "commercial" databases
used by CINECA, or that discrepancies exist between such databases and ADS, the
database currently used by the astronomic community.
All histograms are in percentage of the total of candidates for the specific grade.
The black histogram refers to all candidates, the red one to habilitated (hence one
can implicitly read also the fraction of habilitated).
In this case the bulk of the distributions (not the tails) appear clearly different for
the two grades.
Note that such representation is coarse. A score of zero is obtained only for
candidates "not classified" i.e. who did not pass the medians (about this see also
however next section). Otherwise the minimum score is 3
(all G1/2/3 equal to "fair"). A score of 7 can correspond to cases
satisfying "criterion 1" described above (2 "very good" and 1 "fair" as minimum)
but also to combinations which do not satisfy it. Scores 8 and 9 satisfy
criterion 1, score 10 can satisfy criteria 1 or 2, scores 11 and 12
correspond unambiguously to criteria 2 and 3.
However the considerations following below raise some doubt on the quality of
part of such inputs.
Subjective considerations
Neither can I in such context complain about the scores by the Board (even if I could
be surprised to have obtained a "fair" for scientific activity and a "very good" for
scientific responsibility, when I never wanted roles as PI or Project
Manager, nor recently followed any big project. Probably I would have reversed
or averaged such scores !).
It is possible that in some cases a mistake was done by the candidates (e.g. listing only
publications submitted as PDF without "ticking" the other loaded on the publication archive
of CINECA in order to "hook" them with the application). In fact the incompleteness of many applications
has been noticed by the Board which has recorded the remark in the minutes
(see this excerpt).
Further considerations
The publication database currently used by the astronomic community is in fact NASA ADS, considered highly reliable and not subject to commercial access limitations (incidentally it is also used within INAF for its own internal database, INAF CRIS).
Unfortunately it is not easy nor immediate to obtain now from ADS data equivalent to those used by CINECA derived from commercial databases. Beyond the trivial motivations of work load and time necessary to do it, one of the problems (well known also to INAF CRIS) is the one of homonimies (and in fact INAF staff must periodically verify that papers automatically loaded into CRIS from ADS are actually one's own).
I can however make a partial comparison with a dataset I systematically collected at end 2010 (described however only in an unfinished draft). In such dataset there is the number of papers nominally associated to a given person (hence without verification of homonimies), for structured INAF staff present at end 2010. Data immediately available per person are:
- total number of papers listed by ADS
- total number of papers listed by Google Scholar (other database under public access, probably less reliable)
- Hirsch "classical" index HA computed from ADS data
- Hirsch "classical" index HG computed from Google Scholar data
- the year of the earliest publication in ADS
- the seniority of the employment with INAF (and other information from the "INAF registry").
The table of ASN candidates contains 246 persons for whom (see above)
I reconstructed an INAF affiliation at present. The table of INAF staff at end
2010 contains 570 scientific staff members for whom data were collected from
ADS and Google Scholar.
Of course not all INAF staff applied for ASN, and not all ASN candidates
affiliated to INAF were in force at INAF in 2010. In particular candidates include
21 fellows (not included in structured staff in 2010), 39
researchers possibly recruited with a permanent or temporary contract after 2010,
and 11 unclassified cases (among which e.g. 4 CTER technicians for whom ADS was not
searched in 2010). 11 cases of possible homonimies were manually resolved
(in 2 cases it is the same person who indicated different personal names in the ASN
application w.r.t. the INAF registry, other cases are homonimies between newly hired
staff and pre-existing technical staff, or of different research staff, for whom the
surname homonimy has been solved verifying first name and seat of work).
In conclusion a comparison is possible (only) for 175 persons. 91 of them applied (at least) for grade 1 (29 were habilitated) and 84 applied (only) for grade 2 (48 habilitated).
In the plots below, crosses indicate candidates to grade 1, asterisks to grade 2. Black colour is for non-habilitated, and red colour for habilitated candidates. Clicking on each plot, one can access a postscript version (scalable to full resolution) of the same plot.
The first set ot two figures is relative only to my dataset, and highlights its
limitations, and the effect of using different databases. The plot on the left
compares the number of papers indexed in ADS and in Google Scholar (GS)
on collection date (end 2010). The fact the number of GS papers (where
available) be higher than in ADS is presumably due to homonimies, perhaps with
non-astrophysicists. The plot on the right instead compares Hirsch H indices computed
from ADS and GS citations relative to the same data.
In all cases data for habilitated and non-habilitated appear intermingled.
Moving on to ASN indicators,
the third plot (on the left) compares the total number of papers indexed in ADS until end 2010
with the first ASN indicator (i.e. presumably the papers from 2002 to 2012
contained in the databases used by CINECA). Pink horizontal lines (resp. solid and dashed)
show the ASN medians of the first indicator for grades 1 and 2.
There is no obvious correlation between the two quantities, there is some mix-up between
habilitated and non-habilitated, and there are anyhow some non-habilitated with a
(notoriously) high publication record who appear to have very few in the ASN indicator
(maybe because the candidate did not submit them, maybe because the CINECA databases did
not hook them up, or maybe because mostly published before 2002 ?).
The fourth plot (on the right) atttempts to resolve the situation normalizing the ADS production
to an interval of 10 years (taking however as total interval one of 2011-oldest
years, where oldest is the year of the first publication present in ADS
for a given person.
What above assumes a constant productivity. If productivity decreases with age
the number of ASN papers (provided the list at CINECA is complete) would be less
than the one extrapolated from ADS, which seems to happen, but not always.
Anyhow there is no obvious relationship with having been granted habilitation or not.
Attempting to disentangle the situation, the fifth plot (on the left)
reports the ratio between ASN indicator 1 (papers in 10 years 2002-2012 ?)
and the paper number extrapolated on 10 yeats based on ADS (until 2010 included),
as function of the year of the first paper recorded by ADS. A constant productivity
should give a unit ratio.
It looks obvioous that some age estimates (first ADS paper) are unrealistic, possibly
due to homonimies.
Anyhow the sixth plot (on the right) reports instead the ratio between the total number of ADS papers (until 2010 included) and ASN indicator 1. In this case, even omitting to look at data before 1970, it appears that there are candidates with an higher "historical" production who were penalized by the value of indicator 1.
The eight plot (on the right !) compares ASN indicator 3 (so-called
contemporary H) with classical Hirsch H-index derived from ADS data, which was already
avaliable and is a similar quantity. Here too as well in the other plot for indicator 2
horizontal pink lines are ASN medians for the two grades.
While it is non surprising that Hc is lower than HA, the plot does
not show any obvious trend.
For what concerns indicator 2 i.e. citations per year, they have been
reconstructed for the ADS sample using data collected (and saved offline) at end 2010,
dividing them by 2011-oldest, and are reported in the seventh plot
(on the left !).
The correlation looks acceptable (ASN data may have more citations since they refer to
a more recent interval), however a certain number of deviations is apparent.
In conclusion on one hand there is some doubt on the correspondence of data collected by CINECA with those which could be collected from ADS and on the overall validity of the bibliometric sample.
On the other hand use of a bibliometric method seems to have been not useful to make a preliminary screening of applications in order to lighten the burden on the Board, since applications rejected because under threshold are few, and possibly mostly affected by mistakes (by the candidate or by CINECA), and probably the same mistakes might have perturbed partially the subsequent criteria which made use of medians.
This is one likes to see the glass half empty. Who likes to see the glass half full might instead note how the quality of candidates be anyhow high if based on bibliometric indices (at least in the cases where there is no reason to doubt about them), and in fact one had to resort to further criteria and scores to extract a numerically limitated sample of habilitated.
For the future, and in particular for eventual procedures of career progression internal to INAF if one would like to follow the ASN model, but also for future ASN rounds, the following items should be probably considered:
- usage of ADS as reference database (or at least in addition to the other) for the collection of bibliometric data for astrophysicists
- transparency and publicity in the computation of bibliometric parameters
- clarity in the procedures for applications in order to minimize errors by candidates (and reduce to zero those during post-processing).
New section on the second round (ASN 2013)
Data sources about ASN 2013
About applicants
With analogy to what made above for ASN 2012 the list of applicants aka candidates (CVs have been ignored) was obtained from the ASN site (note that links indicated above may be functioning only partially because of decisions of the Ministry, namely the documents retrieved when the site was made available have been later removed by the Ministry).The list for the usual astrophysics disciplinary sector has been retrieved, processed and ingested in the mysql database of candidates as described above. The lists of INAF and university staff have not been updated and remain those loaded in September 2013,
The correlation of the three lists was perfored as described above.
Note that applicants to ASN 2013 have been usually added to the pre-existing list, after existing records were flagged as round=2012. New records are flagged as rounda=2013. The few cases of candidates who applied for both rounds, described in the section about statistics, are flagged round=4025. In some cases for such candidates there is an older record relative to 2012. Since the list is indexed on name and surname, in the older records the surname was modified, adding -1 (so John Smith has been doubled into a new record John Smith and an older John Smith-1).
About results
Here too, analogously to what done above for ASN 2012 information about results was obtained from the appropriate ASN page which allows to access a summary page specific for each grade, and to the indicators and scores for each candidate.I proceded analogously to what done for ASN 2012 except for a few technical changes:
- it is no longer possible to retrieve the PDF files with scores from the site in an automated manner e.g. via wget therefore they have been retrieved manually (luckily they are not that many)
- the format of the HTML page with indicators has slightly changed, hence it has been necessary to edit the relevant parser
- the PDF file parser can be used to extract the scores with no change, provided one manages the change in filename (now prefixed as Giudizinnnn.pdf instead of nnnn.pdf
Statistics about ASN 2013
About applicants
The total number of applicants for the second round ASN 2013 is 85, i.e. about 1/8 or 13% of applicants to the previous round ASN 2012.- 20 (23%) are known university staff
- 18 (21%) are INAF staff
- 47 (55%) are outsiders
- 12 are new applicants to grade 1
- 54 are new applicants to grade 2
- 19 did apply again after participating to ASN 2012 and are
subdivided as follows
- 4 persons habilitated to grade 2 in ASN 2012 have now applied for the upper grade 1
- 1 person habilitated to grade 1 in ASN 2012 has applied again for the same grade 1 (to extend the habilitation ?)
- 3 persons habilitated to grade 2 in ASN 2012 but not habilitated to grade 1, have reapplied just for grade 2 (to extend the habilitation ?)
- 4 persons habilitated to grade 2 in ASN 2012 who did not apply for grade 1, and now apply again for grade 2 (to extend the habilitation ?)
- 2 persons not habilitated to grade 1 in ASN 2012 now apply just for grade 2
- 4 candidates to grade 1 in ASN 2012 which weren't evaluated (presumably withdrew the application) and now apply for grade 2
- 1 candidate not habilitated to neither grade in ASN 2012 now applies only for grade 2
Considering then the partition among outsiders, university and INAF staff, the current grade, and the categorization inside INAF staff, one can note that
- 13 new applicants are INAF, while within re-applicants 3 were already listed as INAF e 2 were added
- Within the INAF re-applicants 4 have the PRO contract and 1 the astronomer "juridical status"
- Within new applicants 6 have the PRO contract, 5 are astronomers and 2 are flagged
"compensi imponibili ruoli esenti" whatever it means (fellows?)
No holders of fellowships (assegni di ricerca) or grants applied - Within "structured" INAF staff, all are in the initial grade (researcher or
researcher-astronomer) except one senior researcher (also observatory director) and
one full astronomer
- Within the 15 new applicants from universities, 4 are associate professors, 7 researchers and 4 fellows (assegnisti)
- The 5 re-applicants from universities are all researchers
- New applicants to grade 2 are 33 outsiders, 7 university researchers, 8 INAF researchers plus the 2 "compensi imponibili ruoli esenti", 4 are university fellows (assegnisti)
- New applicants to grade 1 are 5 outsiders, 5 associate professors, 1 senior researchere, 1 INAF researcher e 1 full astronomer
- Re-applicants to grade 2 include 3 outsiders, 3 university researchers and 1 researcher-astronomer
- Re-applicants to grade 1: 6 outsiders, 2 university researchers and 4 INAF researchers
About results
One can compare new 2013 results with results of round ASN 2012 starting from the number of habilitated (absolute and in percentage):- Of 22 candidates to grade 1 8 have been habilitated (36% vs 27% of the previous round)
- Of such 8, 7 are new applicants and 1 a re-applicant
- Of 69 candidates to grade 2 28 have been habilitated (40% vs 44% of the previous round)
- Of such 28, 16 are new applicants and 12 re-applicant (as explained
just above here)
- For grade 1, of 6 university candidates 3 have been habilitated (50% vs 42% of the previous round)
- Of 8 INAF candidates only 1 has been habilitated (12% vs previous 30%)
Note that the candidate already full astronomer has not been habilitated as full professor ! - Of 11 outsider candidates 4 have been habilitated (36% vs previous 14%)
- For grade 2, of 18 university candidates 6 have been habilitated (37% vs 51% of the previous round)
- Of 16 INAF candidates 9 have been habilitated (56% vs previous 53%)
- Of 41 outsider candiudates 13 have been habilitated (32% vs previous 35%)
- For what concerns the grade of origin, among candidates to grade 1
1 was already in grade 1 as full astronomer but has not been habilitated
5 were in grade 2 (of which 4 habilitated)
none of the 8 candidates in grade 3 has been habilitated
the remaining 4 habilitated are the outsiders quoted above - For grade 2
of 26 candidates in grade 3, 15 have been habilitated
none of the 4 fellows (assegnisti) has been habilitated
all remaining habilitated are the outsiders quoted above
- the only INAF habilitated to grade 1 is OACT director
- university staff habilitated to grade 1 are from Trento, Bologna e Roma 3.
- INAF habilitated to grade 2 are 2 in Arcetri and OACT, plus 1 in each of other 5 seats
- university staff habilitated to grade 2 are 2 in Naples plus 1 in each of altre 4 sedi.
- the candidates from FIS/06 are 21 (33% of total) while they were 16% in ASN 2012
- 2 of 5 candidates have been habilitated in grade 1 (40% vs 16% in ASN 2012), of which 1 university staff, 1 outsider and nobody from INAF
- 11 of 16 candidates have been habilitated in grade 2 (69% vs 52% in ASN 2012), of which 3 university staff, 8 outsiders and nobody from INAF
Concerning the syntetic scores (G1/G2/G3) assigned by the examination board, as for ASN 2012
this time too candidates which are below all the 3 medians of bibliometric indicators
were not evaluated. These are 7 cases for grade 1 and 9 for grade 2.
Two peculiarities are noteworthy. First, one full astronomer is apparently below all
medians, likely because he listed only the papers for which he submitted the
PDF copy, i.e. much less than his actual publication record.
Such misunderstanding affected much more candidates in ASN 2012.
The second curiosity concerns one candidate who resubmitted the same papers
(under threshold for grade 1) in ASN 2013, with which he was habilitated to grade 2
in ASN 2012.
I also produced some plots to be compared with the version produced for ASN 2012. Since there are no remarkable differences, I did not produce a PNG preview but supply only links to retrieve the postscript files either fot both ASN or for just ASN 2012 (the same reported above). New plots contain both old as well as new data, with the following modified symbols.
- crosses refer to results of ASN 2012
- thick square refers to results of ASN 2013
- in black university candidates
- in green INAF candidates
- in blue outsider candidates
- red (2012) or magenta (2013) thick diamonds surround the symbol for habilitated candidates
- pink lines indicate the level of the median of the indicator for the grade considered
- 2012 or 2012 and 2013 publications vs citations
- 2012 or 2012 and 2013 publications vs H-contemporary
- 2012 or 2012 and 2013 citations vs H-contemporary
- 2012 or 2013 publication histogram
- 2012 or 2013 citation histogram
- 2012 or 2013 H-contemporary histogram
- 2012 or 2013 histogram of the overall score G1+G2+G3
Final considerations
The number of candidates for the second round ASN 2013 is significantly lower than the peak of the first round. One can perhaps notice a diminished interest by INAF staff.
One could comment that, if habilitations of the first round would have been actually followed
by the opening of an adequate number of positions, the decrease might mean that the
career advancement mechanism has reached a stable regime.
Otherwise, since habilitations did not translate in actual positions, the interest
in applying decreased.
Any other variation looks just physiological.