Siete nel dominio
You are in domain
??
:
il documento appare inizialmente nella lingua di default (
document appears initially in default language (
??
)     
(lingua di default prescelta in base al vs. dominio)
(default language chosen at load time for your domain)
Questo e' un documento multilingue: cambia lingua
This is a multilingual document: change language
    
placeholder

Statistiche sulla Abilitazione Nazionale

nel settore disciplinare dell'astrofisica
(con integrazione sui risultati)
(con ulteriore integrazione sui risultati della ASN 2013)



Lucio Chiappetti - IASF Milano (INAF) - settembre 2013
integrazione sui risultati aggiunta a gennaio 2014
ulteriore integrazione su ASN 2013 aggiunta a dicembre 2014
esercizio di bibliometria fai-da-te aggiunto separatamente a aprile 2014


Statistics about the National Habilitation

in the astrophysics disciplinary sector
(integrated with habilitation results)
(with further integration with results of ASN 2013)



Lucio Chiappetti - IASF Milano (INAF) - September 2013
integration about results added in January 2014
further integration about ASN 2013 added in December 2014
do-it-yourself bibliometry exercise added separately in april 2014


 

Introduzione

Dopo avere letto l'articolo di Giulio Marini su ROARS, ed essermi quindi reso conto che sul sito della Abilitazione Scientifica Nazionale (ASN) e' comparso l'elenco dei candidati alla prima tornata di abilitazioni (2012), ho pensato che sarebbe stato utile fare delle semplici statistiche relative al nostro settore dell'astronomia e astrofisica, con un taglio diverso e complementare a quello delle statistiche riportate nella pagina citata di ROARS.

Ritenevo in particolare che sarebbe stato interessante studiare un settore relativamente omogeneo, e con la peculiarita' di avere una dominanza numerica di membri non universitari, ossia il personale scientifico dell'INAF (con la coesistenza dei due ruoli storici degli "ex-Osservatori" ed "ex-CNR").
Confesso che alla fine non e' cosi' facile come mi aspettavo per la presenza di un numero significativo di "esterni", ma per il momento vi presento le cose al punto in cui sono arrivato, anche a costo di presentare un lavoro "half-cooked".

A seguito della pubblicazione dei risultati per la prima e seconda fascia sul sito ASN a cavallo tra il 2013 e il 2014, ho aggiunto una nuova sezione sui risultati stessi, seguita da alcune considerazioni soggettive ed altre piu' quantitative. La sezione originale concernente la statistica delle domande rimane invariata.
A seguito della pubblicazione dei risultati per la seconda tornata (ASN 2013) sul sito ASN a dicembre 2014 ho aggiunto una nuova sezione con alcune semplici statistiche su partecipanti e risultati a tale tornata. Le precedenti sezioni restano invariate.
 

Informazioni preliminari (per profani)

Ricordo agli "esterni" al nostro ambiente (rinviando per ulteriori dettagli al sito dell'ASN) che la legge 240 del 2010 ha previsto che per diventare professori ordinari o professori associati nelle Universita' sia un pre-requisito ottenere la Abilitazione Scientifica Nazionale, che viene rilasciata da specifiche commissioni nazionali nei vari settori disciplinari.
Al momento e' in corso la prima tornata di abilitazioni, iniziata nel 2012.

Ad ogni tornata puo' partecipare (inviando il proprio curriculum e la lista delle pubblicazioni) chiunque, anche se non gia' afferente a una universita' italiana.

In particolare nel settore disciplinare dell'astrofisica la comunita' nazionale e' formata anche, e con una prevalenza numerica sulla componente universitaria, dal personale scientifico dell'INAF (Istituto Nazionale di Astrofisica). Si vedano piu' oltre le statistiche sulla comunita' di riferimento.
Al momento non esiste un equivalente della ASN per gli Enti Pubblici di Ricerca (EPR) come l'INAF (anche se se ne e' parlato informalmente).

Ricordo inoltre che i ruoli universitari sono stati fin qui divisi in tre livelli o fasce (ricercatore universitario, professore associato, professore ordinario).
I livelli equivalenti negli EPR sono quelli di ricercatore, primo ricercatore e dirigente di ricerca (oppure di tecnologo, primo tecnologo e dirigente tecnologo per il personale inquadrato in tal modo; si noti che non vi e' differenza di stipendio tra "ricercatori" e "tecnologi" a parita' di livello).
Negli Osservatori Astronomici prima della creazione dell'attuale INAF esistevano tre livelli identici a quelli universitari (astronomo ricercatore, astronomo associato, astronomo ordinario). Con la creazione dell'INAF tali livelli sono stati congelati, il personale che era in tali livelli e non ha optato per l'inquadramento degli EPR o non ha beneficiato delle progressioni di carriera, numericamente assai limitate negli EPR, mantiene lo status precedente.

Tutti questi livelli sono preceduti (al livello post-doc) da forme contrattuali atipiche (spesso considerate "precariato"), a tempo determinato, quali borse di studio ed assegni di ricerca. Questi ultimi, nella forma regolata dalla legge 240, sono ora la forma principale di "livello di ingresso" nel mondo della ricerca.
In passato tutte le posizioni universitarie erano a tempo indeterminato, mentre negli EPR era possibile avere, soprattutto nelle fasce iniziali di ricercatore, dei contratti a tempo determinato (per tutto il resto identici a quelli a tempo indeterminato). La legge 240 ha messo il ruolo dei nuovi ricercatori a tempo determinato.  

Fonti dei dati

L'elenco dei candidati alla ASN e' stato estratto dal sito ASN esclusivamente per il settore concorsuale 02/C1 (astronomia, astrofisica, fisica della Terra e dei pianeti), separatamente per le due fasce.
Il sito ASN fornisce anche i curriculum parte della domanda, ma essi non sono stati consultati.

L'elenco del personale INAF e' stato estratto sede per sede dalla anagrafica dei dipendenti INAF. Oltre al personale scientifico (ricercatori e tecnologi, inclusi gli astronomi) essa fornisce anche il personale tecnico-amministrativo, fornisce sia quello a tempo indeterminato, che a tempo determinato, che gli assegni di ricerca (non sono tuttavia certo che quest'ultimo elenco centrale sia aggiornato con la situazione reale nelle singole sedi decentrate). L'anagrafica fornisce dettagli sull'inquadramento in tutti i livelli, sia fasce che classi stipendiali, sulla anzianita' e/o la data di assunzione ecc.

L'elenco del personale universitario e' stato estratto dal sito del CINECA separamente per gli assegnisti di ricerca e per il personale docente (ossia ricercatori, associati e ordinari).
Per gli assegnisti ci si e' limitati ai settori disciplinari (SSD) FIS/05 (astronomia e astrofisica) e FIS/06 (terra e sistema circumterrestre). Per i docenti sono stati estratti separatamente gli elenchi per i settori disciplinari (SSD) FIS/05 e FIS/06, il macrosettore 02/C (astronomia, astrofisica, fisica della Terra e dei pianeti) e il settore concorsuale 02/C1 (idem). I due ultimi elenchi sono stati trovati identici.

Il materiale e' stato ingerito in database mysql, in 3 tabelle, una per gli abilitandi, una per lo staff INAF e una per il personale universitario.
Dopo di che si e' visto che correlando su cognome e nomi non si avevano casi di omonimie. C'erano invece quattro casi (tutti per personale INAF, poi risolti) di persone con nomi multipli che non venivano correlate (in quanto da una parte comparivano p.es. con due nomi e dall'altra con tre, o con o senza il trattino).

Si e' infine provveduto a normalizzare la situazione delle fasce come segue:
    Per la tabella degli abilitandi ogni persona compare una sola volta, e dei flag indicano se ha presentato domanda per la fascia 1, la fascia 2 o entrambe
    Sempre per la tabella egli abilitandi e' stata inserita la fascia attuale di inquadramento, ottenuta dalla correlazione con le altre due tabelle (INAF e universita').
    Le fasce sono denominate per brevita' come segue, uniformando le differenti categorie e trascurando dettagli piu' fini (pur se presenti nelle tabelle)

 

La comunita' di riferimento

L'elenco del personale universitario astronomico comprende 339 persone, di cui 116 dall'elenco assegnisti (93 FIS/05 e 23 FIS/06) ed il resto dagli elenchi docenti (strutturati). Di questi (223), 167 appaiono in entrambi gli elenchi (per SSD FIS/05 e per settore concorsuale), 50 in entrambi gli elenchi (per SSD FIS/06 e settore concorsuale), 3 solo nell'elenco per SSD FIS/05, 2 solo in quello per FIS/06 ed 1 in tutti e tre gli elenchi (settore concorsuale ed entrambi gli SSD).
Il personale universitario e' ripartito tra 35 sedi (incluse la Normale, la SISSA e lo IUSS). Alcune di queste non sono tra le citta' comunemente associate alla attivita' astronomica e/o hanno solo 1 persona (4 casi). 20 hanno tra 2 e 10 persone, 9 tra 10 e 20, 2 (SISSA e Roma Sapienza) poco piu' di 20 e 2 (Padova e Bologna) oltre 40.

L'elenco del personale INAF inclusi assegnisti e assimilati presso le sedi INAF (ossia non gli affiliati di altre istituzioni associati all'INAF) include 1403 persone, compreso tutto il personale tecnico-amministrativo. Di queste 915 dovrebbero costituire il personale scientifico (ossia quelle classificate nelle fasce 1-4), e di questi 659 essere strutturati (ossia le fasce 1-3) vuoi a tempo determinato che indeterminato.
Gli assegnisti sono 170 e i borsisti 80 (tutti flaggati come fascia 4).
Sono possibili incertezze de iure e de facto. P.es. una piccola frazione di personale amministrativo laureato degli ex-Osservatori (gia' comparto universita') e' stato inquadrato come "tecnologo" all'atto del passaggio al comparto ricerca. Oppure tra il personale non strutturato (fascia=4) oltre ad assegnisti e borsisti compaiono 4 persone classificate "equiparati a ricercatore" e 2 "equiparati a primo ricercatore" (ma che non sono ricercatori a tempo determinato, che sarebbero elencati fra gli strutturati).
Il personale scientifico INAF e' ripartito, dopo le recenti fusioni, tra 18 sedi, in 12 citta' o aree geografiche, che variano tra i 14 dell'Osservatorio di Teramo e i 108 dello IAPS Roma. 4 sedi hanno meno di 30 membri scientifici, 5 tra 30 e 50, 7 tra 50 e 80 e 2 (Arcetri e IAPS) oltre 80.

La composizione della comunita' nazionale di riferimento formata dall'INAF e dalle Universita' e la sua ripartizione tra la diverse fasce puo' essere riassunta nella tabella seguente.

Istituzione in numero assoluto in percentuale sul totale in percentuale sugli strutturati
fascia fascia 1 fascia 2 fascia 3 fascia 4 fascia 1 fascia 2 fascia 3 fascia 4 fascia 1 fascia 2 fascia 3
Universita' 55 58 110 116 16% 17% 32% 34% 25% 26% 49%
   strutturati 223   66%   100%
INAF 42 137 480 256 5% 15% 52% 28% 6% 21% 73%
   strutturati 659   72%   100%
   ricercatori EPR 14 61 201 6 1% 7% 22% <1% 2% 9% 30%
   tecnologi EPR 2 14 143   <1% 1% 15% <1% 2% 22%
   astronomi 26 62 136   3% 7% 15% 4% 9% 21%

Univ.+INAF 97 195 590 372 8% 16% 47% 29% 11% 22% 67%
   strutturati 882   70%   100%
 

Le statistiche sulla ASN

Il numero totali di abilitandi per il settore concorsuale dell'astrofisica (in senso lato) e' di 656, che nominalmente equivale al 52% della composizione della comunita' di riferimento.

Tuttavia e' possibile candidarsi anche se non si fa parte della comunita' di riferimento come definita sopra. P.es. se si lavora all'estero, se si lavora in un EPR diverso dall'INAF, se si lavora nell'universita' ma afferendo a un settore disciplinare da quelli presi in considerazione.
Ed infatti una prima statistica derivante dalla correlazione tra le tabelle degli abilitandi, quella del personale INAF e quella del personale universitario indica che:

Al momento non sono in grado di identificare ulteriormente i candidati "totalmente esterni" (o apparentemente tali), a meno di consultare i curriculum individuali (il che richiederebbe troppo tempo considerato il numero).
Ho esaminato l'elenco trovando (solo) una decina di nominativi a me conosciuti, dei quali uno e' una omonimia, 3 o forse 4 sono all'estero (il quarto potrebbe essersi trasferito di recente o avere lasciato il settore), 3 sono di altri EPR (CNR o INFN), 3 sono universitari italiani ma non sono presenti nelle liste che ho recuperato dal CINECA (in quanto afferenti a settori disciplinari diversi).
Considero tuttavia infattibile al momento fare una ricerca globale (automatizzata) sul sito CINECA per gestire questo ultimo caso.

Pertanto per i 304 "sconosciuti" non sono in grado di effettuare molte delle statistiche riportate sotto, quali quelle sull'inquadramento corrente o sulla sede di provenienza.

E' invece possibile in ogni caso contare quanti sono i candidati che hanno presentato domanda per la fascia 1 (ordinario), per la fascia 2 (associato) o per entrambe.

Fascia della domanda in numero assoluto in percentuale sul totale generale in percentuale sul totale dell'istituzione
istituzioni tutte univ. INAF esterni tutte univ. INAF esterni tutte univ. INAF esterni
tutte le domande 656 107 246 303 100% 16% 37% 46% 100% 100% 100% 100%
domande per sola fascia 1 120 28 51 41 18% 4% 8% 6% 18% 26% 21% 14%
domande per sola fascia 2 449 69 149 231 68% 10% 22% 35% 68% 64% 60% 76%
domande per entrambe le fasce 87 10 46 31 13% 2% 7% 5% 13% 9% 19% 10%

E' abbastanza curioso notare come un certo numero di candidati abbia presentato domanda per entrambe le fasce, e domandarsi quale sia il razionale di cio' (si presuppone che si tratti di candidati giovani che ritengano di essere sufficientemente brillanti per ottenere una qualificazione in fascia 1, ma vogliano essere certi di ottenere come ripiego quella in fascia 2).

E' anche curioso osservare come il numero di candidati di provenienza universitaria (e che quindi presumibilmente aspirano a un avanzamento di carriera) sia minoritario rispetto all'insieme degli esterni e del personale INAF, che non possono realisticamente pensare che saranno disponibili sufficienti posti da professore universitario nelle due fasce. Inoltre il personale INAF potrebbe non essere interessato a un passaggio alla universita' qualora abbia una anzianita' stipendiale tale da non rendere conveniente l'operazione (in mancanza di una ricostruzione di carriera). E' presumibile che tale personale miri solo ad ottenere un titolo (la abilitazione) che dimostri la sua qualificazione al livello superiore, da tentare di far valere in una ipotetica futura procedura di progressione interna (dove la ricostruzione di carriera e' possibile).

E' infine curioso notare come le domande degli esterni siano prevalentemente per la fascia 2, mentre le domande doppie (per entrambe le fasce) siano piu' comuni tra il personale INAF.


Per i 353 candidati provenienti dalle universita' italiane e dall'INAF e' possibile effettuare una ulteriore statistica in base all'inquadramento attuale ossia la fascia di partenza.
La aspettativa sarebbe che chi e' gia' in fascia 1 non abbia presentato domanda, chi e' in fascia 2 abbia presentato domanda per la fascia 1, chi e' in fascia 3 o non strutturato (qui flaggato come fascia 4) abbia presentato domanda per la fascia 2 o eccezionalmente per entrambe.

Ecco una statistica in numero assoluto.

Fascia della domanda Universita' + INAF INAF Universita'
fascia di partenza indefinita 4 3 2 1 indefinita 4 3 2 1 4 3 2 1
tutte le domande 12 32 230 75 4 12 22 161 48 3 10 69 27 1
domande per sola fascia 1 1 5 69 4 1 5 42 3 27 1
domande per sola fascia 2 12 30 174 2 12 20 115 2 10 59
domande per entrambe le fasce 1 51 4 1 41 4 10

Innanzitutto i 12 nominativi "senza fascia" sono relativi a personale INAF, concentrato in 6 sedi diverse. In 5 casi si tratta di tecnici di ruolo (CTER IV livello), che presumibilmente si sono laureati dopo la loro assunzione ed hanno finito per svolgere attivita' da ricercatore ("sottoinquadrati"). In 7 casi si tratta di collaboratori indicati come "Compensi imponibili ruoli esenti". Ignoro a che cosa corrisponda questa categoria (non sono assegnisti e non sono strutturati). Tutti e 12 hanno presentato domanda per la fascia 2.

Solo 32 assegnisti (circa 9% del totale degli assegnisti) hanno presentato domanda di abilitazione, e la stragrande maggioranza per la sola fascia 2.

Il "grosso" delle domande e' per la fascia 2 e proviene da personale strutturato della fascia 3, ossia da ricercatori della fascia iniziale. Si noti la prevalenza numerica delle domande provenienti dall'INAF rispetto a quelle dall'universita'. Un certo numero hanno presentato domanda per entrambe le fasce. Solo 5 persone (in due sedi INAF) hanno presentato domanda per "saltare" dalla fascia 3 alla fascia 1.

Un'altro blocco significativo ed atteso e' quello di coloro che dalla fascia 2 chiedono di passare in fascia 1. Anche qui si noti la prevalenza numerica delle domande provenienti dall'INAF rispetto a quelle dall'universita'.
Tutavia sono curiosi 4 casi di primi ricercatori INAF (quindi gia' ora "di fascia 2") che hanno presentato domanda per entrambe le fasce.

Altrettanto curiosi sono 4 casi di personale gia' in fascia 1 che ha comunque presentato domanda per la fascia 1. 3 sono di personale INAF (1 dirigente di ricerca e due astronomi ordinari) per cui si puo' presumere che abbiano realisticamente intenzione di transitare all'Universita' su futuri posti di cui sono a conoscenza ed intendono assicurarsi la abilitazione formale. Il quarto caso e' di un professore straordinario.


Una peculiarita' degli EPR e' la coesistenza del ruolo dei tecnologi a fianco del ruolo dei ricercatori (con le stesse tre fasce e lo stesso trattamento economico). Una peculiarita' dell'INAF e' la coesistenza del ruolo dei ricercatori e tecnologi EPR a fianco del ruolo "a esaurimento" degli astronomi (che ha invece le fasce e il trattamento economico universitario).

Per quanto riguarda i tecnologi, si nota che tra gli abilitandi ci sono (solo) 8 tecnologi (di fascia 3, divisi tra 5 sedi, 3 ex-CNR e 2 osservatori) che hanno presentato domanda per la fascia 2.
Uno solo di essi (con una anzianita' nominale di meno di 5 anni) ha presentato domanda per entrambe le fasce.

Per quanto riguarda gli astronomi (che dopo le opzioni rappresentano il 34% del personale scientifico strutturato dell'INAF), 83 di essi hanno presentato domanda di abilitazione. Puo' essere interessante presentare una statistica per l'INAF ripartita tra ricercatori con contratto EPR ed astronomi con stato giuridico. Tale statistica e' riportata qui sotto (gli 8 tecnologi di cui sopra non sono inclusi con i ricercatori EPR).

Fascia della domanda INAF tutti INAF ricercatori EPR INAF astronomi
fascia di partenza indefinita 4 3 2 1 3 2 1 3 2 1
tutte le domande 12 22 161 48 3 92 27 1 61 20 2
domande per sola fascia 1 1 5 42 3 3 23 1 2 19 2
domande per sola fascia 2 12 20 115 2 63 45 1
domande per entrambe le fasce 1 41 4 26 4 14


Infine riporto le due ultime tabelle in forma percentuale.

La distribuzione delle domande per fascia di partenza e di arrivo, in percentuale rispetto al numero totale di candidati (107 universitari, 246 INAF o 353 di entrambe le istituzioni) e' molto simile nei vari casi.

Fascia della domanda Universita' + INAF INAF Universita'
fascia di partenza indefinita 4 3 2 1 indefinita 4 3 2 1 4 3 2 1
tutte le domande 3% 9% 65% 21% 1% 5% 9% 65% 19% 1% 9% 64% 25% 1%
domande per sola fascia 1 <1% 1% 19% 1% <1% 2% 17% 1% 25% 1%
domande per sola fascia 2 3% 8% 49% <1% 5% 8% 47% 1% 9% 55%
domande per entrambe le fasce <1% 14% 1% <1% 16% 1% 9%

La distribuzione tra ricercatori ed astronomi dell'INAF, in percentuale rispetto al numero totale di candidati (246 INAF, 120 ricercatori, 83 astronomi) sono pure alquanto simili.

Fascia della domanda INAF tutti INAF ricercatori EPR INAF astronomi
fascia di partenza indefinita 4 3 2 1 3 2 1 3 2 1
tutte le domande 5% 9% 65% 19% 1% 76% 22% 8% 73% 24% 2%
domande per sola fascia 1 <1 2% 17% 1% 2% 19% 1% 2% 23% 2%
domande per sola fascia 2 5% 8% 47% 1% 52% 65% 1%
domande per entrambe le fasce <1% 16% 1% 21% 3% 17%
 

Nuova sezione sui risultati della ASN

La intera sezione che segue e' stata aggiunta a gennaio 2014 e consiste di una parte sulla raccolta dei dati, una serie di statistiche oggettive, alcune brevi considerazioni soggettive ed ulteriori considerazioni quantitative.
 

Fonti dei dati sui risultati

I risultati della ASN stanno comparendo molto gradualmentesul sito ASN in una apposita pagina, da dove si puo' scegliere il settore disciplinare e la fascia. In particolare per l'astrofisica (02/C1) vi sono due sottopagine per la prima e seconda fascia

Ciascuna di tali pagine (HTML) contiene i verbali dei lavori della commissione (presumibilmente gli stessi per entrambe le fasce dato che la commissione era comune), l'elenco dei candidati, un flag Si/No che indica l'ottenimento o meno della abilitazione, e degli ulteriori link. In particolare le domande e tutti gli ulteriori link relativi a un candidato e alla sua domanda per una particolare fascia hanno un identificatore numerico.

Tra gli ulteriori link, uno contiene gli indicatori (ossia le famose o famigerate mediane) ed uno i giudizi della commissione.

Il link per gli indicatori e' una pagina HTML che puo' venire parsata per estrarre i tre indicatori da inserire nel database mysql (separatamente per le due fasce) :

Questi indicatori vanno confrontati con le mediane della distribuzione dei docenti gia' inquadrati nelle due fasce. Una peculiarita' e' che esistono due set di mediane, uno per il settore disciplinare dell'astrofisica in generale, ed uno specifico per il SSD FIS/06 (sistema Terra e mezzo circumterrestre). Dalla stessa pagina HTML e' possibile ricavare l'informazione se una domanda e' stata presentata per FIS/06 e quindi valutata con criteri differenti.

Il link per i giudizi e' invece un documento PDF, ma fortunatamente ha un formato standard, e puo' venire convertito in testo e quindi parsato con relativa facilita'. Ogni membro della commissione ha assegnato individualmente tre giudizi sintetici, e poi la commissione ha concordato i tre giudizi collegiali. Quindi vi e' un totale di (5+1)×3 giudizi da inserire nel database mysql. Essi sono indicati come

Ognuno dei giudizi puo' assumere i valori discreto, buono, ottimo, eccellente (per convenienza convertiti nei numeri 1, 2, 3 e 4 al momento di inserirli nel database mysql.

Tutti i dati di cui sopra sono stati inseriti nella preesistente tabella mysql degli abilitandi separatamente per le due fasce: 3 indicatori, 18 giudizi G1/2/3, il flag FIS/06 e il flag relativo all'ottenimento dell'abilitazione.

Come dati ausiliari sono stati presi in considerazione inoltre le tabelle delle mediane di riferimento per il settore concorsuale 02/C1 e l'eventuale SSD FIDS/06 per la prima e seconda fascia ed i criteri stabiliti dalla commissione e riportati in apposito verbale. Le mediane sono:

indicatore 02/C1 generale SSD FIS/06
fascia 1fascia 2 fascia 1fascia 2
Pubblicazioni493227.517
Citazioni 86.0835.8322.0114
Hc1810 9 6
Il superamento della mediana avviene se il valore e' maggiore o uguale.

I giudizi G1/2/3 non sono stati calcolati se nessuna mediana e' stata superata. L'abilitazione e' stata concessa se

 

Statistiche sui risultati

Una prima statistica riguarda il numero di abilitati (in valore assoluto e come percentuale del numero di candidati), ripartiti secondo vari criteri.

Criterio Fascia 1 Fascia 2
candidatiabilitatipercentuale candidatiabilitatipercentuale
Numero totale 207 5526.6% 53623543.6%
 Affiliati universita' 38 1642.1% 79 4151.9%
 Affiliati INAF 97 2929.9% 19510352.8%
 Esterni 72 1013.9% 262 9134.7%
Tra il personale INAF
 sono ricercatori EPR 57 1628.0% 93 5650.2%
 sono astronomi ex-Osservatorii 37 1335.1% 60 4066.7%
 sono tecnologi EPR 1 0-- 8 450.0%
 universita' ed esterni 112 2623.2% 37513536.0%
In base alla fascia corrente
 gia' in prima fascia 4 375.0% -- ----
 gia' in seconda fascia 73 4257.5% 6 466.7%
 gia' in terza fascia 56 0-- 22513760.9%
 assegnisti di ricerca 2 0-- 31 3 9.7%
 sconosciuta 72 1013.9% 274 9133.2%

Le statistiche di cui sopra sono state condotte sul campione totale senza distinguere i candidati afferenti al SSD FIS/06.

La percentuale di abilitati e' significativamente piu' alta per la seconda fascia che per la prima. Vi sono poche differenze tra personale universitario ed INAF, specie per la seconda fascia, mentre tra gli esterni vi sono meno abilitati.
Vi sono anche poche differenze entro il personale INAF tra quelli inquadrati col contratto da ricercatore EPR e quelli con lo stato giuridico degli astronomi ex-Osservatorii. Il numero di tecnologi EPR tra i candidati e' notoriamente limitato.

Non sorprende che la maggior parte degli abilitati ad una fascia provenga dalla fascia immediatamente precedente.

E' curioso notare come dei 4 candidati gia' di fatto in prima fascia (un professore straordinario, due astronomi ordinari e un dirigente di ricerca) siano stati abilitati solo tre , omettendo un astronomo ordinario
Tra i 42 abilitati alla prima fascia provenienti de facto dalla seconda (professori associati, astronomi associati, primi ricercatori) vi sono 15 universitari e 27 INAF (15 primi ricercatori e 12 astronomi associati).
Solo tre degli abilitati alla seconda fascia sono assegnisti o affini .
Su 6 candidati gia' di fatto in seconda fascia (primi ricercatori o astronomi associati) 4 hanno chiesto e ottenuto la abilitazione e 2 no

Degli 87 candidati che avevano presentato domanda per entrambe le fasce, 15 non hanno ottenuto alcuna abilitazione, 71 sono stati abilitati in seconda fascia, e 1 solo in entrambe.

Per il personale universitario ed INAF e' possibile effettuare anche una statistica per sedi. Si indica il numero di abilitati e la percentuale rispetto ai candidati di quella sede (da questo si puo' facilmente inferire quali sedi sono piu' o meno popolose).

Nella prima fascia entro INAF gli abilitati sono 9 ad Arcetri (90%), 4 a Brera(30%), 3 a IASF-Mi (50%) 2 a OARM (22%), OATS (50%), IAPS (28%) e OABO (20%) e 1 ciascuno a OAPA (100%), OATE (100%), Capodimonte (17%), IASF-Bo (11%) e IRA (50%).

Nella prima fascia gli abilitati delle Universita' sono 3 alla SISSA (100%), 2 a Roma 2 (66%), e 1 ciascuno a Bologna, Milano 1, Palermo (33%), a Trieste e Padova (50%) e all'Insubria, Calabria, Milano Bicocca, Roma3 e Cagliari (100%).

Nella seconda fascia entro INAF gli abilitati sono 15 a OAPD (88%), 13 a OABO (65%), 12 a IASFBo (80%), 10 a Brera (52%), 9 a IAPS (36%), 8 a OARM (40%), 7 a OATS (70%), 6 a OACT (75%), 4 a IASFMi (36%), 4 a Capodimonte (57%), 3 a IASFPa (50%), IRA (37%), Arcetri (30%), 2 a OATO (17%) e OAPA (33%). 1 a OACA e OATE (entrambi 100%).

Nella seconda fascia gli abilitati delle Universita' sono 7 a Padova (63%), 6 a Bologna (50%), 5 a Roma 1 (83%), 3 a Trieste (75%), Aquila (60%) e Napoli (75%), 2 a Roma 2 (33%), Milano 1, Perugia e Palermo (100%), Salento (67%), 1 a Torino (25%), Basilicata e Ferrara (50%), e Pisa (100%).

Considerando ora i candidati del SSD FIS/06 si nota quanto segue:

Su 31 candidati alla prima fascia, sono abilitati solo 5 (2 universitari e 3 esterni) per una percentuale del 16%. La maggior parte dei candidati erano esterni (solo altri 4 universitari e 1 dallo IAPS INAF).
Su 83 candidati alla seconda fascia, ne sono abilitati 43 (9 universitari e il resto esterni) per una percentuale del 51.8% ! Anche qui la maggior parte dei candidati erano esterni (solo altri 5 universitari e 1 dallo IAPS INAF).

Si nota che nei verbali la commissione ha fatto notare la disomogeneita' di dover gestire il SSD FIS/06 insieme con il resto.
Non e' invece stato fatto osservare (ma lo aggiungo io) come invece anche l'intero settore dell'astrofisica possa essere eccessivamente vasto ed internamente disomogeneo, rispetto p.es. alle suddivisioni usuali come le macroaree dell'INAF.

Per quanto riguarda gli indicatori si rimanda anche alle considerazioni soggettive di cui sotto per eventuali stranezze.

Come banale verifica si nota che degli 87 candidati che hanno presentato domanda per entrambe le fasce, essi normalmente ottengono gli stessi indicatori per entrambe. 12 hanno un numero di pubblicazioni diverso (solitamente di 1 o meno, raramente di piu'), 15 hanno un numero di citazioni diverso (solitamente di una frazione di punto, a volte di piu'), 6 hanno un Hc diverso (solitamente di 1 unita').
Non sono in grado di dire se dipenda da diversita' nella presentazione della domanda o da artefatti nel calcolo da parte del CINECA.

Per quanto riguarda i giudizi G1, G2, G3 noto intanto che i candidati sotto le tre mediane per la rispettiva fascia, conformemente alla procedura stabilita, non hanno avuti i giudizi calcolati (che pertando compaiono come zero nel database).

Si tratta di 30 candidati per la prima fascia e 68 per la seconda fascia. Su di questi si veda oltre nelle considerazioni soggettive.

Per i rimanenti candidati si nota una buona omogeneita' di giudizio tra i commissari. Questa e' stata verificata facendo la media numerica dei 5 giudizi (il che e' ovviamente una approssimazione grossolana).

Per i candidati di prima fascia in 129, 119 e 143 casi il valore di G1, G2 o G3 collegiale e' esattamente uguale alla media.
Per 203, 205 e 205 casi il valore di G1, G2, G3 e' uguale alla media arrotondata per difetto o eccesso (funzione ROUND di mysql). In 3 casi G1 e' stato alzato da 3.4 a 4 e in 1 da 2.2 a 3, in 2 casi G2 abbassato da 1.6 a 1, in 2 casi G3 alzato da 3.2 a 4.
Per i candidati di seconda fascia in 490, 380, 464 casi il valore di G1, G2 o G3 collegiale e' esattamente uguale alla media, e nella totalita' dei 536 casi e' uguale alla media arrotondata.

Considerato che la differenza tra il miglior giudizio individuale e il giudizio collegiale non e' praticamente mai maggiore di 1 grado (solo in 2 casi per G2 in prima fascia, e in 1 caso per G1 e G2 in seconda fascia), non si ritiene necessario calcolare delle RMS o deviazioni standard, e non si procede oltre.

Considerando ora il numero di mediane superate si ottiene la seguente distribuzione. Si nota una singola minima anomalia (un candidato alla seconda fascia nel SSD FIS/06 ha la terza mediana esattamente uguale al valore di riferimento, quindi dovrebbe superarne una, ma non ha calcolati i giudizi G1/2/3. Per il resto, conformemente alla procedura, i candidati con zero mediane superate hanno, come aspettato, G1=G2=G3=0.
Si nota (pur con i dubbi di cui alle considerazioni soggettive) come una notevole frazione di candidati risulti superare le tre mediane (e quindi come siano necessari ulteriori criteri).

numero di mediane superatefascia 1fascia 2
nessuna 30 67
una 17 30
due 39 72
tre 121367

Considerando ora i giudizi ed i relativi criteri si ottiene la seguente distribuzione degli abilitati (che come corollari indica come la commissione abbia applicato correttamente la procedura stabilita, ed inoltre indica come il criterio bibliometrico delle mediane sia stato prevalente).

criterio fascia 1fascia 2
1: 3 mediane, 2 ottimi 45222
2: 2 mediane, 2 eccellenti 10 12
3: 1 mediane, 3 eccellenti 0 1

I dati possono anche essere presentati in forma grafica, a sinistra per i candidati alla fascia 1, a destra per quelli alla (sola) fascia 2. In tutti i grafici (di cui si puo' ottenere una versione postscript scalabile cliccando sulla preview) i colori indicano:

La prima famiglia di grafici confronta gli indicatori 1 e 2 (pubblicazioni e citazioni normalizzate). La correlazione tra i due ha un certo spread, vi sono candidati con un indicatore elevato non abilitati, ma soprattutto si noti come i candidati alla seconda fascia hanno valori, soprattutto per le citazioni, spesso piu' elevate e comunque comparabili a quelle dei candidati per la prima fascia.

ASN cit vs pap ordinari   ASN cit vs pap associati

La seconda famiglia di grafici confronta gli indicatori 1 e 3 (pubblicazioni e Hc). Anche qui si vede una certa correlazione con un certo spread, ed intervalli di Hc comparabili per le due fasce.

ASN Hc  vs pap ordinari   ASN Hc  vs pap associati

La terza famiglia di grafici chiude il loop confrontando gli indicatori 2 e 3 (citazioni e Hc). con risultati ovviamente complementari ai precedenti.

ASN Hc  vs cit ordinari   ASN Hc  vs cit associati

Un approccio diverso e complementare si ha riportando l'istogramma di ogni indicatore. Le tre figure sottostanti si riferiscono al primo indicatore (pubblicazioni, a sin.), al secondo indicatore (citazioni, al centro) e al terzo (Hc), a destra). Ogni figura e' divisa in due pannelli, quello superiore per la prima fascia e quello inferiore per la seconda fascia. La riga rosa verticale (continua o tratteggiata) indica la mediana di riferimento.
Tutti gli istogrammi sono in percentuale del totale dei candidati per quella fascia. L'istogramma nero si riferisce a tutti i candidati, quello rosso agli abilitati (quindi si puo' leggere implicitamente anche la frazione di abilitati).
In questo caso il grosso delle distribuzioni (non le code) appaiono chiaramente diverse per le due fasce.

histogram ASN ind 1   histogram ASN ind 2   histogram ASN ind 3

Per cercare di quantificare la distribuzione dei giudizi (sintetici ma non bibliometrici) G1/2/3 si puo' riportare in forma di istogramma (analogamente a quanto sopra) la somma dei valori numerici (descritti piu'sopra) G1+G2+G3. Questo viene fatto nella figura sottostante.
Si noti che questa rappresentazione e' grossolana. Un punteggio zero si ottiene solo per i candidati "non classificati" che non hanno superato le mediane (per cui si veda tuttavia la sezione successiva). Altrimenti il punteggio minimo e' 3 (tutti gli indicatori uguali a "discreto"). Un punteggio di 7 puo' corrispondere a casi che soddisfano il "criterio 1" descritto sopra (2 "ottimo" e 1 "discreto" come minimo) ma anche a combinazioni che non lo soddisfano. I punteggi 8 e 9 soddisfano il criterio 1, il punteggio 10 puo' soddisfare i criteri 1 oppure 2, i punteggi 11 e 12 corrispondono in modo non ambiguo ai criteri 2 e 3.

histogram scores

Per chiudere il loop si riportano su due righe separate (per la prima e seconda fascia) i grafici del punteggio complessivo G1+G2+G3 in funzione di ognuno dei tre indicatori (usando colori e simboli come nelle figure soprastanti degli indicatori tra loro).

score ord vs ASN ind 1   score ord vs ASN ind 2   score ord vs ASN ind 3

score ass vs ASN ind 1   score ass vs ASN ind 2   score ass vs ASN ind 3

In conclusione la commissione ha sicuramente dovuto fare un lavoro ponderoso esaminando circa 700 domande, e lo ha fatto correttamente in base agli input ricevuti.
Tuttavia le considerazioni che seguono destano qualche dubbio sulla qualita' di parte di tali input.  

Considerazioni soggettive

Non posso dirmi personalmente sorpreso dal fatto di non essere risultato abilitato. Perlomeno guardando i risultati globali face-value, ossia confrontandomi con gli altri abilitati che conosco, che sicuramente hanno ultimamente svolto attivita' di misura e qualita' superiore.
Ne' in tale contesto posso lamentarmi dei giudizi della commissione (anche se posso essere sorpreso di avere ottenuto una "discreta" attivita' scientifica e una "ottima" responsabilita' scientifica, quando non ho mai voluto rivestire ruoli da PI o Project Manager, e tantomeno negli ultimi tempi seguito dei grossi progetti. Io avrei forse invertito o mediato tali giudizi !).

Ma resto invece spiacevolmente sorpreso dal vedere negli indicatori un numero di pubblicazioni normalizzate pari a 22 (!) con 85.29 citazioni normalizzate a fronte di aver presentato nel CV 273 lavori (126 su rivista, 49 proceedings, 3 abstract, 5 poster, 11 database, 24 software e 24 altri). O di uno score ANVUR (VQR) di 5.6/6.

Alcune simulazioni precedenti indicavano p.es. usando il tool YouAstro per 103 paper su rivista di cui 25 dopo il 2002, e una eta' accademica di 32 anni, un numero di lavori normalizzato di 103, con 98.7 citazioni normalizzate, un H standard di 30 e un Hc di 18 (unico parametro che torna nei calcoli del CINECA). Ripetendo oggi gli stessi calcoli (ma l'ADS e' stato aggiornato nel frattempo) sugli stessi 103 paper, ne da' 21 dopo il 2002 (?), 3427 citazioni, 107.09 citazioni normalizzate, un H standard di 32 e un Hc di 20.

Usando i dati raccolti a fine 2010 descritti nella sezione successiva ho 180 lavori indicizzati da ADS dall'inizio attivita' (1979) fino al 2010 incluso. di cui 118 hanno almeno una citazione, per un totale di 2925 citazioni, ed un HA=30.

La perplessita' aumenta nel vedere tra i non-abilitati alcuni altri colleghi che conosco, sicuramente piu' attivi di me (in almeno un paio di casi molto piu' attivi e/o con grosse responsabilita' di progetto). Addirittura in tali casi non sono stati calcolati i giudizi, in quanto nessuna delle tre mediane risulta superata ! Il che non torna affatto con la loro produzione.
E' possibile che in taluni casi abbiano sbagliato i candidati (p.es. elencando solo le pubblicazioni sottomesse in PDF senza "ticcare" le altre caricate sul "sito docente" del CINECA e quindi "connetterle" con la domanda), e l'incompletezza di molte domande e' stata notata dalla commissione che ha verbalizzato la cosa (si veda questo estratto).

Tuttavia nel mio caso (e in altri ?) la lista dei lavori era completa, ed al momento non appare esservi pubblicita' dei calcoli fatti dal CINECA (mentre le azioni delle commissioni sono pubbliche e complete).

E' possibile tuttavia che abbia trascurato un fattore. Supponendo che questo documento ASN sia quello applicabile a descrivere la procedura di normalizzazione, io avevo assunto che si normalizzassero tutte le pubblicazioni a 10 anni mentre invece pare siano state contate solo le pubblicazioni degli ultimi 10 anni (ho pure sempre il dubbio che le banche dati usate dal CINECA siano incomplete ... nella domanda io elencavo 59 lavori, tra i 273 totali, per l'intervallo 2002-2012 (26 su rivista, 10 atti di congressi, 6 poster, 18 rapporti di varia natura).

E' possibile quindi che si siano verificati errori negli agganci con le banche dati "commerciali" usate dal CINECA, oppure che vi siano discrepanze tra queste e l'ADS comunemente utilizzato nella comunita' astronomica.

 

Ulteriori considerazioni

La banca dati comunemente utilizzata dalla comunita' astronomica e' infatti NASA ADS, che e' ritenuta affidabile e non e' soggetta a limitazioni commerciali per quanto riguarda l'accesso (incidentalmente e' anche utilizzata entro INAF per il proprio database interno, INAF CRIS).

Purtroppo non e' ne' facile ne' immediato ottenere ora da ADS i dati equivalenti a quelli utilizzati dal CINECA tramite le banche dati commerciali. Oltre alle banali motivazioni della quantia' di lavoro e del tempo necessario, uno dei problemi (con cui si confronta INAF CRIS) e' quello delle omonimie (ed infatti il personale INAF periodicamente deve verificare che i paper caricati automaticamente nel CRIS dall'ADS siano effettivamente i propri).

Tuttavia posso effettuare un confronto parziale con un insieme di dati che avevo raccolto sistematicamente alla fine del 2010 (che sono presentati pero' solo in un draft tuttora non finito). In tale dataset dispongo del numero di lavori nominalmente associati a una data persona (quindi senza verifica delle omonimie), per il personale strutturato INAF in forza a fine 2010. I dati immediatamente disponibili per persona sono:

Ho inoltre disponibili offline l'elenco dei lavori elencati da ADS (sotto forma del relativo bibcode e del numero di citazioni disponibili a fine 2010). Questo consentirebbe di effettuare "tagli" temporali diversi, ma per il momento non mi impegno ne' in tale attivita' ne' in un aggiornamento dei dati raccolti.

Ora la tabella degli abilitandi ASN contiene 246 persone per cui (si veda sopra) ho ricostruito una affiliazione INAF al momento presente. La tabella dello staff INAF al 2010 contiene 570 membri del personale scientifico per cui sono stati raccolti i dati da ADS e Google Scholar.
Ovviamente non tutto il personale INAF ha applicato per l'ASN, e non tutti i candidati ASN affiliati all'INAF erano in forza all'INAF nel 2010. In particolare tra i candidati vi sono 21 assegnisti (non inclusi nel personale strutturato del 2010), 39 ricercatori probabilmente reclutati a tempo indeterminato o determinato dopo il 2010, e 11 non classificati (tra cui p.es. 4 tecnici CTER per cui non erano stati ricercati i dati ADS nel 2010). 11 casi di possibili omonimie sono stati arbitrati manualmente (in 2 casi si tratta della stessa persona che ha indicato nomi personali diversi nella domanda ASN rispetto all'anagrafica INAF, in altri casi di omonimie tra personale nuovo e personale tecnico preesistente, oppure di personale di ricerca diverso, per cui l'omonimia del cognome e' stata risolta usando il nome e la sede di lavoro).

In conclusione e' possibile fare un confronto su (sole) 175 persone. Di queste 91 hanno presentato domanda (almeno) per la prima fascia (29 abilitati), e 84 hanno presentato domanda (solo) per la seconda fascia (48 abilitati).

Nelle figure che seguono, le croci indicano i candidati alla prima fascia, gli asterischi quelli alla seconda fascia. Il colore nero i candidati non abilitati, e il colore rosso quelli abilitati. Cliccando su ogni figura si ha accesso a una versione postscript (scalabile a piena risoluzione) della figura stessa.

Come primo set di due figure relativa puramente al mio dataset e per evidenziarne le limitazioni, e l'effetto di banche dati diverse. confronto (a sinistra) il numero di lavori indiciati in ADS e in Google Scholar (GS) alla data di raccolta (termine 2010). Il fatto che il numero di lavori GS (ove siano disponibili) sia superiore a quello ADS e' presumibilmente dovuto ad omonimie, magari con non-astrofisici. A destra invece sono confrontati gli indici di Hirsch H calcolati dalle citazioni ADS e GS relativi agli stessi dati.
In tutti i casi i dati degli abilitati e dei non abilitati appaiono mescolati.

papers ADS vs GS   H-index ADS vs GS

Passando agli indicatori ASN, la terza figura (a sinistra) confronta il numero totale di lavori indiciati in ADS fino a fine 2010 con il primo indicatore ASN (ossia presumibilmente i lavori dal 2002 al 2012 contenutoi nelle banche dati usate dal CINECA). Le linee rosa orizzontali continua e tratteggiata sono le mediane ASN del primo indicatore per la prima e la seconda fascia.
Non vi e' una chiara correlazione tra i due valori, vi e' un certo mescolamento tra abilitati e non abilitati, e vi sono comunque alcuni non-abilitati con un numero (notoriamente) elevato di pubblicazioni che appaiono averne assai poche nell'indicatore ASN (vuoi perche' il candidato non le ha allegate, vuoi perche' le banche dati del CINECA non le hanno agganciate, o vuoi perche' prevalentemente anteriori al 2002 ?).

La quarta figura (a destra) cerca di ovviare normalizzando la produzione ADS a un periodo di 10 anni (considerando che invece copre un periodo di 2011-oldest anni, dove oldest e' l'anno della prima pubblicazione in ADS per una data persona.
Quanto sopra assume una produttivita' costante. Se la produttivita' diminuisce con l'eta' il numero di lavori ASN (nel caso l'elenco del CINECA sia completo) sarebbe minore di quello estrapolato dall'ADS, il che pare accadere anche se non sempre. In ogni caso non vi sono ovvie relazioni con l'avere o meno ottenuto l'abilitazione.

papers ADS all vs ASN 10-years   papers ADS norm 10 years vs ASN 10-years

Nel tentativo di districare la situazione, la quinta figura (a sinistra) riporta il rapporto tra l'indicatore 1 ASN (lavori nei 10 anni 2002-2012 ?) e il numero di lavori estrapolati su 10 anni in base all'ADS (fino al 2010 incluso), in funzione dell'anno del primo lavoro riportato da ADS. Una produttivita' costante dovrebbe dare un rapporto unitario.
Appare ovvio che alcune stime di eta' (primo lavoro ADS) sono irrealistiche e proabilmente dovute ad omonimie.

In ogni caso la sesta figura (a destra) riporta invece il rapporto tra il numero totale di lavori ADS (fino al 2010 incluso) e l'indicatore 1 ASN. In questo caso, anche omettendo di guardare i dati anteriori al 1970, si vede che vi sono candidati ad alta produzione "storica" che sono stati penalizzati dal valore dell'indicatore 1.

10-year extrap ADS / ASN vs age   all ADS / ASN 1 vs age

La ottava figura (a destra !) confronta l'indicatore 3 di ASN (cosiddetto H contemporaneo) con l'indice di Hirsch classico derivato dai dati ADS, quantita' gia' a disposizione e di natura affine. Anche qui e nella altra figura per l'indicatore 2 le linee orizzontali sono le mediane ASN per le due fasce.
Mentre non sorprende che Hc sia piu' basso di HA, il grafico non mostra alcuna ovvia tendenza.

Per quanto riguarda l'indicatore 2 ossia le citazioni per anno, esse sono state ricostruite per il campione ADS usando i dati raccolti (e salvati offline) a fine 2010 e dividendoli per 2011-oldest, e sono riportati nella settima figura (a sinistra !).
La correlazione pare accettabile (i dati ASN possono avere piu' citazioni riferendosi a un intervallo piu' recente), tuttavia vi sono un certo numero di deviazioni.

ADS cit vs ASN cit   ADS H vs ASN Hc


In conclusione da una parte c'e' qualche dubbio sulla rispondenza dei dati raccolti dal CINECA rispetto a quelli che si potrebbero raccogliere dall'ADS e sulla validita' complessiva del campione bibliometrico.
Dall'altra parte l'uso del metodo bibliometrico non sembra essere servito ad effettuare uno screening preliminare delle candidature in modo da alleggerire il lavoro della commissione, in quanto le candidature rigettate perche' sotto soglia sono poche e perlopiu' possibilmente affette da errori (vuoi del candidato, vuoi del CINECA), e probabilmente gli stessi errori hanno perturbato parzialmente i criteri successivi basati sulle mediane.

Questo se si vuole vedere il bicchiere mezzo vuoto. Chi vuol vedere il bicchiere mezzo pieno potrebbe notare invece come la qualita' dei candidati sia comunque elevata se basata sugli indici bibliometrici (perlomeno per i casi in cui non si ha ragione di dubitare degli stessi, tant'e' che si e' comunque dovuti ricorrere ad ulteriori criteri e giudizi per estrarne un campione numericamente limitato di abilitati.

Per il futuro, ed in particolare per eventuali concorsi di progressione interni all'INAF se si volesse seguire il modello dell'ASN, ma anche per future tornate ASN, andrebbero probabilmente considerate le seguenti cose:

 

Nuova sezione sulla seconda tornata (ASN 2013)

La intera sezione che segue e' stata aggiunta a dicembre 2014 a seguito della conclusione della seconda tornata della ASN, denominata ASN 2013. Essa consiste di una parte sulla raccolta dei dati su candidati e risultati, una serie di statistiche oggettive, e alcune ed considerazioni finali.
 

Fonti dei dati su ASN 2013

Sui candidati

Analogamente a quanto fatto sopra per la ASN 2012 l'elenco dei candidati (ignorando i curriculum) e' stato ottenuto dal sito ASN (si noti che i link indicati sopra possono essere parzialmente funzionali per decisioni ministeriali, ossia i documenti recuperati a suo tempo sono stati rimossi dal Ministero).

L'elenco per il consueto settore disciplinare astrofisico e' stato recuperato, processato e ingerito nel database mysql degli abilitandi come descritto sopra. Non sono stati aggiornati gli elenchi del personale INAF ed universitario che restano quelli caricati a settembre 2013,

Si e' provveduto alla correlazione tra i tre elenchi come descritto sopra.

Si noti che i candidati alla ASN 2013 sono stati in genere aggiunti all'elenco preesistente, dopo avere flaggato i record esistenti come tornata=2012. I nuovi record sono flaggati come tornata=2013. I pochi casi di candidati che hanno applicato a entrambe le tornate, descritti nella sezione sulla statistica, sono flaggati tornata=4025. In alcuni casi per tali candidati esiste un vecchio record relativo al 2012. Poiche' l'elenco e' indiciato su nome e cognome, nei vecchi record il cognome e' stato modificato, aggiungendo -1 (per cui Rossi Mario e' stato sdoppiato in un nuovo record Rossi Mario e uno vecchio Rossi-1 Mario).

Sui risultati

Anche qui in analogia con quanto fatto piu' sopra per la ASN 2012 le informazioni sui risultati sono state ottenute dalla apposita pagina ASN che consente di accedere a una pagina sommario separata per ogni fascia, ed agli indicatori ed ai giudizi per ogni candidato.

Si e' proceduto in piena analogia a quanto fatto per ASN 2012 salvo alcune modifiche tecniche:

Detto questo e' stato possibile ingerire risultati (abilitato/ non abilitato), indicatori e giudizi nel database mysql e calcolare i parametri derivati esattamente come fatto per ASN 2012.  

Statistiche su ASN 2013

Sui candidati

Il numero totale di candidati per la seconda tornata ASN 2013 e' di 85, ossia circa 1/8 o il 13% dei partecipanti alla precedente tornata ASN 2012. Sembra notarsi rispetto alla precedente tornata un minore interesse da parte del personale INAF rispetto alle altre due categorie. I candidati possono essere ripartiti come segue: Il tutto pare sostanzialmente ragionevole. Compreso il fatto che non vi sono piu' candidati ad entrambe le fasce a differenza della tornata ASN 2012.

Se ora si considera la ripartizione tra esterni, universitari ed INAF, quella relativa all'inquadramento attuale, e quella interna al personale INAF si puo' notare che

Per quanto riguarda le sedi INAF o universitarie la distribuzione e' molto sparsa, coinvolgendo 12 sedi universitarie e 11 sedi INAF (di cui 2 ex CNR) con un massimo di 4 candidati per sede, e 13 sedi con un solo candidato.

Sui risultati

E' possibile confrontare i nuovi risultati con quelli della tornata ASN 2012 innanzitutto per il numero di abilitati (assoluto e percentuale): Dato il piccolo numero di candidati una statistica per sede (universitaria o INAF) ha poco interesse. In ogni caso Per quanto riguarda la statistica separata del SSD FIS/06 (terra e sistema circumterrestre), che usa valori diversi degli indicatori bibliometrici, si puo' fare il seguente confronto: Per quanto riguarda gli indicatori bibliometrici una curiosita' riguarda coloro che si sono ricandidati in ASN 2013 dopo avere partecipato a ASN 2012. Apparentemente 11 casi hanno presentato un maggior numero di articoli, 6 hanno presentato gli stessi, ed 1 ne ha presentato meno.

Per quanto riguarda i giudizi sintetici della commissione, come per ASN 2012 anche qui i candidati che non hanno superato alcuna delle 3 mediane degli indicatori bibliometrici non sono stati valutati. Si tratta di 7 casi in fascia 1 e 9 in fascia 2.
Si possono notare due peculiarita'. La prima e' che un astronomo ordinario e' risultato sotto tutte le mediane, avendo verosimilmente presentato solo i lavori di cui e' stata sottomessa copia PDF, che sono molto meno del suo reale complesso di pubblicazioni. Questo fraintendimento aveva colpito molti piu' candidati in ASN 2012.
La seconda curiosita' riguarda un candidato che ha ripresentato gli stessi lavori (sotto soglia per la fascia 1) in ASN 2013, con i quali era stato abilitato in fascia 2 in ASN 2012.

Ho anche prodotto qualche grafico da confrontare con la versione prodotta per la ASN 2012. Dato che non vi sono differenze degne di nota, non ho prodotto una preview PNG ma fornisco solo i link per retrievare i files postscript sia per entrambe le ASN che per la ASN 2012 (gli stessi gia' riportati sopra). Le nuove figure riportano sia i dati vecchi che quelli nuovi, modificando la simbologia come segue.

Per il confronto tra gli indicatori bibliometrici le figure sono: Per gli istogrammi invece sono stati prodotti quelli per la sola tornata 2013 da confrontare con i precedenti della ASN 2012. Essendo normalizzati in frazione del reciproco totale, i dati del 2013 sono piu' sparsi, e la scala verticale espansa. Si puo' notare come vi sia qualche candidato al top di alcuni indicatori eppure non abilitato. Sono tutti esterni a me sconosciuti. Nel caso piu' macroscopico le pubblicazioni riportate dall'ADS sono praticamente tutte non come primo autore e incluse in grandi collaborazioni.  

Considerazioni finali

Il numero dei candidati per la seconda tornata ASN 2013 e' significativamente inferiore al picco della prima tornata. Si puo' forse osservare un minor interesse da parte del personale INAF.

Si potrebbe anche commentare che se alle abilitazioni della prima tornata fossero seguiti un numero adeguato di inserimenti in ruolo, i numeri piu' ridotti potrebbero indicare che il meccanismo sia giunto a regime.
Oppure che non essendosi ancora tradotte le abilitazioni in reali inquadramenti, sia venuto a scemare l'interesse.

Le altre variazioni paiono di natura fisiologica.

 

Introduction

After I read the page by Giulio Marini on ROARS, I realized that the site of the National Scientific Habilitation (ASN in Italian) was reporting the list of candidates to the first round (2012) of habilitations, and therefore I thought useful to make some simple statistics relevant to our sector of astronomy and astrophysics, with a cut different and complementary with respect to the statistics reported in the quoted ROARS page.

In particular I thought interesting to study a sector which is relatively homogeneous, and with the peculiarity to be numerically dominated by non-university members, i.e. the scientific staff of INAF (with the co-existence of the two historical groups of "former Observatories" and "former CNR").
I admit that at the end it wasn't so easy as I expected because of the presence of a substantial number of "external people", but for the time being I present things as I could process them, even at the cost to present an "half-cooked job".

Following the publication of results of the procedure for grade 1 and grade 2 on the ASN site just between end 2013 and beginning 2014, I added a new section about results themselves, followed by some subjective considerations and other more quantitative ones. The original section about applications remains unchanged.
After the publication of results for the second round (ASN 2013) on the ASN site in December 2014 I added a new section with some simple statistics on candidates and results for such a round. Pre-existing section are unchanged.
 

Preliminary information (for laymen)

I remind to "outsiders" of our environment (referring for further details to the ASN site) that Law 240 (2010) foresees that a pre-requisite to become full professors or associate professors in Universities is to have obtained the National Scientific Habilitation, which is granted by specific national commissions for each disciplinary sector.
The first round of habiilitations, begun in 2012, is presently in progress.

Everybody, even if not affiliated to an italian university, can partecipate to any round (sending one's own CV and publication list).

In particular in the astrophysics sector the national community is formed also, and with a numeric prevalence with respect to the university component, by the scientific staff of INAF (National Institute for Astrophysics). See further below the statistics on the reference community.
Currently there is no equivalent to ASN for Public Research Organizations (PRO) like'INAF (even if there have been informal talks).

Moreover I remind that university staff has been so far divided in three grades (in italian "fasce" i.e. belts), i.e. university researcher, associate professor, full professor.
The equivalent grades in PROs are those of researcher, senior researcher and research director (or of technologist, senior technologist and technologist-director for staff classified that way; note that there is no salary difference between "researchers" and "technologists" of same grade.
In Astronomical Observatories before of the establishment of current INAF, there were three grades identical to the university ones (researcher-astronomer, associate astronomer, full astronomer). With the establishment of INAF such grades have been frozen, staff in such grades who did not opt to pass in the PRO grades or did not enjoy any career progression (which are numerically very limited in PROs), mantains the previous status.

All these grades are preceded (at the post-doc level) from "atypical contracts" (often named "precarious"), non tenured, like grants and fellowships (in italian assegni di ricerca). The latter, in the form regulated by Law 240, are nowadays the main form of "entry level" in resaerch activities.
In the past all university positions were permanent, while in PROs it was possible to have, specially for the initial grade of researcher, non-permanent contracts (for anyhting else at all identical to the permanent ones). Law 240 has transformed the status of new university researches in non-permanent.  

Data sources

The list of candidates to ASN has been retrieved from the ASN site exclusively for the sector 02/C1 (astronomy, astrophyics, Earth physics and physics of planets), separately for the two grades (of full and associate professors).
The ASN site supplies also the CVs part of the application, but they were not consulted.

The list of INAF staff has been retrieved, seat by seat, from the registry of INAF employees. Beyond scientific staff (researchers and technologists, astronomers included) it contains also technical and administrative staff. It contains both permanent and non-permanent staff, as well as fellows (assegni di ricerca), but I am not sure that the latter list kept centrally be up to date with the real situation in the invidiual local seats). The registry contains details on all levels, like grades, salary steps, seniority in the position and/or hire date etc.

The list of university staff has been retrieved from the CINECA site separately for fellows (assegnisti di ricerca) and for teaching staff (i.e. researchers, associate and full professors).
For fellows retrieval was limited to disciplinary sectors (SSD) FIS/05 (astronomy and astrophysics) and FIS/06 (Earth and circumterrestrial system). For teaching staff separate retrievals were made from the lists for disciplinary sectors (SSD) FIS/05 e FIS/06, for macrosector 02/C (astronomy, astrophysics, Earth physics and planet physics) and for the "evaluation grouping" (settore concorsuale) 02/C1 (idem). The last two lists were found to be identical.

Retrieved material was ingested in a mysql database, in 3 tables, one for habilitation candidates, one for INAF staff and one for university staff.
Then I verified that correlating on surname and names there were no homonimies. I found instead four cases (all for INAF staff, later solved) of persons with more than one name who weren't correlated (since in one table they appeared e.g. with two names and in another with three, or with and without an hyphen).

Finally I normalized the reference to grades as follows:
    For the candidate tables, each person appears only one , and flags indicate whether he/she appliea for grade 1, grade 2 or both
    In the same candidate table I inserted the la current grade of each applicant, obtained correlating with the other two tables (INAF and university staff).
    Grades are numbered for brevity as follows, uniforming different categories and neglecting finer details (even if present in the tables)

 

The reference community

The list of university staff for astronomy includes 339 persons, of which 116 from the fellows list (93 FIS/05 and 23 FIS/06) and the rest from the teaching (structured) staff lists. Of the latter 223), 167 appear in both lists (by SSD FIS/05 and by "settore concorsuale"), 50 in both lists (by SSD FIS/06 and settore concorsuale), 3 only in the list for FIS/05, 2 only in the one for FIS/06 and 1 in all three lists (settore concorsuale and both SSDs).
University staff works in 35 seats (including Scuola Normale Superiore, SISSA/ISAS and IUSS). Some seats are not in cities commonly associated to astronomical activity and/or have only 1 person (4 cases). 20 have between 2 and persons, 9 between 10 and 20, 2 (SISSA and Roma Sapienza) slightly more than 20 and 2 (Padova and Bologna) above 40.

The list of INAF staff inclusive of fellows and alike working at INAF seats (but excluding affiliates of other institutions associate to INAF) amounts to 1403 persons, included all technicak-administrative staff. Of these 915 should correspond to scientific staff (i.e. those classified in grades 1-4), and of the latter 659 (grades 1-3) are structured staff with permanent or temporary positions.
Fellows proper (assegnisti) are 170 and grant holders 80 (all flagged as grade 4).
There are possible uncertainties both de iure or de facto. E.g. a small fraction of graduated administrative staff from former Observatories (i.e. formerly in the university contractual compartment) has been classified as "technologists" at the moment of transition to the research contractual compartment. Moreover unstructured staff (grade=4) includes, beyond fellows and grant holders, 4 persons classified as "equivalent to researcher" and 2 "equivalent to senior researcher" (but they are not temporary contract researchers, who would be listed with structured staff).
INAF scientific staff works, after recent nergings, in 18 seats, located in 12 cities or geographical areas, with a complement varying from 14 for Teramo Observatory to 108 for IAPS Roma. 4 seats have less than 30 scientific staff members, 5 between 30 and 50, 7 between 50 and 80, and 2 (Arcetri and IAPS) beyond 80.

The composition of the national reference community formed by INAF and Universities and the breakdown in the different grades can be suummarized in the following table.

Institution in absolute number as percentage of total staff as percentage of structured staff
grade grade 1 grade 2 grade 3 grade 4 grade 1 grade 2 grade 3 grade 4 grade 1 grade 2 grade 3
Universities 55 58 110 116 16% 17% 32% 34% 25% 26% 49%
   structured staff 223   66%   100%
INAF 42 137 480 256 5% 15% 52% 28% 6% 21% 73%
   structured staff 659   72%   100%
   PRO researchers 14 61 201 6 1% 7% 22% <1% 2% 9% 30%
   PRO technologists 2 14 143   <1% 1% 15% <1% 2% 22%
   astronomers 26 62 136   3% 7% 15% 4% 9% 21%

Univ.+INAF 97 195 590 372 8% 16% 47% 29% 11% 22% 67%
   structured staff 882   70%   100%
 

Statistics about ASN

The total number of candidates for the settore concorsuale (evaluation gropu) for astrophysics (at large) is 656, nominallly equivalent to 52% of the composition of the reference community.

However anybody can apply to ASN even if not a member of the reference community defined above. E.g. if one is working abroad, if one is working in a PRO different from INAF, if one is working in an italian university but is affiliated to a different disciplinary sector not included in those taken into account.
In fact a first statistics, based on the correlation among the tables of candidates, INAF staff and university staff, indicates that:

I am presently unable to identify any further where the (apparent) "outsiders" come from, unless by consulting individual CVs (which would be excessively time consuming in consideration of the large number).
I looked at the outsider lists, and found (only) two handfuls of names known to mei, of which one is an homonimy, 3 or perhaps 4 are abroad (the fourth might have moved recently, or have quitted science), 3 are staff of other PROs (CNR or INFN), 3 are italian university staff, but are not present in the lists I retrieved from CINECA (as affiliated to other disciplinary sectors).
I regard as currently not viable to run a global (automatic) search on the CINECA site to manage the latter case.

Therefore, for the 304 "unknown people", I am not able to perform many of the statistics reported below, like the one on the current grade, or the seat of work.

In any case it is instead possible to count how many candidates applied for grade 1 (full professor), for grade 2 (associate professor) or for both.

Application to grade in absolute number as percentage of overall total as percentage of institution total
institutions all univ. INAF outsiders all univ. INAF outsiders all univ. INAF outsiders
all applications 656 107 246 303 100% 16% 37% 46% 100% 100% 100% 100%
applications to grade 1 only 120 28 51 41 18% 4% 8% 6% 18% 26% 21% 14%
applications to grade 2 only 449 69 149 231 68% 10% 22% 35% 68% 64% 60% 76%
application to both grades 87 10 46 31 13% 2% 7% 5% 13% 9% 19% 10%

It is rather curious to note that some candidates applied for both grades. Onw wonders what is the rationale behind it (maybe these are young candidates who think to be brilliant enough to qualify for grade 1, but want to be sure to obtain as fallback a grade 2 habilitation).

It is also curious to observe that the number of candidates from the universities (which presumably wish a career advancement) is a minority with respect to outsiders and INAF staff taken together. The latter may not realistically think that a sufficient number of university professor postions in the two grades will be available for all. Moreover INAF staff might not be interested to move to an university, in the case the salary seniority makes the operation not convenient (in lack of career reconstruction). It is plausible that such staff aims only to obtain a title (habilitation) demonstrating one's qualification to the upper grade, which could be tentatively exploited in a future internal progression procedure (where career reconstruction is possible).

Finally it is curious to note like applications by outsiders are mainly for grade 2, while double applications (for both grades) are more common among INAF staff.


For the 353 candidates coming from italian universities and from INAF it is possible to make a further statistics of the current grade (or starting grade).
The expectation would be that who is already in grade 1 did not apply, who is in grade 2 applied for grade 1, who is in grade 3 or not structured (here flagged as grade 4) applied for grade 2 or exceptionally for both grades.

Here is a statistics in absolute number.

Application to grade University + INAF INAF University
starting grade undefined 4 3 2 1 undefined 4 3 2 1 4 3 2 1
all applications 12 32 230 75 4 12 22 161 48 3 10 69 27 1
applications to grade 1 only 1 5 69 4 1 5 42 3 27 1
applications to grade 2 only 12 30 174 2 12 20 115 2 10 59
applications to both grades 1 51 4 1 41 4 10

First of all the 12 persons "without grade" refer to INAF staff, concentrated in 6 different seats. In 5 cases they are permanent technicians (CTER IV level), who presumably graduated after they were hired and ended doing research activities ("underclassified"). In 7 cases they are collaborators listed as "Compensi imponibili ruoli esenti". I ignore what this category is (they are not fellows and are not structured). All 12 applied for grade 2.

Only 32 fellows (about 9% of the total of fellows) submitted an application for ASN, and the vast majority only for grade 2.

The bulk of applications is for grade 2 and has been submitted by structured staff of grade 3, i.e. researchers of the initial grade. Note the numeric prevalence of applications from INAF staff with respect to those from university staff. Some people have applied for both grades. Only 5 persons (in two INAF seats) applied to "jump" from grade 3 to grade 1.

An other significant and expected "bulk" is the one of those who from grade 2 applied to pass to grade 1. Here too note the numeric prevalence of applications from INAF staff with respect to those from university staff.
However there are 4 curious cases of INAF senior researchers (that is, already now "in grade 2") who submitted applications for both grades.

Equally curious are 4 cases of staff already in grade 1 who anyhow submitted application to grade 1. 3 are from INAF staff (1 research director and two full astronomers) which presumably have a real intent to move to University on future positions they are aware of, and therefore intend to ensure a formal habilitation. The fourth case is a full professor under probation ("straordinario").


A peculiarity of PROs are the parallel roles of technologists side by side with researchers (with the same three grades and the same salary scale). A peculiarity of INAF are the parallel roles of PRO "researchers and technologists" along with the "frozen" role of astronomers (with the grades and salary scale of university staff).

For what concerns technologists, note that among the candidates there are (only) 8 technologists (of grade 3, working in 5 seats, 3 former CNR institutes and 2 observatories) who all applied for grade 2.
Only one of them (with a nominal seniority of less than 5 years) applied to both grades.

For what astronomers are concerned (after the option phase they constitute 34% of structured scientific INAF staff), 83 of them submitted an application for ASN. It can be interesting to present a statistics for INAF with a breakdown between researchers with a PRO contract and astronomers with "juridical status". Such statistics is reported here below (the 8 technologists quoted above are not included with PRO researchers).

Application to grade INAF all INAF PRO researchers INAF astronomers
starting grade undefined 4 3 2 1 3 2 1 3 2 1
all applications 12 22 161 48 3 92 27 1 61 20 2
applications to grade 1 only 1 5 42 3 3 23 1 2 19 2
applications to grade 2 only 12 20 115 2 63 45 1
applications to both grades 1 41 4 26 4 14


Finally the latter two tables are reported as percentages.

The distribution of applications by starting grade and by the grade applied for, in percentage of the total number of candidates (107 university staff, 246 INAF staff or 353 from both institutions) is very similar in the various cases.

Application to grade University + INAF INAF University
starting grade undefined 4 3 2 1 undefined 4 3 2 1 4 3 2 1
all applications 3% 9% 65% 21% 1% 5% 9% 65% 19% 1% 9% 64% 25% 1%
applications to grade 1 only <1% 1% 19% 1% <1% 2% 17% 1% 25% 1%
applications to grade 2 only 3% 8% 49% <1% 5% 8% 47% 1% 9% 55%
applications to both grades <1% 14% 1% <1% 16% 1% 9%

The distribution between researchers and astronomers within INAF, in percentage of the total number of candidates (246 INAF staff, 120 researchers, 83 astronomers) are also rather similar.

Application to grade INAF tutti INAF PRO researchers INAF astronomi
starting grade undefined 4 3 2 1 3 2 1 3 2 1
all applications 5% 9% 65% 19% 1% 76% 22% 8% 73% 24% 2%
applications to grade 1 only <1 2% 17% 1% 2% 19% 1% 2% 23% 2%
applications to grade 2 only 5% 8% 47% 1% 52% 65% 1%
applications to both grades <1% 16% 1% 21% 3% 17%
 

New section about National Scientific Habilitation (ASN) results

The present section (all the text after this point) has been added in January 2014 and consists of a part about data collection, a series of objective statistics, some brief subjective considerations and further considerations (quantitative).
 

Data sources about results

The results of the National Scientific Habilitation (ASN for short in the remainder of this document) are very gradually appearing on the ASN site in a dedicated page, where one can choose the disciplinary sector and the grade of the applications. In particular for astrophysics (sector 02/C1) there are two sub-pages for the grade 1 and grade 2.

Each of those (HTML) pages contains the minutes of the sessions of the "commission" (Evaluation Board) (presumably the same minutes for both grades since the Board is common to both), the list of candidates, a Yes/No flag indicating whether habilitation was granted or not, and further links. In particular CVs and all further links related to a given candidate and her/his application for a particular grade have a numeric identifier.

Among further links, one contains the indicators (i.e. the famous or infamous medians) and another the scores of the Board.

The link for indicators is an HTML page which can be parsed to extract the three indicators to be inserted in the mysql database (separately for the two grades) :

Such indicators shall be compared with the medians of the distribution of professors already assigned to the two grades. A peculiarity is that there are two sets of medians, one for the general disciplinary sector of astrophysics, and a specific ones for sector (SSD) FIS/06 (Earth system and circumterrestrial medium). From the same HTML page it is possible to retrieve the information whether an application was submitted for FIS/06 and therefore evaluated with different criteria.

The link for scores is instead a PDF document, but fortunately in a standard format, which can be converted to text and then parsed relatively easily. Each Board member assigned individually three synthetic scores, then the entire Board has agreed three collegial scores. Therefore we have a total of (5+1)×3 scores to be inserted in the mysql database. They are indicates as

Each score can assume values fair, good, very good, excellent (for convenience converted into numbers 1, 2, 3 e 4 when inserted into the mysql database.

All above data have been inserted into the pre-existing mysql table of habilitation candidates separately for the two grades: 3 indicators, 18 G1/2/3 scores, the FIS/06 flag and the habilitation flag.

The following auxiliary data have additionally being retrieved: the tables of the reference medians for sector 02/C1 and eventual FIS/06 SSD for grade 1 and grade 2 and the criteria established by the Board and reported in the appropriate minute. The medians are:

indicator 02/C1 overall SSD FIS/06
grade 1grade 2 grade 1grade 2
Publications 493227.517
Citations 86.0835.8322.0114
Hc1810 9 6
A median is passed if the value is greater of equal.

Scores G1/2/3 was not computed if no median was passed. Habilitation was granted if

 

Statistics about results

A first statistics concerns the number of habilitated (in absolute value and as percentage of the number of candidates), grouped according various criteria.

Criterion Grade 1 Grade 2
candidateshabilitatedpercentage candidateshabilitatedpercentage
Total number 207 5526.6% 53623543.6%
 Affiliated to universities 38 1642.1% 79 4151.9%
 Affiliated to INAF 97 2929.9% 19510352.8%
 Outsiders 72 1013.9% 262 9134.7%
Among INAF staff
 are PRO researchers 57 1628.0% 93 5650.2%
 are former Observatory astronomers 37 1335.1% 60 4066.7%
 are PRO technologists 1 0-- 8 450.0%
 university and outsiders 112 2623.2% 37513536.0%
According to current grade
 already in grade 1 4 375.0% -- ----
 already in grade 2 73 4257.5% 6 466.7%
 already in grade 3 56 0-- 22513760.9%
 fellows and alike 2 0-- 31 3 9.7%
 unknown 72 1013.9% 274 9133.2%

Above statistics have been computed on the total sample without separating candidates who applied for sector SSD FIS/06.

The percentage of habilitated is significatively higher for grade 2 than for grade 1. There are few differences among university and INAF staff, specially for grade 2, while there are less habilitated among outsiders.
There are also few differences within INAF staff, between those with the contractual status of PRO researcher, and those with the juridical status of former Observatory astronomers. The number of PRO technologists among candidates is notoriously limited.

Unsurprisingly the majority of the habilitated to one grade comes from the grade immediately below.

It is curious to note that of 4 candidates already de facto in grade 1 (one full professor in probation, two full astronomers and one research director) only three were habilitated, excepting one full astronomer
Among the 42 habilitated to grade 1 coming de facto from grade 2 (associate professors, associate astronomers, senior researchers) there are 15 university and 27 INAF staff (15 senior researchers and 12 associate astronomers).
Only three habilitated to grade 2 are fellows or alike.
Of 6 candidates already de facto in grade 2 (senior researchers or associate astronomers) 4 applied for and obtained habilitation while 2 did not obtain it.

Of 87 candidates who applied for both grades, 15 did not obtain any habilitation, 71 have been habilitated to grade 2, and 1 only to both grades.

For university and INAF staff it is also possible to make a statistics by seat. We list the number of habilitated and the percentage w.r.t. the candidates in such seat (from which it is easy to inferir which seats are more or less populated).

In grade 1 within INAF habilitated are 9 at Arcetri (90%), 4 at Brera(30%), 3 at IASF-Mi (50%) 2 at OARM (22%), OATS (50%), IAPS (28%) and OABO (20%) and 1 each at OAPA (100%), OATE (100%), Capodimonte (17%), IASF-Bo (11%) and IRA (50%).

In grade 1 habilitated in Universities are 3 in SISSA (100%), 2 in Roma 2 (66%), and one each in Bologna, Milano 1, Palermo (33%), Trieste and Padova (50%) and at Insubria, Calabria, Milano Bicocca, Roma3 and Cagliari (100%).

In grade 2 within INAF habilitated are 15 at OAPD (88%), 13 at OABO (65%), 12 at IASFBo (80%), 10 at Brera (52%), 9 at IAPS (36%), 8 at OARM (40%), 7 at OATS (70%), 6 at OACT (75%), 4 at IASFMi (36%), 4 at Capodimonte (57%), 3 at IASFPa (50%), IRA (37%), Arcetri (30%), 2 at OATO (17%) and OAPA (33%). 1 at OACA and OATE (both 100%).

In grade 2 habilitated in Universities are 7 at Padova (63%), 6 at Bologna (50%), 5 at Roma 1 (83%), 3 at Trieste (75%), Aquila (60%) and Napoli (75%), 2 at Roma 2 (33%), Milano 1, Perugia and Palermo (100%), Salento (67%), 1 at Torino (25%), Basilicata e Ferrara (50%), and Pisa (100%).

Considering now candidates in the sub-sector SSD FIS/06 one notes the following:

Of 31 candidates to grade 1, only 5 are habilitated (2 university staff and 3 outsiders) with a percentage of 16%. Most candidates were outsiders (only 4 more university staff and 1 from IAPS INAF).
Of 83 candidates to grade 2, 43 were habilitated (9 university staff, and the rest outsiders) with a percentage of 51.8% ! Here too most candidates were outsiders (just 5 more university staff and 1 from IAPS INAF).

Note that the Board in its minutes has remarked about the dishomogeneity related to the requirement to manage SSD FIS/06 together with the rest.
They did not remark instead (but I add such comment) that also the entire sector of astrophysics could be considered excessively large and internally dishomogeneous, e.g. w.r.t. usual subdivisions like INAF macro-areas.

For what indicators are concerned, see also subjective considerations below for eventual quirks.

A trivial verification is that, of the 87 candidates who applied for both grades, they usually get the same indicators for both. 12 have a different publication number (usually by 1 or less, seldom more), 15 have a different citationi number (usually by a fraction of a point, sometimes more), 6 have a different Hc (usually by 1 unit).
I am not able to tell whether it depends on differences in the actual submitted application or on computing artefacts occurred at CINECA.

For what concerns scores G1, G2, G3 I first note that candidates under all 3 medians for the respective grade, according to the established procedure, did not have any score computed (which therefore appear as zero in the database).

This happens for 30 candidates to grade 1 and 68 to grade 2. About all these see also below in the subjective considerations.

For the rest of the candidates one notes a good homogeneity in the scores among different Board members. This was verified taking the numeric average of the 5 scores (which obviously is a rough approximation).

For candidates to grade 1 in 129, 119 and 143 cases the value of the G1, G2 or G3 collegial indicator is exactly equal to the average.
For 203, 205 and 205 cases the value of G1, G2, G3 is equal to the average rounded by defect or excess (function ROUND in mysql). In 3 cases G1 was raised from 3.4 to 4 and in 1 from 2.2 to 3, in 2 cases G2 lowered from 1.6 to 1, in 2 cases G3 raised from 3.2 to 4.
For candidatesto grade 2 in 490, 380, 464 cases the value of the G1, G2 or G3 collegial indicator is exactly equal to the average, and for all 536 cases is equal to the rounded average.

Considering that the difference between the best individual score and the collegial score is practically never larger than 1 step (only in 2 cases for G2 in grade 1, and in 1 case for G1 and G2 in grade 2), it is not necessary to compute RMS or standard deviations, and I won't proceed any further.

Considering now the number of passed medians one obtains the following distribution. One can note a single very small anomaly (a candidate to grade 2 in sector SSD FIS/06 has the third median exactly equal to the reference value, therefore he should pass one median, but scores G1/2/3 are not computed). For the rest, in compliance with the procedure, candidates with zero medians passed have, as expected, G1=G2=G3=0.
It can be noted (though with the doubts raised under subjective considerations) that a sizeable fraction of candidates appear to pass all three medians (and that therefore further criteria are necessary).

number of passed mediansgrade 1grade 2
none 30 67
one 17 30
two 39 72
three 121367

Considering now the scores and their relevant criteria one obtains the following distribution of habilitated (which as corollaries indicates how the Board has correctly applied the established procedure, and moreover indicates how the bibliometric criterion of medians has prevailed).

criterion grade 1grade 2
1: 3 medians, 2 very good 45222
2: 2 medians, 2 excellent 10 12
3: 1 medians, 3 excellent 0 1

Data can be presented also in graphical form, on the left for candidates to grade 1, on the right for those to (only) grade 2. In all plots (of which one can obtain a fully scalable postscript version clicking on the preview) colours indicate;

A first family of plots compares indicators 1 and 2 (normalized publications and citations). The correlation between the two has a certain spread, there are candidates with a high indicator which weren't habilitated, but in particular note how candidates to grade 2 show values, specially for citations, often higher and anyhow comparable to those of the candidates to grade 1.

ASN cit vs pap ordinari   ASN cit vs pap associati

A second family of plots compares indicators 1 and 3 (publications and Hc). Here too one can see a certain correlation with some spread, and intervals of Hc comparable for the two grades.

ASN Hc  vs pap ordinari   ASN Hc  vs pap associati

The third family of plots closes the loop comparing indicators 2 and 3 (citations and Hc). with results obviously complementary to the previous ones.

ASN Hc  vs cit ordinari   ASN Hc  vs cit associati

A different and complementary approach reports the histogram of each indicator. The three plots below refer to the first indicator (publications, on the left), the second (citations, at centre) and the third (Hc, on the right). Each plot is divided in two panels, the top one for grade 1 and the bottom one for grade 2. The vertical pink line (solid or dashed) indicates the reference median.
All histograms are in percentage of the total of candidates for the specific grade. The black histogram refers to all candidates, the red one to habilitated (hence one can implicitly read also the fraction of habilitated).
In this case the bulk of the distributions (not the tails) appear clearly different for the two grades.

histogram ASN ind 1   histogram ASN ind 2   histogram ASN ind 3

As an an attempt to quantify the distribution of scores (synthetic but not bibliometric) G1/2/3 one can report in histogram form (analogously to what above) the sum of numeric values (described further above) G1+G2+G3. This is done in the plot below here.
Note that such representation is coarse. A score of zero is obtained only for candidates "not classified" i.e. who did not pass the medians (about this see also however next section). Otherwise the minimum score is 3 (all G1/2/3 equal to "fair"). A score of 7 can correspond to cases satisfying "criterion 1" described above (2 "very good" and 1 "fair" as minimum) but also to combinations which do not satisfy it. Scores 8 and 9 satisfy criterion 1, score 10 can satisfy criteria 1 or 2, scores 11 and 12 correspond unambiguously to criteria 2 and 3.

histogram scores

To close the loop we report on the separate rows (for grades 1 and 2) the plots of overall score G1+G2+G3 as function of each of the three bibliometric indicators (using colours and symbols as in the above plots of indicators among themselves).

score ord vs ASN ind 1   score ord vs ASN ind 2   score ord vs ASN ind 3

score ass vs ASN ind 1   score ass vs ASN ind 2   score ass vs ASN ind 3

In conclusion the Board has been certainly done an heavy work examining about 700 applications, and has done it correctly based on received inputs.
However the considerations following below raise some doubt on the quality of part of such inputs.  

Subjective considerations

I cannot say to be personally surprised by the fact I had not been habilitated. At least looking at face-value the global results, i.e. comparing myself with other habilitated I know, who surely have lately a record of activities higher in terms of measure and quality.
Neither can I in such context complain about the scores by the Board (even if I could be surprised to have obtained a "fair" for scientific activity and a "very good" for scientific responsibility, when I never wanted roles as PI or Project Manager, nor recently followed any big project. Probably I would have reversed or averaged such scores !).

But I remain unpleasantly surprised to see among indicators a number of normalized publications equal to 22 (!) with 85.29 normalized citations when I submitted in the CV 273 works (126 journal papers, 49 proceedings, 3 abstracts, 5 posters, 11 databases, 24 software and 24 other reports). Or when I achieved an ANVUR (VQR) score di 5.6/6 (this was computed on "the best papers for INAF").

Earlier simulation suggested e.g. using tool YouAstro for 103 journal papers of which 25 after 2002, and an academic age of 32 years, a normalized number of works of 103, with 98.7 normalized citations, a standard H of 30 and an Hc of 18 (only parameter matching with computations by CINECA). Repeating today the same exercise (but ADS has been updated in the meanwhile) on the same 103 papers, it gives 21 after 2002 (?), 3427 citations, 107.09 normalized citations, a standard H of 32 and an Hc of 20.

Using data collected at end 2010 described in the next section I have 180 works indexed by ADS since beginning of my activity (1979) until 2010 included, of which 118 have at least one citation, for a total of 2925 citations, and an HA=30.

Perplexity increases seeing among non-habilitated some other colleagues which I know, who are certainly more active than I am (in at least a pair of cases much more active and/or with large project responsibilities). In such case the scores weren't even computed, since none of the three medians appear to be passed ! Which does not match at all their production.
It is possible that in some cases a mistake was done by the candidates (e.g. listing only publications submitted as PDF without "ticking" the other loaded on the publication archive of CINECA in order to "hook" them with the application). In fact the incompleteness of many applications has been noticed by the Board which has recorded the remark in the minutes (see this excerpt).

However in my case (and other ?) the list of papers was complete, and presently the computations done by CINECA do not appear to be public (while actions by the Boards are public and complete).

It could be however possible I neglected one issue. Assuming that this ASN document be the applicable one to describe the normalization procedure, I assumed that all publications be normalized to 10 years while instead it looks like only publications of the last 10 years were counted (I also still have the doubt that databases used by CINECA can be incomplete ... in the application I listed 59 works, among 273 total, for the interval 2002-2012 (26 journal papers, 10 conference proceedings, 6 posters, 18 reports of various nature).

It is therefore possible that errors occurred when hooking with "commercial" databases used by CINECA, or that discrepancies exist between such databases and ADS, the database currently used by the astronomic community.

 

Further considerations

The publication database currently used by the astronomic community is in fact NASA ADS, considered highly reliable and not subject to commercial access limitations (incidentally it is also used within INAF for its own internal database, INAF CRIS).

Unfortunately it is not easy nor immediate to obtain now from ADS data equivalent to those used by CINECA derived from commercial databases. Beyond the trivial motivations of work load and time necessary to do it, one of the problems (well known also to INAF CRIS) is the one of homonimies (and in fact INAF staff must periodically verify that papers automatically loaded into CRIS from ADS are actually one's own).

I can however make a partial comparison with a dataset I systematically collected at end 2010 (described however only in an unfinished draft). In such dataset there is the number of papers nominally associated to a given person (hence without verification of homonimies), for structured INAF staff present at end 2010. Data immediately available per person are:

In addition the list of papers listed by ADS is available offline (in the form of the relevant bibcode and of the number of citations available at end 2010). This would allow to perform different temporal "cuts", but for the time being I do not engage in such an activity nor in an update of collected data.

The table of ASN candidates contains 246 persons for whom (see above) I reconstructed an INAF affiliation at present. The table of INAF staff at end 2010 contains 570 scientific staff members for whom data were collected from ADS and Google Scholar.
Of course not all INAF staff applied for ASN, and not all ASN candidates affiliated to INAF were in force at INAF in 2010. In particular candidates include 21 fellows (not included in structured staff in 2010), 39 researchers possibly recruited with a permanent or temporary contract after 2010, and 11 unclassified cases (among which e.g. 4 CTER technicians for whom ADS was not searched in 2010). 11 cases of possible homonimies were manually resolved (in 2 cases it is the same person who indicated different personal names in the ASN application w.r.t. the INAF registry, other cases are homonimies between newly hired staff and pre-existing technical staff, or of different research staff, for whom the surname homonimy has been solved verifying first name and seat of work).

In conclusion a comparison is possible (only) for 175 persons. 91 of them applied (at least) for grade 1 (29 were habilitated) and 84 applied (only) for grade 2 (48 habilitated).

In the plots below, crosses indicate candidates to grade 1, asterisks to grade 2. Black colour is for non-habilitated, and red colour for habilitated candidates. Clicking on each plot, one can access a postscript version (scalable to full resolution) of the same plot.

The first set ot two figures is relative only to my dataset, and highlights its limitations, and the effect of using different databases. The plot on the left compares the number of papers indexed in ADS and in Google Scholar (GS) on collection date (end 2010). The fact the number of GS papers (where available) be higher than in ADS is presumably due to homonimies, perhaps with non-astrophysicists. The plot on the right instead compares Hirsch H indices computed from ADS and GS citations relative to the same data.
In all cases data for habilitated and non-habilitated appear intermingled.

papers ADS vs GS   H-index ADS vs GS

Moving on to ASN indicators, the third plot (on the left) compares the total number of papers indexed in ADS until end 2010 with the first ASN indicator (i.e. presumably the papers from 2002 to 2012 contained in the databases used by CINECA). Pink horizontal lines (resp. solid and dashed) show the ASN medians of the first indicator for grades 1 and 2.
There is no obvious correlation between the two quantities, there is some mix-up between habilitated and non-habilitated, and there are anyhow some non-habilitated with a (notoriously) high publication record who appear to have very few in the ASN indicator (maybe because the candidate did not submit them, maybe because the CINECA databases did not hook them up, or maybe because mostly published before 2002 ?).

The fourth plot (on the right) atttempts to resolve the situation normalizing the ADS production to an interval of 10 years (taking however as total interval one of 2011-oldest years, where oldest is the year of the first publication present in ADS for a given person.
What above assumes a constant productivity. If productivity decreases with age the number of ASN papers (provided the list at CINECA is complete) would be less than the one extrapolated from ADS, which seems to happen, but not always. Anyhow there is no obvious relationship with having been granted habilitation or not.

papers ADS all vs ASN 10-years   papers ADS norm 10 years vs ASN 10-years

Attempting to disentangle the situation, the fifth plot (on the left) reports the ratio between ASN indicator 1 (papers in 10 years 2002-2012 ?) and the paper number extrapolated on 10 yeats based on ADS (until 2010 included), as function of the year of the first paper recorded by ADS. A constant productivity should give a unit ratio.
It looks obvioous that some age estimates (first ADS paper) are unrealistic, possibly due to homonimies.

Anyhow the sixth plot (on the right) reports instead the ratio between the total number of ADS papers (until 2010 included) and ASN indicator 1. In this case, even omitting to look at data before 1970, it appears that there are candidates with an higher "historical" production who were penalized by the value of indicator 1.

10-year extrap ADS / ASN vs age   all ADS / ASN 1 vs age

The eight plot (on the right !) compares ASN indicator 3 (so-called contemporary H) with classical Hirsch H-index derived from ADS data, which was already avaliable and is a similar quantity. Here too as well in the other plot for indicator 2 horizontal pink lines are ASN medians for the two grades.
While it is non surprising that Hc is lower than HA, the plot does not show any obvious trend.

For what concerns indicator 2 i.e. citations per year, they have been reconstructed for the ADS sample using data collected (and saved offline) at end 2010, dividing them by 2011-oldest, and are reported in the seventh plot (on the left !).
The correlation looks acceptable (ASN data may have more citations since they refer to a more recent interval), however a certain number of deviations is apparent.

ADS cit vs ASN cit   ADS H vs ASN Hc


In conclusion on one hand there is some doubt on the correspondence of data collected by CINECA with those which could be collected from ADS and on the overall validity of the bibliometric sample.
On the other hand use of a bibliometric method seems to have been not useful to make a preliminary screening of applications in order to lighten the burden on the Board, since applications rejected because under threshold are few, and possibly mostly affected by mistakes (by the candidate or by CINECA), and probably the same mistakes might have perturbed partially the subsequent criteria which made use of medians.

This is one likes to see the glass half empty. Who likes to see the glass half full might instead note how the quality of candidates be anyhow high if based on bibliometric indices (at least in the cases where there is no reason to doubt about them), and in fact one had to resort to further criteria and scores to extract a numerically limitated sample of habilitated.

For the future, and in particular for eventual procedures of career progression internal to INAF if one would like to follow the ASN model, but also for future ASN rounds, the following items should be probably considered:

 

New section on the second round (ASN 2013)

This entire section (all text following here) was added in December 2014 after the end of the second ASN round, in the remainder termed ASN 2013. It includes a part on data collection about candidates and results, some objective statistics, and some final considerations.  
 

Data sources about ASN 2013

About applicants

With analogy to what made above for ASN 2012 the list of applicants aka candidates (CVs have been ignored) was obtained from the ASN site (note that links indicated above may be functioning only partially because of decisions of the Ministry, namely the documents retrieved when the site was made available have been later removed by the Ministry).

The list for the usual astrophysics disciplinary sector has been retrieved, processed and ingested in the mysql database of candidates as described above. The lists of INAF and university staff have not been updated and remain those loaded in September 2013,

The correlation of the three lists was perfored as described above.

Note that applicants to ASN 2013 have been usually added to the pre-existing list, after existing records were flagged as round=2012. New records are flagged as rounda=2013. The few cases of candidates who applied for both rounds, described in the section about statistics, are flagged round=4025. In some cases for such candidates there is an older record relative to 2012. Since the list is indexed on name and surname, in the older records the surname was modified, adding -1 (so John Smith has been doubled into a new record John Smith and an older John Smith-1).

About results

Here too, analogously to what done above for ASN 2012 information about results was obtained from the appropriate ASN page which allows to access a summary page specific for each grade, and to the indicators and scores for each candidate.

I proceded analogously to what done for ASN 2012 except for a few technical changes:

Said that, it has been possible to ingest results (habilitated/ not habilitated), indicators and scores in the mysql database and compute derived parameters exactly as done for ASN 2012.  

Statistics about ASN 2013

About applicants

The total number of applicants for the second round ASN 2013 is 85, i.e. about 1/8 or 13% of applicants to the previous round ASN 2012. One may note, w.r.t. the previous round, a reduced interest by INAF staff compared to the other two categories. Applicants can be classified as follows: All looks quite reasonable, inclusive of the facts there are no longer any candidate to both grades in contrast with round ASN 2012.

Considering then the partition among outsiders, university and INAF staff, the current grade, and the categorization inside INAF staff, one can note that

Concerning INAF or university seats, the distribution is very sparse, involving 12 universities and 11 INAF seats (of which 2 former CNR institutes) with a max of 4 candidates per seat, and 13 seats with a single candidate.

About results

One can compare new 2013 results with results of round ASN 2012 starting from the number of habilitated (absolute and in percentage): Given the small number of candidates a statistics by seat (university or INAF) is not interesting. Anyhow Concerning the separate statistics for sub-sector (SSD) FIS/06 (Earth system and circumterrestrial medium), which uses different reference values for bibliometric indicators, one can make the following comparison: Concerning bibliometric indicators a curiosity about those who re-applied to ASN 2013 after the participation to ASN 2012. Apparently in 11 cases they submitted more papers, in 6 the same number, and 1 submitted less.

Concerning the syntetic scores (G1/G2/G3) assigned by the examination board, as for ASN 2012 this time too candidates which are below all the 3 medians of bibliometric indicators were not evaluated. These are 7 cases for grade 1 and 9 for grade 2.
Two peculiarities are noteworthy. First, one full astronomer is apparently below all medians, likely because he listed only the papers for which he submitted the PDF copy, i.e. much less than his actual publication record. Such misunderstanding affected much more candidates in ASN 2012.
The second curiosity concerns one candidate who resubmitted the same papers (under threshold for grade 1) in ASN 2013, with which he was habilitated to grade 2 in ASN 2012.

I also produced some plots to be compared with the version produced for ASN 2012. Since there are no remarkable differences, I did not produce a PNG preview but supply only links to retrieve the postscript files either fot both ASN or for just ASN 2012 (the same reported above). New plots contain both old as well as new data, with the following modified symbols.

The following plots compare bibliometric indicators: For histograms I produced only those for round 2013 to be compared with the previous ones for ASN 2012. Since they are normalized as fraction of the respective total, dati fron 2013 are more scattered and the vertical scale has been expanded. One can note that a few candidates at the top for some indicators has not been habilitated. They are all outsiders unknown to me. For the more macroscopic case publications reported by ADS are virtually all not as first author and included in large collaborations.  

Final considerations

The number of candidates for the second round ASN 2013 is significantly lower than the peak of the first round. One can perhaps notice a diminished interest by INAF staff.

One could comment that, if habilitations of the first round would have been actually followed by the opening of an adequate number of positions, the decrease might mean that the career advancement mechanism has reached a stable regime.
Otherwise, since habilitations did not translate in actual positions, the interest in applying decreased.

Any other variation looks just physiological.

































































sax.iasf-milano.inaf.it/~lucio/WWW/Opinions/asnastro.html :: original creation 2014 dic 05 18:34:31 CET :: last edit 2014 Dec 05 18:34:31 CET