Le linee guida per la valutazione di leader

Le linee guida per la valutazione di leader a livello locale Roma 24 ottobre 2017 A cura di Carlo Ricci

Valutazione del CLLD nel 14 -20: due livelli in(ter)dipendenti? Livello Programma di Sviluppo Rurale Locale SSL Oggetto Misura 19 Strategia di Sviluppo Locale Responsabile Autorità di Gestione PSR GAL (tramite personale coinvolto nell’attuazione e/o valutatore indipendente incaricato) Focus della valutazione (elementi obbligatori) Valutazione della strategia di sviluppo locale (cosa include? ) (tramite il valutatore indipendente incaricato) Valutazione di efficacia ed efficienza misura 19 e delle sue contribuzioni primarie e secondarie alle Focus Area e ad Europa 2020

Riferimenti legali della valutazione delle SSL: Reg. 1303 Art. 34 (paragrafo 3, lettera g) Compiti dei Gruppi di Azione Locale CLLD: Verificare l'attuazione della strategia di sviluppo locale di tipo partecipativo e delle operazioni finanziate e condurre attività di valutazione specifiche legate a tale strategia Reg. 1303 Art. 35 Sostegno dei fondi SIE: I costi di esercizio connessi alla gestione dell'attuazione della SSL di tipo partecipativo consistenti in costi operativi, costi per il personale, costi di formazione, costi relativi alle pubbliche relazioni, costi finanziari nonché costi connessi alla sorveglianza e alla valutazione di detta strategia di cui all'articolo 34, paragrafo 3, lettera g);

Valutazione delle Strategie di Sviluppo Locale: Quattro questioni 1. Valutazione o autovalutazione? 2. Cosa si valuta (ovvero qual è l’oggetto della valutazione)? 3. Quale processo devono mettere in campo i GAL/FLAG e che tipo di supporto e orientamento sarebbe utile fornire? 4. È opportuno valutare il valore aggiunto e cosa significa?

Valutazione indipendente o autovalutazione? Reg. 1303 Art. 54 paragrafo 3: «Le valutazioni sono effettuate da esperti interni o esterni funzionalmente indipendenti dalle autorità responsabili dell'attuazione del programma. » L'obbligo giuridico di valutazioni da parte di esperti funzionalmente indipendenti di cui all'articolo 54, paragrafo 3, si applica ai Programmi Operativi e ai Programmi di Sviluppo Rurale. Esso non si riferisce alle "strategie di sviluppo locale CLLD".

Oggetto della valutazione delle SSL: Cosa si valuta? 1. La logica di intervento della Strategia di Sviluppo Locale 2 3 4 L’efficacia e l’efficienza delle operazioni realizzate ed il loro contributo al raggiungimento dei risultati (e degli impatti? ) previsti dalla strategia Obbligatorio Il sistema di delivery della Strategia L’attuazione del metodo CLLD (applicazione combinata dei sette principi). 5 Il valore aggiunto prodotto 6 I fattori di successo e di insuccesso Rilevanza rispetto alle esigenze ed al potenziale locale e coerenza con le politiche di riferimento. In che misura e a quale costo gli obiettivi sono stati raggiunti? La gestione delle risorse (umane, finanziarie e tecniche) e dei rapporti con fornitori e beneficiari Le modalità con cui le 7 caratteristiche specifiche dell’ approccio CLLD sono state applicate Esternalità positive e benefici ottenuti grazie al metodo CLLD Influenza di fattori interni ed esterni al progetto sui risultati

La gestione processo: 1 (Revisione del) Piano di Valutazione Formalizzazione di un indirizzo politico Approvazione di Documento di indirizzo che individua obiettivi e scopo, responsabilità, modalità di condivisione e guida della valutazione. Piano della valutazione Completa l’indirizzo con il quadro di domanda valutativa e tutti gli elementi del mandato valutativo. Il Piano di Valutazione viene approvato dal C. di A. Tempi Requisiti minimi ed eventuali elementi comuni Orientamento Training per capacity building Linee guida per pianificare la valutazione Supporto

Gli obiettivi spiegano perché bisogna effettuare la valutazione ovvero a chi dovrà servire per fare cosa (quali sono le intenzioni di utilizzazione dei risultati). A chi dovrà servire? Per fare cosa? A. Di G. ed i principali interlocutori locali • Verificare i risultati raggiunti • Comprendere come ed in quale misura l’azione del CLLD è efficace rispetto ad altri strumenti Amministratori e direzione • Dare conto di come sono state utilizzate le risorse GAL • Capire la percezione dei beneficiari • Capire cosa funziona bene e cosa no GAL e A. di. G. • Rispondere ad un adempimento obbligatorio?

Definire lo scopo della valutazione significa rispondere alla domanda: cosa voglio valutare? Per specificare lo scopo bisogna: A) Definire l’ambito della valutazione che può essere • settoriale (quale target o settore specifico) • geografico • istituzionale (relativo al contesto di programmazione) • temporale (intervallo temporale considerato) Nella pratica l’ambito si definisce esprimendo una o più domande valutative. Ad esempio: «In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove? »

B. Circoscrivendo gli aspetti su cui l’analisi valutativa deve concentrarsi per rispondere a ciascuna domanda attraverso l’individuazione di specifici criteri di giudizio. Questi, sostanzialmente, definiscono le questioni valutative «chiave» che focalizzano il successo degli interventi. Domanda valutativa In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove? Criteri di giudizio • Le imprese hanno diversificato la propria attività e sviluppato funzioni «a valle» • Sono state create nuove piccole imprese legate alle produzioni tipiche dell’area • La reputazione delle produzioni locali è aumentata

La gestione processo al livello di GAL: Come è articolato un piano di valutazione? 1. Obiettivi e scopo 2. Completamento del quadro di domanda valutativa Domanda valutativa In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove? Criteri di giudizio • Le imprese hanno diversificato la propria attività e sviluppato funzioni «a valle» • Sono state create nuove piccole imprese legate alle produzioni tipiche dell’area • La reputazione delle produzioni locali è aumentata Indicatori di realizzazione Nr. di imprese finanziate Nr. di investimenti «a valle» Nr. di prog. per nuove imprese Nr. di persone raggiunte Indicatori di risultato Imprese rafforzate Imprese create Posti di lavoro (eq. TP) creati Incremento del tasso di notorietà

La gestione processo al livello di GAL: Come è articolato un piano di valutazione? 1. Modalità di gestione di valutazione e monitoraggio 2. Obiettivi e scopo 3. Completamento del quadro di domanda valutativa 4. Attività di valutazione previste 5. Informazioni e dati 6. Tempistica 7. Risorse (umane ed economiche) e capacità 8. Comunicazione

Scelta del valutatore Approvazione di un Metodo di individuazione/selezione ed un Incarico Formale a personale già coinvolto nel PSL e/o indipendente. Progettazione della valutazione Individuazione di metodi e tecniche da applicare e costruzione dei relativi strumenti per la raccolta di informazioni. Progettazione del data management Costruzione del sistema di raccolta e gestione di dati di monitoraggio e informazioni statistiche e sull'attuazione per la produzione di rapporti di avanzamento e analisi valutative Collegamento a basi di dati Requisiti minimi del valutatore e del progetto Tempistica e caratteristiche dei report Modelli di strumenti Modelli di operational database Set indicatori Orientamento Supporto

Riflessione sul processo al livello di GAL: Quali fattori critici? o Flussi di dati: è indispensabile disporre dei dati sull’attuazione delle operazioni e molto utile individuare indicatori baseline o Coordinamento: ogni gruppo è autonomo, ma è un peccato perdere l’occasione di avere una base minima di informazioni aggregabili o Tempistica: rischio di «arrangiare» una valutazione finale all’ultimo minuto. o Capacity building: la capacità tecnica di gestione della valutazione e la «motivazione» del mandato politico

Quadro generale della valutazione di una SSL Inputs Output Investimenti previsti per le diverse tipologie di operazione Regole di ammissibilità della spesa ecc. Finanziari Tecnici Realizzazioni fisiche materiali ed immateriali Circa 75% Risultati Effetti diretti generati dagli investimenti Fisici Costi e modalità di realizzazione degli investimenti locali Regole e orient. su 7 car. specifiche del CLLD Tecnici Costi di gestione ed animazione Finanziari Circa 25% Applicazione delle 7 car. specifiche tramite gest. e animazione Effetti generati dal metodo CLLD: risultati, capitale sociale e governance Comportament Costi e modalità di applicazione dell’approccio CLLD

Valutare il valore aggiunto del CLLD: Perché? Rapporto speciale n. 5/2010 della Corte dei Conti Europea o I GAL hanno implementato l’approccio Leader in modi che limitano il potenziale valore aggiunto in termini di caratteristiche LEADER; o La Commissione e gli Stati Membri non sono stati sufficientemente esigenti e condividono con I GAL la responsabilità di aver limitato il potenziale valore aggiunto; o La Commissione e gli Stati Membri non possono dimostrare il valore aggiunto conseguito dall’implementazione di LEADER e non hanno valutato I costi ed i rischi aggiuntivi legati all’adozione dell’approccio

Valutare il valore aggiunto di LEADER: Cosa si valuta?

Valutare il valore aggiunto di LEADER: Tre tipologie di effetti?

GRAZIE PER L’ATTENZIONE! ca. ricci@tin. it A cura di Carlo Ricci