Hodnocení projektů 7.RP; Praktické zkušenosti z hodnocení projektů

Hodnocení projektů 7.RP; Praktické zkušenosti z hodnocení projektů Seminář MANAGEMENT PROJEKTŮ 7.RP 1. den: Jak úspěšně podat návrh projektu do 7.RP 9. května 2011 Technologické centrum AV ČR RNDr. Zuzana BOUKALOVÁ zboukalova@gmail.com

KDO HODNOTÍ PROJEKTY FP7? Nezávislý expert, který je registrovaný v databázi EK (https://cordis.europa.eu/emmfp7/index.cfm) Jeho zaměření odpovídá volané prioritě Je předběžně poptán REA Obdrží tzv. APPOINTMENT LETTER a INNVITATION z REA pro dané hodnocení Dodrží pravidla (potvrdí své osobní údaje, prohlášení o nezávislosti a mlčenlivosti, vyloučení střetu zájmů).

ČASOVÁ OSA Appointment letter pro potenciálního hodnotitele z REA (Research Executive Agency) VÝZVA Příprava a podání návrhu projektu (EPSS) Uzávěrka Hodnocení návrhu projektu nezávislými hodnotiteli Negociace Podpis Grantové dohody s EK + podpis Konsorciální smlouvy mezi partnery Realizace projektu

EXPERTNÍ HODNOCENÍ: Jednokolové (velmi časté do konce roku 2010) Dvojkolové (hodnocení projektu předchází výběr z návrhů projektů, které jsou pro EK zajímavé; 1 stage: short proposal; 2 stage: full proposal) U jednokolového hodnocení, příp. ve 2. fázi dvojkolového hodnocení: REMOTE hodnocení (ve 2 etapách; 1.etapa: na dálku/ individuální hodnocení, 2. etapa centrálně v Bruselu/ konsensus, panel). CENTRAL EVALUATION : Hodnocení pouze v Bruselu (jednorázové, po dobu 4 5 dní) výhledově končí v roce 2011 a bude nahrazeno výhradně REMOTE přístupem. Odehrává se např. v případě INCO výzev.

KDE PROBÍHÁ HODNOCENÍ V BRUSELU? V COVENT GARDEN KAŽDÝ PROJEKT HODNOTÍ 3 5 EVALUÁTORŮ

JAK POSTUPUJE PROJEKT PO ODEVZDÁNÍ DO VÝZVY: Hodnotitelé

Příklad Úvod k 7.RP, a Návrhy projektů v prioritě: počet ccafinance 30 management KONTROLA FORMÁLNÍ SPRÁVNOSTI Evropská komise (EK) Vyřazeno: cca 5 PRŮBĚH HODNOCENÍ Externí nezávislí hodnotitelé Průběh hodnocení Hodnotitel A Individuální posudek Hodnotitel B Hodnotitel C Individuální posudek Individuální posudek SETKÁNÍ HODNOTITELŮ Hodnotitelé A,B,C (zpravodaj) + moderátor z EK Společný hodnotící posudek Pod prahem: cca 15 PŘEZKOUMÁNÍ PANELEM Evropská komise + vybraní hodnotitelé Evaluation summary report Seznam projektů podle bodů Seznam projektů k financování Vyřazeno: cca 8 DO NEGOCIACE jdou 2 PROJEKTY

KONTROLA FORMÁLNÍ SPRÁVNOSTI Před tím,než začne samostatné hodnocení nezávislými experty, EK zkontroluje, že návrh projektu splňuje podmínky uznatelnosti dané výzvy a typu projektu ( eligibility criteria ): Uzávěrka výzvy (datum a hodina) Typ projektu Úplnost (část A i část B) Partneři (min. počet) Limity pro požadovaný příspěvek ES Další specifika požadovaná ve výzvě. Pokud není splněno, projekt není postoupen k hodnocení nezávislými experty.

Výběr hodnotitelů pro výzvu Z databáze z CORDIS vybere EK vhodné hodnotitelé pro danou výzvu s ohledem na: - kvalifikaci a schopnosti; - rovnováhu mezi soukromou a veřejnou sférou; - rovnost pohlaví; - vhodné geografické rozdělení; -pravidelnou rotaci expertů; -- znalost konkrétní problematiky v případě SICA výzev. HODNOCENÍ - HODNOTITELÉ

EVALUACE Nezávislí experti jsou vždy seznámeni: S výzvou Pravidly hodnocení Specifickými přístupy (požadavky) volané priority; S vyhlášenými sub-prioritami (topics) a finančními možnostmi v rámci výzvy - podle kterých mohou odhadnout počet maximálně financovaných projektů (viz další slide příklad) Manuálem hodnotitele Využíváním databáze EK: RIVET (každý dostane vlastní log-in informace, vše probíhá v maximálním utajení): http://www.ess-fp7.org/ (V případě Marie Curie Actions se hodnotí pomocí webového nástroje EMEX: Expert Management External přes individuální ESAC account: https://webgate.ec.europa.eu/cas/ec/init/passwordresetrequest.do). Proběhne výběr reportérů (kteří jsou zodpovědní za finalizaci Konsensus Reportu, většinou se i podílí na hodnocení projektu jako individuální expert ne vždy!).

PŘÍKLAD HODNOCENÉ VÝZVY (ROK 2009) SPACE (topic 9.3: cross-cutting activities): 9.3.2 International Cooperation collaborative projects SPA.2010.3.2.-01 (EU-Russia Cooperation in GMES); SPA.2010.3.2-02 (Deforestration) SPA.2010.3.2.-03 (EU South Africa Cooperation in GMES) SPA.2010.3.2.-04 (EU-Russia Cooperation for Strengthening Space Foundation 9.3.5 European Space Policy Support SPA.2010.3.5-01 (European Space Policy Studies CA action) 8 MEur 1 MEur

HODNOCENÍ HODNOTÍCÍ KRITÉRIA (V PŘÍPADĚ FULL PROJEKTU) Každý projekt je hodnocen odděleně většinou třemi nezávislými hodnotiteli, podle předem daných kritérií (hodnotící kritéria): 1. 2. 3. Vědeckotechnická kvalita Implementace Dopad (Impact) Každé kritérium 0-5 bodů (score) Obvykle nutno dosáhnout min. 3 body v každém kritériu a min. 10 bodů celkem (threshold) V některých výzvách mohou mít kritéria různou váhu.

HODNOCENÍ HODNOTÍCÍ KRITÉRIA

HODNOCENÍ - PRŮBĚH Většina hodnocení probíhá vzdáleně tj. od hodnotitele z domu či kanceláře (REMOTE), někdy CENTRAL v Bruselu Každý hodnotitel pročte návrh projektu a vyplní vlastní Individual Assessment Report ; pracuje přes RIVET databázi EU Čas, který je věnován jednomu návrhu projektu: cca 2.5 hod!!! Hodnotitelé se poprvé potkají/poznají v Bruselu na consensus meeting, kde se dohodnou na společném výsledku hodnocení (počtu bodů a komentáře) Moderátor: EK Pokud se neshodnou EK povolá 1 nebo 3 nové experty Výsledkem: Consensus report (podepsaný všemi hodnotiteli) Evaluation Summary Report zasílán koordinátorovi Ještě není jasné, které projekty budou financovány

VÝBĚR PROJEKTŮ PRO FINANCOVÁNÍ Panel meeting Consensus report odchází do panelu, kde se setkávají hodnotitelé z celé širší priority nebo tematické oblasti, Experti se snaží hierarchicky srovnat projekty od nejhoršího k nejlepšímu napříč širší tematické oblasti v rámci 1 balíku financí. Projekty, které mají šanci uspět, musí překročit tzv. threshold, neboli práh. Reálnou šanci však mají až projekty nad 12,5 bodů, spíše 13,5 bodů..

VÍCE PROJEKTŮ SE STEJNÝM BODOVÝM HODNOCENÍM (NAPŘ. 13,5 BODŮ): Vedlejší kriteria: Projekt má více bodů za impakt než ostatní V případě že všechny projekty mají stejné body v rámci 3. kriteria (impakt), rozhoduje, který z nich má více bodů za 1. kriterium (vědeckou myšlenku) V projektu jsou zohledněna tzv. gender issues Konsorcium je vyrovnané a obsahuje i SME Projekt dodržuje doporučený stránkový limit V případě, že širší tematická priorita zahrnuje i subpriority orientované na třetí země, tzv. SICA projekt (tedy projekt pro třetí země) vždy přeskočí tzv. ne-sica projekty, orientované pouze na vědu a výzkum v Evropě. Atd

PO PŘEZKOUMÁNÍ PANELEM EK sestaví seznam projektů, které budou financovány (s ohledem na dostupný rozpočet pro výzvu) a reserv list. Oficiální dopis s datem zahájení negociací je zaslán žadatelům, kteří byli úspěšně vybráni k financování (Letter of Invitation to Negotiations).

OPRAVNÉ ŘÍZENÍ Možnost odvolat se proti hodnocení projektu Redress procedure Do 30ti dní od obdržení informačního dopisu s výsledky hodnocení (ESR) NE proti odborné stránce hodnocení a expertíze hodnotitelů Pouze pokud by přezkoumání mohlo vést k financování Pouze koordinátor Prostřednictvím šablony: http://cordis.europa.eu/fp7/redress_en EK svolá speciální komisi, která může rozhodnout o přehodnocení projektu (celého či pouze jeho části) koordinátor obdrží informace do 2 týdnů Více informací: RTD-FP7-REDRESS@ec.europa.eu

RADY NA ZÁVĚR Připravte návrh v souladu se zadáním výzvy a jejími cíly Sestavte kompetentní a komplementární konsorcium Připravte dobrý management plan Nezapomínejte na evropskou přidanou hodnotu Nezapomínejte na vědeckou excelenci projektu Čemu věnovat pozornost Respektujte omezené časové možnosti hodnotitelů Abstrakt Čeho se projekt týká? Konkrétní výsledky a inovativní nápady? Seznam partnerů Kdo je do projektu zahrnut? Několik prvních stránek návrhu Porozumění konceptu Rozpočet Dostatečné zdroje? Popis zdrojů! Dodržujte požadovanou strukturu Využívejte obrázky a tabulky Dobrý návrh projektu je stručný, jasný a výstižný!!!!!!

RADY PRO NADCHÁZEJÍCÍ VÝZVU (WP 2012): V této výzvě se očekává výrazná převaha dvoukolového hodnocení projektů (two-stagecall) Důraz na additional eligibility criteria specifikovaná v rámci jednotlivých sub-priorit (např.: horní hranice EU příspěvku, EU příspěvek jde z 15 /30 a více % do SMEs pro SMEs orientované výzvy, limit počtu stránek nadpočetné stránky budou skartovány, atd.)

DVOUKOLOVÉ HODNOCENÍ Eligibility criteria se budou posuzovat u obou kol hodnocení; 1.kolo: part A (eligibility vzhledem k limitům rozpočtu, daným výzvou), part B (eligibility vzhledem k počtu partnerů projektu). 2.kolo: pouze část A (pro posouzení eligibility projektu). Individuální hodnocení projektů bude VŽDY probíhat na dálku (remotely). Projekty úspěšné v 1.kole: koordinátor obdrží pozvání k podání full projektu do 2.kola Očekávaná data podání projektů (odhad): 1.kolo: Říjen 2011 (hodnocení ukončeno do konce Prosince 2011); 2.kolo: Březen 2012 (hodnocení konec Března, Duben 2012). Negociace vítězných projektů by měly být zahájeny v Červnu 2012.

PRVNÍ KOLO: Kolo 1 DRUHÉ KOLO: Minimální threshold Kolo 2 Minimální threshold VaV kvalita (S/T quality) 4/5 VaV kvalita (S/T quality) 4/5 Dopad (Impact) 3/5 Implementace (Implementation) 3/5 Dopad (Impact) 3/5 Celkový práh (Overall threshold) 10/15 Celkový práh (Overall threshold) 8/10 HODNOCENÍ PŘI TWO-STAGE-CALLS

INDIVIDUÁLNÍ HODNOCENÍ PROJEKTŮ PROBĚHNE VÝHRADNĚ NA DÁLKU Minimální threshold VaV kvalita (S/T quality) 3/5 Implementace (Implementation) 3/5 Dopad (Impact) 3/5 Celkový práh (Overall threshold) 10/15 OČEKÁVANÝ ČASOVÝ PLÁN: Uzávěrka nové výzvy začátkem Března 2012 Hodnocení bude probíhat koncem Března začátkem Dubna 2012 HODNOCENÍ U JEDNOKOLOVÝCH PODÁNÍ PROJEKTŮ

HODNĚ ŠTĚSTÍ!!! Děkuji za pozornost