Hodnocení ITN projektů Jak projít bruselskou mašinerií Informace jsou základem všeho živého Věda je cestou k jejich poznání
PDQM 2012 Zkvalitňování práce s informacemi Spolupráce v IT projektech Vzdělávání procesů, Řízení organizací Správa IT Řízení projektů, kvalita Analýza http://www.pdqm.cz Absolvent českého vzdělávacího systému Činnosti PDQM vzdělávání, poradenství Spolupráce s VŠ Posuzování a pomoc s projekty financovanými z fondů EU FP7 People ICT v podnicích (Czechinvest / MPO) ICT a strategické služby (Czechinvest / MPO)
Cvičení Co má největší vliv na celkové hodnocení projektu v programech FP7?
Formální správnost Počet stran Celek i jednotlivé oddíly nesmí přesáhnout limit Formálně korektní popis Nepodceňujte žádný z hodnocených bodů
Criterion 1. S&T QUALITY - S&T objectives of the research programme, including in terms of inter/multi-disciplinary, intersectorial and/or newly emerging supradisciplinary fields. - Scientific quality of the research programme. - Appropriateness of research methodology and approach. - Originality and innovative aspect of the research programme. Knowledge of the state-of-the-art. Where appropriate, Jak plans na to for exploitation Časté of results. chyby - Contribution of the private sector and, where Kombinujte relevant, různé other obory socioeconomic Malá výměna actors mezi in pracovišti the research programme. Ukažte, že váš přístup je zcela nový Doktorandi se vzdělávají pouze v tom Odkazujte na publikace oboru, který dělá pracoviště, na ne starší než 2 roky, kterém působí alespoň některé z posledního Soukromý sektor ne nepodílí roku dostatečně na vzdělávání Alespoň třetinu vzdělávání i vědy ze soukromého sektoru
Criterion 2. TRAINING - Quality of the training programme. Consistency with the research programme. Contribution and relevance to the training programme of the private sector and, where appropriate, of other socio-economic actors. Transferable skills offered: entrepreneurship, management, Jak to communication, management of IPR, ethics, grant writing, take up and exploitation of results, research policy, etc*. Špičkové vzdělávání v oboru výzkumu - Importance Časté and chyby timeliness of the training needs semináře (e.g. multidisciplinary, s praxí, intersectoral and newly emerging supra-disciplinary pobyty fields). v soukromém sektoru Malá výměna mezi pracovišti - Appropriateness of the size of the requested training odborníky programme z praxe Doktorandi se vzdělávají pouze v tom with respect to the capacity of the host. Vzdělávání ve všech oborech, kterých oboru, který dělá pracoviště, na - Meaningful exposure of each researcher se to výzkum another týká kterém působí sector, in particular through secondments. komunikaci mezi týmy všech Soukromý sektor ne nepodílí - a) For multi-site proposals: Adequate combination partnerů of local projektu dostatečně na vzdělávání specialist training with network-wide training activities. Aktivní spolupráci účastníků Nedostatečně podrobný popis - b) For mono-site proposals: Adequate exploitation zajistěte praxi vzdělávání of the international network of the participants, including the private snažte sector, se for blížit the v délce training praxe programme. hornímu limitu výzvy Soft-skills
Criterion 3. IMPLEMENTATION - Capacities (expertise / human resources/ facilities / infrastructures/private sector involvement) to achieve the research training programme and access of fellows to these resources. Adequacy of task distribution and schedule. - Adequate exploitation of complementarities and synergies among partners in terms of research and training, including Jak well targeted na to secondments to the private sector and to the other socio-economic actors where relevant. Představte dostatečně kapacitu té - Private sector involvement at the highest části possible instituce, level která appropriate se na projektu to the research topic, and sufficient evidence of podílí commitment. - How essential Časté is chyby non-icpc Third Country funding, Ukažte synergii if any, a to schopnost the objectives of the research training programme. spolupráce Chybějící nebo nejasné odpovědnosti - Networking and dissemination of best practice Soustřeďte among se na partners. networking Clarity Organizace nejsou představeny of the plan for organizing training events (workshops, spolupráci v rámci limitu stránek conferences, training courses). Nastavte přiměřený management Nekonzistentní popis - Appropriateness of the plans for the overall management Operativní řízení of the training programme (demarcation of responsibilities, Strategie rules (individuální for decision plány) making, composition of supervisory board including Conflict involvement resolution of the private sector); also working conditions, transparency Jednoznačné of recruitment kompetence a process and career development*. odpovědnosti
Criterion 4. IMPACT - Contribution of the proposed training programme to* structure training at doctoral level with the acquisition of key skills needed in both the public and private sectors. Improve career prospects and employability of researchers, including ERs where appropriate; Jak na to stimulate creativity and entrepreneurial mindset of researchers at Prokažte, že pro partnery doctoral level. Časté chyby (i ty z businessu) je projekt dlouhodobě užitečný - Contribution of the training programme to the policy objective of Obecné proklamace, nekonkrétní Vytvořte nové kurzy nebo spolupráci, structuring the initial research training capacity at the European level přísliby která umožní využít vzdělávacích (through establishing longer term collaborations and /or lasting structured Nejasná vazba na další výzkum a modulů i po projektu (např. elearning) training programmes between the partners' organisations). vzdělávání Organizujte aktivity, které výsledky - The contribution of the training programme towards the policy objective Chybějící vazba na business publikují i mimo partnery of enhancing public-private sector collaborations in terms of research Nejasné využití vzdělání doktorandů články na renomované training. v další praxi mimo pracoviště partnerů konference - Where appropriate, mutual recognition by all partners of the training Televizní pořad acquired, including training periods in the private sector*. Kvalitní publikace na webu (ne - Impact of the proposed outreach activities*. pouze projektovém)
Otázka Jaké znalosti oboru mají hodnotitelé?
Takto tomu rozumí Špatná struktura Příliš detailní Nedává konkrétní odpovědi
Kdo posuzuje Lidé Lidé s mnohaletou praxí univerzitního prostředí Aktivní profesoři Asistenti Lidé v důchodu Lidé s minimální vědeckou zkušeností po dokončení PhD odešli do businessu Praktické důsledky Přístup k práci Nezabíhat do podrobností Snaží Poskytnout se porozumět relevantní smyslu doklady projektu Velmi o často state-of-the-art jsou z jiného postavené oboruna referencích, ne ukázání složitosti problému Nesnažit se opít rohlíkem Představit výzkum v kontextu oboru
Jak probíhá hodnocení Přidělení projektů hodnotitelům (1 projekt 3 hodnotitelé) Každý hodnotitel vypracuje vlastní posudek 1 hodnotitel reportér konsoliduje Proběhne konsenzuální debata Reportér vypracuje společné hodnocení, ostatní validují Hodnotící stupnice 0- The proposal fails to address the criterion under examination or cannot be judged due to missing or incomplete information. 1 Poor. The criterion is addressed in an inadequate manner, or there are serious inherent weaknesses. 2 Fair. While the proposal broadly addresses the criterion, there are significant weaknesses. 3 Good. The proposal addresses the criterion well, although improvements would be necessary. 4 Very good. The proposal addresses the criterion very well, although certain improvements are still possible. 5 Excellent. The proposal successfully addresses all relevant aspects of the criterion in question. Any shortcomings are minor. Pomocníci vedení dohlížejí na korektnost hodnocení Úspěšné projekty mají hodnocení větší 4,5 ve všech kritériích
Hlavní důsledky postupu hodnocení Není prostor pro korupci Závěrečný posudek je důkladně kontrolován Pomocníci vedení dohlížejí na nenapadnutelnost posudku Používají se obecné formulace Posudek poskytuje jen velmi obecnou zpětnou vazbu Stačí, aby jednoho hodnotitele projekt informacemi neuspokojil a má minimální šanci uspět Dbá se víc na formální náležitosti než na skutečnou kvalitu vědy a vzdělávání ale: projektů je takový převis, že ty podpořené jsou kvalitní i po odborné stránek Opravdu výjimečný strange projekt bude pravděpodobně nepochopen a nepřijat
Cílová rovinka Děkuji za pozornost, Štěpán P. Nadrchal nadrchal <at> pdqm.cz http://www.pdqm.cz