Vrednovanje i prosudba znanstvenoistraivakog rada u kontekstu otvorene
Vrednovanje i prosudba znanstveno-istraživačkog rada u kontekstu otvorene znanosti Jadranka Stojanovski Sveučilište u Zadru / Institut Ruđer Bošković Međunarodni znanstveno-stručni skup ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI Sveučilište u Mostaru, 7. veljače 2020.
Bio § diplomirala fiziku na Prirodoslovno-matematičkom fakultetu Sveučilišta u Zagrebu § magistrirala informacijske sustave na Sveučilištu u Zagrebu § doktorirala informacijske znanosti na Sveučilištu u Zagrebu § § voditeljica Knjižnice Instituta Ruđer Bošković do 2009. od 2009. Odjel za informacijske znanosti Sveučilišta u Zadru i Institut Ruđer Bošković Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
§ Nacionalna kontakt osoba RH za otvoreni pristup znanstvenim informacijama pri Europskoj komisiji § NOAD za Hrvatsku u sklopu Open. AIRE i NI 4 OS projekta, OPERAS § New Frontiers of Peer Review - PEERE § The “European Network for Research Evaluation in the Social Sciences and the Humanities” – ENRESSH § članica SPARC Europe Board of Directors i European Association of Science Editors (EASE) Council § znanstveni interesi: znanstvena komunikacija i znanstveno izdavaštvo, otvorena znanost (otvoreni pristup), bibliometrija, rudarenje podataka i analiza teksta, informacijski sustavi Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Odjel za informacijske znanosti Sveučilišta u Zadru § iz. unizd. hr § preddiplomski, doktorski § Uvod u znanstveno-istraživački rad, Pretraživanje informacija, Modeliranje i izgradnja digitalnih zbirki i usluga, Znanstveno komuniciranje i vrednovanje znanosti, Digitalna multimedija, Metodologija društveno-humanističkih znanosti, Upravljanje dokumentima i zapisima, (Uvod u informacijske tehnologije, Oblikovanje baza podataka) § More. Press § PUBMET – International Conference on Scholarly Publishing in the Context of Open Science § PUBMET 2020 Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
IRB Centar za znanstvene informacije Implementacija, razvoj i održavanje informacijskih sustava § Sustav znanstvenih informacija – SZI (1994) § Centar za online baze podataka – http: //www. online-baze. hr (1995) § Hrvatska znanstvena bibliografija CROSBI - http: //bib. irb. hr (1997) § Tko je tko u znanosti u Hrvatskoj - http: //tkojetko. irb. hr (2001) § Repozitorij hrvatskih časopisa u otvorenom pristupu HRČAK - http: //hrcak. srce. hr (2006) § Hrvatski znanstveni portal - http: //www. znanstvenici. hr (2006) § repozitorij znanstveno-istraživačke opreme ŠESTAR - http: //sestar. irb. hr (2007) § mreža institucijskih repozitorija DABAR – http: //dabar. srce. hr (2015) Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Znanost K A P U T S O skup znanja o stvarnosti do kojega se došlo primjenom objektivnih istraživačkih metoda T P I S K O Tmetodama (npr. S JIznanstvenim § znanje temeljeno na podacima prikupljenim V J S I Z preispitivanju O L eksperimentima), višestruko podvrgnuto i pokušajima osporavanja V N V I E NO J L C RE PO REB T § cilj: proširiti i produbiti poznavanje prirode i društva, mijenjati uvjete rada i života O UP § znanost je aktivni proces promatranja i istraživanja § Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Kriza § komercijalizacija znanstvenog izdavaštva § kriza recenzijskog postupka § nedostupnost objavljenih radova § nedostupnost istraživačkih podataka § sve više aktualna etička pitanja § količina publikacija raste § znanstvena publicistika je papirocentrična § i dr. Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Prije: Otvoreni pristup (OA) § fokus na znanstvenim publikacijama § „zlatni”, „zeleni”…i „platinasti” put OA § od devedesetih do danas § učinci? § Studija Max Planck Society iz 2017. g. procijenila je udio članaka u „zlatnom” pristupu na oko 13% ukupnog broja istraživačkih radova § neke studije procjenjuju udio radova u otvorenom pristupu na 30% ili čak 40% Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
ponoviti isti eksperiment isti lab replicirati isti eksperiment drugi lab je a v o d a r h i n e j l v a j ! b o o n l i % b i test c 85 u d o r p e r isti eksperiment ne drugi eksperiment druge postavke nešto od istog Nature 533, 452– 454 (26 May 2016) doi: 10. 1038/533452 a istraživanje u kojem je sudjelovalo 1576 znanstvenika, više „reuse” reproducirati od 70% nije uspjelo reproducirati tuđe rezultate, više od Drummond C Replicability is not Reproducibility: Nor is it Good Science, online 50% nije Research uspjelo reproducirati vlastite rezultate Peng RD, Reproducible in Computational Science 2 Dec 2011: 1226 -1227.
Danas: Otvorena znanost (OS) § znanstvena komunikacija nije samo završno izvještavanje o rezultatima istraživanja u tekstualnom obliku, popraćeno (nejasnim) grafikonima i tablicama… § …isporučenom kao PDF § znanstvena komunikacija odnosi se na komuniciranje svih segmenata/faza znanstveno istraživačkog rada § važnost istraživačkih podataka, kôda, metoda, procedura… Provođenje znanosti na način da drugi mogu surađivati i pridonijeti, gdje su istraživački podaci, laboratorijske bilješke i sami istraživački procesi slobodno dostupni, s uvjetima koji dopuštaju ponovno korištenje, ponovnu distribuciju i reprodukciju istraživanja. FOSTER (https: //www. fosteropenscience. eu/) Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Prednosti otvorene znanosti § unaprjeđivanje učinkovitosti istraživanja - minimalizacija dupliranja § ubrzavanje tempa novih otkrića § omogućavanje i poticanje interdisciplinarnih istraživanja § promoviranje znanstvene strogosti i reproducibilnosti § unaprjeđivanje kvalitete § poboljšanje suradnje § promocija znanstvenih aktivnosti i poticanje „znanstvene pismenosti” javnosti § povećanje ekonomskog i društvenog utjecaja znanstvenih istraživanja § osiguravanje novih mogućnosti za inovacije Leslie Chan, Open. AIRE Meeting, Athens, 2014 Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Europska komisija i otvorena znanost § Europske investicije u istraživanja i razvoj nisu dovoljno iskorištene § napori uloženi u istraživanja i razvoj su fragmentirani § istraživački rezultati ne dopiru dovoljno učinkovito do tržišta „…I see three strategic priorities: Open Innovation, Open Science, and Openness to the World” Carlos Moedas § Bolja znanost: temeljena na prethodnim rezultatima § Brži razvoj: gospodarstvo bolje iskorištavanje rezultata istraživanja, a proizvodi dolaze brže na tržište § Veću učinkovitost: osnažuje se suradnja, izbjegava dupliciranje § Veću transparentnost: građani i društvo uključuju se u istraživačke procese Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Akademske ustanove ne prepoznaju važnost OS Which types of academic work matter most for research careers? Source: EUA, 2019 Open Science survey of Universities Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
OS practice and research careers Metrics measuring research output based on number of publications and citations Izvor: EUA, 2019 Open Science survey of Universities Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Amsterdam Call for Action § 2 cilja, 12 akcija 1. Ukloniti barijere otvorenoj znanosti 1. promjena sustava prosudbi i nagrađivanja 2. rudarenje teksta i podataka 3. IPR regulativa 4. transparentnost troškova i stanja Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
1. Promijeniti sustave prosudbi, evaluacije i sustav nagrađivanja u znanosti § otvorena znanost predstavlja priliku za radikalne promjene u načinu na koji ocjenjujemo, nagrađujemo i potičemo znanost § cilj otvorene znanosti je ubrzavanje znanstvenog napretka i poboljšavanje utjecaja znanosti za dobrobit društva § sadašnji sustavi vrednovanja uglavnom se oslanjaju na publikacije – broj publikacija (i/ili citata) i prestiž časopisa § takav naglasak ne odgovara cilju postizanja društvenog utjecaja (ne samo znanstvenog) § fokus na utrku u kojoj se znanstvenici bore za što veći broj radova u prestižnim časopisima ili knjigama vodećih izdavačkih kuća – na štetu inovacija i razmjene znanja Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Potreba za novim sustavima napredovanja i nagrađivanja § Potencijal otvorene znanosti može se iskoristiti samo ako istraživački proces u potpunosti prizna praksu otvorene znanosti te daje poticaje i nagrade istraživačima i ustanovama, među ostalim: § stavljanje znanstvene kvalitete iznad količine; § osiguravanje ponovljivosti istraživanja, osobito putem metodološke rigoroznosti; § stvaranje FAIR podataka; § čuvanje podataka; § dijeljenje podatke i rezultate; § ponovno korištenje podataka; § rad s dionicima među različitim disciplinama i sektorima; § interakcija s dionicima u društvu kako bi se bolje definirala istraživačka pitanja i zajednički stvarali rezultati. § Posebno je važna snažna povezanost obrazovanja i znanosti Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Problemi koje treba riješiti § Razni izvještaji stručnih skupina i dokumenti o stajalištima dionika utvrdili su sljedeće važne točke: § postupci ocjenjivanja i sustavi napredovanja trebali bi dati dodatne „bodove” pojedincima, skupinama i projektima, koji prakticiraju otvorenu znanost; § gledaju se svi koraci vrednovanja u svim fazama karijere: od obrane doktorske disertacije, zapošljavanja, promocije, vrednovanja prijedloga projekta, sustava raspodjele sredstava, do nagrada i priznanja itd. § u postupcima vrednovanja potrebno je staviti veći naglasak na kvalitetu, uključujući reproducibilnost rezultata. § čimbenici odjeka časopisa (JIF) ne bi se trebali koristiti kao proxy za kvalitetu - potrebno je razviti i upotrebljavati metričke pokazatelje na razini članka i utjecaja na društvo, a potrebno je promicati odgovornu upotrebu metričkih pokazatelja § potrebno je koristiti primjere dobrih praksi Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Primjeri dobrih praksi - Nizozemska § The Association of Universities in the Netherlands (VSNU), The Netherlands Federation of University Medical Centres (NFU), The Royal Netherlands Academy of Arts and Sciences (KNAW), The Netherlands Organisation for Scientific Research (NWO) and the Netherlands Organisation for Health Research and Development (Zon. Mw) § Enables the diversification and vitalisation of career paths, thereby promoting excellence in each of the key areas; § Acknowledges the independence and individual qualities and ambitions of academics as well as recognising team performances; § Emphasises quality of work over quantitative results (such as number of publications); § Encourages all aspects of open science; and § Encourages high-quality academic leadership. ” Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Primjeri dobrih praksi - Belgija § Ghent University (Vision statement for evaluating research at Ghent University, 2019) § “The choice of an appropriate evaluation method for research is in line with the objective of the evaluation. The evaluation takes into account the intended impact of the research; strictly academic, economic, societal, or a combination of these. § § § The evaluation takes into account the diversity between disciplines. For each chosen evaluation method, the simplicity of the procedure is weighed up against the complexity of the research. § The evaluation criteria are drawn up and communicated to all stakeholders in advance. § There are sufficient experts on the evaluation committee who are in a position to adequately assess the quality of the research. § The above principles are implemented by means of a smart choice of evaluation indicators and by adopting a holistic approach to peer review. ” Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Primjeri dobrih praksi – University of St Andrews § Responsible metrics at the University of St Andrews § "It is essential that the way we use metrics in any assessment or process is clear, fair and transparent to all colleagues. Signing up to DORA is a positive step in the right direction and will serve as a framework to ensure we employ high standards and best practice in this important area. " - Professor Andrew Smith, Director of Research, School of Chemistry Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Primjeri dobrih praksi – Mc. Gill University § Open Science, to accelerate discovery and deliver cures – The Neuro (Montreal Neurological Institute-Hospital), Mc. Gill University § “Share scientific data and resources: The Neuro researchers will share all positive and negative numerical data, models used, data sources, reagents, algorithms, software and other scientific resources publicly available no later than the publication date of the first article that relies on this data or resource. § Open external research partnerships: All data and scientific resources generated through research partnerships – whether with commercial, philanthropic, or public sectors – are to be released on the same basis as set out in Principle 1. Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Primjeri dobrih praksi – Mc. Gill University § Share research participants' contributions and protect their rights: The Neuro's Open Science Clinical, Biologic, Imaging and Genetic Repository (C-BIG Repository) will maximize the long-term value of contributions made by research participants and the scientific resources created by The Neuro researchers and their collaborators. § Do not file patents: Subject to patient confidentiality and informed consent given, neither The Neuro nor its researchers in their capacity as employees or consultants of the Mc. Gill-Neuro unit will obtain patent protection or assert data protection rights in respect of any of their research. § Respect academic autonomy: The Neuro supports the autonomy of its stakeholders, including but not limited to researchers, staff, trainees and patients, through recognizing their right to decline to participate in research and associated activities under an Open Science framework. However, The Neuro will not support activities that compromise the previously outlined OS principles. ” Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Kako krenuti naprijed? § potpuna provedba prakse otvorene znanosti zahtijeva: § angažman svih dionika: istraživača, istraživačkih organizacija, financijera, tvoraca politika, strukovnih društava, građana itd. § na svim razinama: regionalnoj, nacionalnoj, europskoj i globalnoj § Linije djelovanja: § bliska suradnja sa svim dionicima kako bi se olakšale promjene u sustavu § osigurati namjenska sredstva iz Okvirnog programa Obzor Europa i drugih programa EU, olakšati promjenu sustava, izgraditi potrebnu infrastrukturu i dopuniti mjere koje poduzimaju države članice Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Suradnjom prema promjenama - Europa § ERAC (European Research Area and Innovation Committee) § mišljenje o budućnosti ERA: "Razvoj europskog okvira za vrednovanje karijere i napredovanje u karijeri za istraživače (. . . ) u skladu s načelima otvorene znanosti i otvorenih inovacija" § Stalna radna skupina (SWG) za otvorenu znanost i inovacije (OSI) pokrenula je tim za nagrade, poticaje i obučavanje kako bi stvorila mišljenje za ERAC. § Mreža Koordinatora za otvorenu znanost (NOSC) i Platforme za otvorenu znanstvenu politiku (OSPP) § Sveučilišta § stalni dijalog među članovima EUA, poticaj ankete iz 2019. § studija u 2020. koju će financirati Komisija za razvoj vizije modernizacije sveučilišta, uključujući prakse otvorene znanosti Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Poticaji putem programa Obzor Europa § Ojačati mandat za otvoreni pristup publikacijama i podacima (npr. putem izdavačke platforme Open Research Europe) § Obveze upravljanja istraživačkim podacima u skladu s FAIR načelima i promicanje dugoročnog očuvanja § Razvijati europsku istraživačku infrastrukturu i EOSC § Poticati transdisciplinarne i međusektorske pristupe koji uključuju organizacije civilnog društva, građane i krajnje korisnike § Poticati znanost za javnost i inovacije vođene potrebama korisnika § Promicati inovativnu i učinkovitu dvosmjernu znanstvenu komunikaciju Modelom sporazuma o dodjeli bespovratnih sredstava, evaluacijom prijedloga, financiranjem infrastrukture, širokim pojmom čestitosti, recenzijama projekata, . . . Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
§ „Otvorena znanost mijenja svaki aspekt znanstvene metode kako bi postala otvorenija, inkluzivnija i interdisciplinarna. . . Osiguravanje da Europa bude na čelu Otvorene znanosti znači promoviranje otvorenog pristupa znanstvenim podacima i publikacijama uz najviše standarde znanstvene čestitosti. ” Carlos Moedas, former Commissioner for Research, Science and Innovation Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
jadranka. stojanovski@irb. hr Jadranka Stojanovski - ZNANOST, ZNANSTVENA KOMUNIKACIJA I ČASOPISI, Mostar 2020
- Slides: 30