Ewaluacja 2021 Kryterium III Opis wpywu dziaalnoci naukowej

Ewaluacja 2021 Kryterium III – Opis wpływu działalności naukowej na funkcjonowanie społeczeństwa i gospodarki Opracowano na podstawie: Wojciech Majkowski; „Opis wpływu działalności naukowej na funkcjonowanie społeczeństwa i gospodarki. Kryterium III ewaluacji działalności naukowej”, Centrum Kształcenia IDEA, Warszawa, 2020

Schemat postępowania przy opracowaniu opisu wpływu 1. Zdefiniować beneficjenta (interesariusza, użytkownika końcowego). Może to być instytucja, organizacja, społeczeństwo, jednostka. Określając beneficjenta posługiwać się Polską Klasyfikacją Działalności oraz Klasyfikacją zawodów i specjalności na potrzeby rynku pracy 2. Określić ustalenie naukowe, które jest podstawą opisywanego wpływu, posłużyć się klasyfikacją wyników B+R, 3. Zdefiniować na czym polega wpływ, określić formy wpływu i sfery (typy) oddziaływania ustalenia naukowego, 4. Określić źródła potwierdzające wpływ. Przykład: publikacja – ustalenie naukowe w tej publikacji (np. nowa metoda obliczeniowa) – następna publikacja na ten temat, której współautorem jest przedstawiciel beneficjenta – nagroda dla zespołu za ustalenie naukowe – metryki bibliometryczne – patent, którego autorem jest beneficjent, powołujący się na publikacje – wymienienie zespołu naukowego we wdrożeniach opracowanych przez beneficjenta. UWAGA: 1. Ustalenia naukowe mogły powstać od 1997 roku (ostatnie 20 lat), a dowody muszą być z okresu 2017 – 2020, 2. Opis wpływu powinny przygotowywać zespoły badawcze, które są autorami ustaleń naukowych, 3. Opis będzie oceniać dwóch ekspertów, w jeden z zagranicy, 4. Opis będzie tłumaczony na język angielski.

Przykład: Naukowcy opracowali nową metodę obliczania ryzyka ekonomicznego Beneficjenci – bank, Opis wpływu: Typ wpływu – ekonomiczny, Oddziaływanie – przyspieszenie obliczeń, wzrost efektywności, uniknięcie rozbudowy infrastruktury obliczeniowej, minimalizacja ryzyka, Ustalenie naukowe leżące u podstaw wpływu – nowa metoda obliczeniowa, Odniesienie do badań - publikacja Źródła potwierdzające wpływ - patent opracowany przez beneficjenta, powołanie się na publikację naukową, wspólne publikacje z beneficjentem

Bazy międzynarodowe STAR METRICS (US) – https: //www. starmetrics. nih. gov STAR METRICS® is a federal and research institution collaboration to create a repository of data and tools that will be useful to assess the impact of federal R&D investments. The National Institutes of Health (NIH) and the National Science Foundation (NSF), under the auspices of Office of Science and Technology Policy (OSTP), are leading this project. Federal Re. PORTER (US) – https: //federalreporter. nih. gov United Kingdom Research and Innovation Research Outcomes System https: //www. ukri. org/funding/information-for-awards-holders/research-outcomes

Bazy międzynarodowe Impact Assessment Platform – https: //www. researchfish. net Gateway to Research Portal – https: //gtr. ukri. org Research Excellence Framework, The Academy of Finland, Konsorcjum Social Impact Assessment Methods SIAMPI, The Spanish Council for Scientific Research, Korea Institute od S&T Evaluation and Planning itd… Takie bazy są budowane od 1995 roku – Monitorowanie wpływu: tworzenie katalogu dowodów w miarę ich powstawania, prowokowanie dowodów wpływu

Pytanie stawiane przy określaniu wpływu Co się wydarzyło, zmieniło, poprawiło, jakim skutkom udało się zapobiec w następstwie ustalenia naukowego? • Poprawa efektywności gospodarczej, • Podniesienie poziomu produkcji, • Różnicowanie oferty handlowej, produkcyjnej, wzrost jakości usług, konkurencyjności, poprawa satysfakcji klienta, • Wzrost sprzedaży, usług, eksport, wejście na nowe rynki, zwrot inwestycji, • Zawarcie umowy o współpracy B+R, • Wskaźniki komercjalizacji, sprzedaż patentów, licencji, nowe przedsięwzięcia biznesowe, firmy spin-out, spin-off, • Zastosowania badań w innowacjach technologicznych, produktowych, procesowych, • Liczba zawartych kontraktów, • Efekty dla środowiska naturalnego, • Doradztwo dla polityków na szczeblu regionalnym, krajowym międzynarodowym, • Wkład do edukacji, życia kulturalnego, społecznego, Itd. .

Źródła wiedzy o zakresie wpływu Jak zmierzyć, obliczyć, skonkretyzować wpływ oraz oszacować skalę jego oddziaływania? - Metody ilościowe: analizy bibliometryczne, naukometryczne, mikro, makro-ekonometryczne, patentowe, statystyczne, metody kosztów i korzyści, - Metody jakościowe: badania ankietowe, panele ekspertów, wywiady, studia przypadku, metody retrospektywne, benchmarking, - Dane liczbowe: przychód, wielkość, wzrost, progres, intensyfikacja, dynamizacja, natężenie, postęp, rozwój, modernizacja, reforma, transformacja, popyt, spadek, zmniejszenie, zapobieganie, - Miękkie skutki: lepsze rozumienie współzależności, wzrost chęci, zdolności do poprawy wydajności, kompetencje innowacyjne, plany marketingowe.

Analiza wpływu ustaleń naukowych (1) Taksonomia wyników B+R: - Wiedza skodyfikowana (publikacje raporty, patenty, prototypy). Umiejętność stawiania i rozwiązywania problemów, Znajomość metod i technik badawczych, Nowe prototypy, produkty i usługi, Nowe firmy, Nowa aparatura, metody i techniki, Wykształceni i wyszkoleni pracownicy, Sieci naukowe i zawodowe oraz przepływ informacji, Wiedza społeczna (np. dostarczanie politykom ustaleń dla decyzji),

Analiza wpływu ustaleń naukowych (2) Taksonomia form wpływu: - Produkty/rezultaty (publikacje, patenty, oprogramowanie, raporty, prototypy, narzędzia, procesy, usługi, standardy, cytowania, uzyskane nagrody, wiedza, umiejętności, pokaz działania, wykwalifikowani pracownicy, itd. ); - Efekty/skutki (wyniki B+R przekształcone w sektorze gospodarczym w nowe produkty, materiały, procesy, zmiany w kompetencjach, strategię firmy, tantiemy z licencji, zyski z inwestycji, mobilność personelu, a w sektorze publicznym w nowe prawa, metody nauczania, leczenia, przesyłu energii, transportu, itd. )

Analiza wpływu ustaleń naukowych (3) Taksonomia sfer oddziaływania (Typy wpływu, profil oddziaływania ustaleń naukowych): - Naukowy: nowa wiedza, kultura współpracy, powstanie sieci, reputacja naukowa, rozwój teorii, metod, modeli, - Technologiczny: nowe produkty, procesy, usługi, techniczny know-how, - Gospodarczy: nowe rynki, inwestycje, wzrost produktywności, sytuacja budżetowa firm, koszty operacyjne, przychody, zyski ze sprzedaży produktów i usług, źródła finansowania, działalność produkcyjna, wzrost gospodarczy, - Kulturowy: (rozumienie nauki przez społeczeństwo, co? Dlaczego? Jak? Kto? ), zainteresowania, postawy, wartości, przekonania, rozumienie idei, rzeczywistości, umiejętności intelektualne, praktyczne. - Społeczny: samopoczucie, jakość życia, dobrobyt, spadek śmiertelności, poglądy, zachowania, zwyczaje, nawyki, praktyki, działania osób, grup, rozwój społeczny, - Polityczny: sposób, zasady działania decydentów, polityków, decyzje polityczne, teoretyczne, empiryczne podstawy dla działań ministerstw, skuteczność administracji państwowej, - Organizacyjny: zasoby ludzkie, działalność instytucji, organizacji, planowanie pracy, - Zdrowotny: zdrowie publiczne, długość życia, zapobieganie chorobom, system opieki zdrowotnej, nowe metody leczenia (np. urządzenia, algorytmy przetwarzania obrazów), - Środowiskowy: zarządzanie zasobami, ochrona środowiska, zapobieganie zmianom klimatycznym, - Edukacyjny: programy, narzędzia pedagogiczne, kwalifikacje, rynek pracy, - Instrumentalny: decyzje polityczne, oficjalne wytyczne, nowe technologie, firmy „odpryskowe”, - Koncepcyjny: nowe rozumienie, - Szeroki: dobrobyt, poprawa zdrowia, zrównoważony rozwój.

Metryki autora, publikacji, czasopisma, podmiotu Sci. Val – Research Intelligence Solutions (Research Metrics) - Metric: Collaboration, Academic-Corporate Collaboration: Academic-Corporate Collaboration Impact, Metric: Views Count, Metric: Outputs in Top Views Percentiles, Dane z tych baz nie są dowodem Metric: Views per Publication, wpływu. Pozwalają jednak Metric: Citation Count, ocenić potencjał ustalenia naukowego Metric: Field-Weighed Citation Impact, do wywarcia takiego wpływu. Metric: Outputs in Top Citation Percentiles, Są podstawą ewentualnego wpływu. Metric: Publications in Top Journal Percentiles, Metric: Citations per Publication, Metric: Number of Citing Countries, Cite. Score – średnia cytowalność czasopisma, SCImago Journal Rank SJR (prestiż czasopisma cytującego) Source Normalized Impact per Paper SNIP (cytowalność czasopisma w odniesieniu do dyscypliny)

Alternatywne wskaźniki wpływu na społeczeństwo Serwice Newsflo – narzędzie monitorowania mediów, umożliwia pomiar szerszego oddziaływania wyników badań poprzez śledzenie i analizowanie wzmianek o publikacjach i odkryciach w mediach. Plum. X Metrics – wgląd w sposoby interakcji ludzi z poszczególnymi wynikami badań w środowisku on-line. Podzielone są na 5 kategorii: Stosowanie (Usage), Przechwytywanie (Captures), Wspomnienia (Mentions), Media społecznościowe (Social Media), Cytowania (Citations). Dane zaczerpnięte z tych baz pozwalają określić geograficzny zasięg oddziaływania. Są nie do podważenia jako dowód oddziaływania.

Proces ustalania wpływu dz. naukowej na życie społeczno-gospodarcze Wojciech Majkowski; „Opis wpływu działalności naukowej na funkcjonowanie społeczeństwa i gospodarki. Kryterium III ewaluacji działalności naukowej”, Centrum Kształcenia IDEA, Warszawa, 2020

Podsumowanie: Już teraz należy rozpocząć przygotowania do opracowania tego kryterium. W maju/czerwcu powinniśmy potrafić wskazać 6 efektów badań naukowych, dla których potrafimy skutecznie wykazać wpływ na społeczeństwo lub gospodarkę.

Mapowanie interesariuszy Taksonomia form wpływu: - Produkty/rezultaty (publikacje, patenty, oprogramowanie, raporty, prototypy, narzędzia, procesy, usługi, standardy, cytowania, uzyskane nagrody, wiedza, umiejętności, pokaz działania, wykwalifikowani pracownicy, itd. ); - Efekty/skutki (wyniki B+R przekształcone w sektorze gospodarczym w nowe produkty, materiały, procesy, zmiany w kompetencjach, strategię firmy, tantiemy z licencji, zyski z inwestycji, mobilność personelu, a w sektorze publicznym w nowe prawa, metody nauczania, leczenia, przesyłu energii, transportu, itd. ) Wojciech Majkowski; „Opis wpływu działalności naukowej na funkcjonowanie społeczeństwa i gospodarki. Kryterium III ewaluacji działalności naukowej”, Centrum Kształcenia IDEA, Warszawa, 2020

Analiza wpływu ustaleń naukowych Taksonomia wyników B+R: - Wiedza skodyfikowana (publikacje raporty, patenty prototypu). - Umiejętność stawiania i rozwiązywania problemów, - Znajomość metod i technik badawczych, - Nowe prototypy, produkty i usługi, - Nowe firmy, - Nowa aparatura, metody i techniki, - Wykształceni i wyszkoleni pracownicy, - Sieci naukowe i zawodowe oraz przepływ informacji, - Wiedza społeczna (np. dostarczanie politykom ustaleń dla decyzji), Wojciech Majkowski; „Opis wpływu działalności naukowej na funkcjonowanie społeczeństwa i gospodarki. Kryterium III ewaluacji działalności naukowej”, Centrum Kształcenia IDEA, Warszawa, 2020