niversite Sralamalarnda Bibliyometri Uygulamalar Murat Perit akr URAP

Üniversite Sıralamalarında Bibliyometri Uygulamaları Murat Perit Çakır URAP Araştırma Laboratuvarı ODTÜ Enformatik Enstitüsü

Üniversite Sıralamaları ¡Dünya genelinde 20. 000 civarı yüksek öğretim kurumu ¡Sayılardaki artış akademik kuruluşların da değerlendirmesine yönelik talebe neden oldu ¡İlk ulusal sıralama 1983 (US News and World Report) ¡İlk dünya sıralaması 2003 (ARWU, Jiao Tong University, Çin): 500 Üniversite ¡Webometrics 2004 (İspanya)

Üniversite Sıralamaları ¡Leiden Ranking (2007): 500 üniversite, 750 üniversite (2014’ten beri) ¡THE (Times Higher Education) – QS World Ranking (20042009) ¡THE and QS 2010’dan beri farklı sıralama sistemleri ¡US News and World Report (Best Global Universities): 2014’ten beri dünya sıralaması

URAP ¡ 2009 yılında ODTÜ Enformatik Enstitüsü bünyesinde kuruldu ¡Farklı disiplinlerden gelen araştırmacılardan oluşan gönüllü bir ekiple çalışmaktayız ¡Genel amaç: ¡Türk üniversitelerine ve gelişmekte olan ülkelerdeki üniversitelere akademik performansları bakımından öz değerlendirme yapma imkanı sunmak ¡Bilim ve yayın kültürünün gelişmesine katkıda bulunmak

URAP amaçları ¡Türk Üniversiteleri’nin akademik performansları ve gelişmeye açık yönleriyle ilgili farkındalık yaratmak ¡Üniversitelerimizin dünya üniversiteleri arasındaki konumlarını belirlemelerine yardımcı olmak ¡Amacımız üniversitelerimizi iyi veya kötü olarak nitelemek değildir

URAP Çalışmalarının Genel Görünümü ¡URAP Türkiye Sıralaması ¡URAP Dünya Sıralaması ¡URAP Alan Sıralaması ¡Yayın verileri üzerine bibliyometrik araştırmalar ¡Dünya sıralamalarında Türk üniversitelerinin konumunu özetleyen raporlar ¡Araştırmalar gönüllü bir araştırma ekibi tarafından ODTÜ’nün sağladığı altyapı desteği ile yürütülmektedir

URAP Türkiye Üniversiteleri Sıralaması ¡ 157 üniversite sıralamaya dahil edilmektedir ¡Sıralamaya dahil edilme kriterleri ¡ 4 yıllık lisans programı olması ve mezun vermiş olması ¡YÖK veri tabanında öğretim üyesi ve öğrenci sayılarının yer alıyor olması ¡Türk üniversitelerinin özelliklerine göre alt sıralamalar ¡Devlet/Vakıf Üniversiteleri ¡Tıp fakültesi olan, olmayan üniversiteler ¡ 2000 yılından önce ve sonra kurulan üniversiteler ¡Doktora programı olan/olmayan üniversiteler

URAP Türkiye Üniversiteleri Sıralaması Kriter 1* Makale Sayısı (Q 1, Q 2, Q 3) Tarih Kapsam 2017 Araştırma 2* Öğretim Üyesi Başına Düşen Makale Sayısı 2017 Araştırma 3* Atıf Sayısı 2013 -2017 Araştırma 4* Öğretim Üyesi Başına Düşen Atıf Sayısı 2013 -2017 Araştırma 5 Toplam Bilimsel Doküman Sayısı 2013 -2017 Araştırma 6 Öğretim Üyesi Başına Düşen Toplam Bilimsel Doküman Sayısı 2013 -2017 Araştırma 7 Doktora Öğrenci Sayısı 2017 Eğitim ve Araştırma 8 Doktora Öğrenci Oranı 2017 Eğitim ve Araştırma 9 Öğretim Üyesi Başına Düşen Öğrenci Sayısı 2017 Eğitim *1000 ve daha yüksek sayıda ortak yazarlı makaleler hariç Veri Kaynağı: Clarivate Analytics In. Cites ve YÖK istatistikleri

Hacim etkisi 50 40 30 20 10 1 Büyüklük bağımlı sıralama Gebze T Sabancı ODTÜ Bilkent Boğaziçi İTÜ Hacettepe Ankara Ege İstanbul Gazi Büyüklük bağımsız sıralama Koç 5 10 15 20

URAP Dünya Sıralaması İndikatör Tarih Kapsam Makale Sayısı (Q 1 -Q 3) 2017 Bilimsel Üretim Atıf Sayısı (Q 1 -Q 3) 2013 -2017 Araştırma Etkisi Toplam Doküman 2013 -2017 Bilimsel Üretim Toplam Makale Etkisi 2013 -2017 Araştırma Kalitesi Toplam Atıf Etkisi 2013 -2017 Araştırma Kalitesi Uluslararası İşbirliği 2013 -2017 Uluslararası Tanınırlık *1000 ve daha yüksek sayıda ortak yazarlı makaleler hariç Veri Kaynağı: Clarivate Analytics In. Cites

URAP Dünya Sıralaması ¡Toplam Atıf Etkisi (CIT) hesabı ¡CIT yayın başına düşen atıf sayısı ile ağırlıklandırılmış toplam atıf sayısıdır ¡Üniversitenin yayın başına atıf sayısı dünya ortalaması ile oranlanarak toplam atıf sayısı ile çarpılmaktadır ¡Alan tanımları Avustralya Yükseköğrenim Kurumu’nun belirlediği ERA dergi sınıflamasına dayanmaktadır (23 Alan)

URAP Dünya Sıralaması ¡Toplam Makale Etkisi (AIT) hesabı ¡AIT yayın başına düşen atıf sayısı ile ağırlıklandırılmış makale sayısıdır ¡ 23 alan için, o alanda kurumun CPP değeri alandaki dünya CPP değerine oranlanıp, ilgili alandaki makale sayısıyla çarpılarak bu değer elde edilmektedir

URAP Dünya Sıralaması ¡Ağırlıkların belirlenmesinde Delphi yöntemi kullanılmıştır İndikatör Ağırlık (%) Makale Sayısı 21 Atıf Sayısı 10 Toplam Doküman 21 Toplam Makale Etkisi 18 Toplam Atıf Etkisi 15 Uluslararası İşbirliği 15

URAP Dünya Sıralaması ¡Ülkelere göre üniversiteler (2017 -2018 sıralaması) Ülke A. B. D. Çin Hollanda İngiltere Almanya Fransa Kanada Avustralya İtalya Japonya … Türkiye Top 100 Top 500 Top 1000 Top 2500 36 9 7 6 5 5 2 2 … 114 54 12 26 39 22 19 22 25 15 … 192 123 13 47 53 47 28 28 45 44 … 15 368 376 14 87 67 93 51 39 66 152 … 86

URAP Dünya Alan Sıralaması ¡ URAP Dünya sıralaması kriterlerini uygulayarak 61 alanda özel sıralamalar yapılmaktadır ¡ 61 alanın 29’un 41 Türk üniversitesi yer almıştır ¡ Yer alamadığımız alanlar ¡ Çevre Bilimleri İstatistik Psikoloji İşletme Arkeoloji; Hukuk Astronomi ve Astrofizik Kütüphanecilik ve Bilgi Yönetimi Robotik ve Akıllı Sistemler Deniz Bilimleri Çevre Mühendisliği Tarih Hemşirelik Spor Bilimleri Felsefe Biyomedikal Mühendisliği Ulaşım Bilim ve Teknolojisi Güzel Sanatlar Film ve Dijital Medya İmalat Mühendisliği Sosyoloji Ziraat Mühendisliği Veterinerlik Antropoloji Sürdürülebilir ve Yenilenebilir Enerji Metalurji Mühendisliği Meteoroloji ve Atmosfer Bilimleri Şehir Bölge Planlama Uluslararası İlişkiler Zooloji İletişim Dilbilim http: //tr. urapcenter. org/2018/2017 -2018_DUNYA_ALAN_SIRALAMASI_RAPORU_13_Haziran_2018. pdf

2017 -2018 dünya alan sıralamasında en az 6 alanda sıralamaya girebilen 12 üniversitemizin dünyadaki durumu

Üniversitelerimizin 61 bilim alanı sıralamasında Türkiye’de ilk 3’te yer alma sayısı

URAP Araştırma

Sıralama Sistemleri: Gelişmeler ¡ 2015 yılında Türkiye’deki üniversitelerin sıralamalardaki yerinde düşüşler gözlendi ¡ODTÜ ve Boğaziçi Üniversitesi 100 lerden 300 lere düştü ¡Üst sıralardaki çok sayıda üniversite benzer bir düşüş yaşadı ¡Nedenleri ¡THE sıralama sistemi veritabanını değiştirdi ¡Yayın başına atıf sayısı yerine toplam atıf kullanılmaya başlandı ¡ 500 üzeri yazarlı CERN ve tıp makaleleri sıralamalardan çıkarıldı (URAP bu düzeltmeyi 2014 yılından beri yapmaktadır)

CERN Etkisi ¡CERN yayınları (2011 -2015): 5661 makale, 97082 atıf ¡Ortalama yazar sayısı: 459 (medyan: 7) ¡ 1000+ yazarlı 869 makale (en yüksek yazar sayısı 5154)

2013 -2017 arası 1000 üzeri ortak yazarı olan yayınlar Makale Sayısı Atıf Sayısı Kurum Sayısı 955 26488 803 Chemistry 25 757 505 Space Science 13 621 541 Clinical Medicine 10 1428 796 1 20 48 Physics Molecular Biology & Genetics

CERN Etkisi ¡ 852’si akademik 1046 CERN-ilişkili kurum ¡CERN enstitü sayıları

CERN Etkisi ¡CERN yayınlarının kurum yayınlarına oranı

CERN Etkisi ¡CERN yayınlarının kurum yayınlarına oranı (TÜRKİYE)

CERN Etkisi ¡CERN atıflarının kurum atıflarına oranı

CERN Etkisi ¡CERN atıflarının kurum atıflarına oranı (TÜRKİYE)

Dergi Etki Dilimleri ¡URAP sıralamalarında yeni kullanmaya başladığımız bir indikatör ¡Amaç: daha nitelikli dergilerde yapılan yayınlara önem vermek ¡In. Cites’da yer alan JIF Quartile bilgisi kullanılmaktadır (kapsam SCI-Exp ve SSCI) ¡ 250 Web of Science kategorisinde yer alan dergilerin etki faktörüne göre sıralanarak %25 lik dilimler belirlenir ¡ Bir dergi birden fazla alanda yer alıyorsa, en yüksek dilimde yer aldığı alan dikkate alınmıştır

Dergi Etki Dilimleri Dağılımı (2012 -2016) Çeyrek Dergi Sayısı Makale Sayısı Toplam Makale içindeki % Q 1 2876 2, 875, 238 42% Q 2 2774 1, 801, 103 26% Q 3 2660 1, 186, 171 17% Q 4 2749 962, 007 14% Toplam 11059 6, 824, 519 100%

Dergi Etki Dilimleri 2012 -2016 yılları arasında yayımlanan makalelerin yer aldığı dergilerin etkinlik çarpanı dilimine göre dünya genelinde ve Türkiye’de oransal dağılımı. 50% 45% 40% 35% 30% 25% 20% 15% 10% 5% 0% İlk %25 İkinci %25 Dünya Üçüncü %25 Türkiye Son %25

Dergi Etki Dilimleri URAP Dünya sıralamasında en çok kurumu yer alan ülkelerde 2012 -2016 yılları arasında yayımlanan makalelerin yer aldığı dergilerin etkinlik çarpanı dilimine göre oransal dağılımı. A. B. D. H Ç ol in la İn nda gi Al lter Av ma e us nya tra Fr lya a Ka nsa na d İta a Ja ly po a n G İsp ya ün an ey ya Ko Ta re y Br van ez ily a Av İr us an tu r R ya u Po sy a H lon in ya di s Tü tan rk iy e 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% İlk %25 İkinci %25 Üçüncü %25 Son %25

TA D TA O N ĞU BU T E İS L T KN E H TAN KN İK Ü İH AC B İK N SA E U Ü İV N TTE L Ü Nİ ER N V D O PE İV ER. . . Ğ R ÜN ER Sİ. AM İV Sİ. . T EG AC ER ES E I B SİT İ G Ü İL E AN AZ Nİ KE Sİ KA İ Ü VER NT B D O R Nİ S. . . O Ğ A V İT KU A E Ü E Z ZİÇ NİV RS Sİ İ EY İ Ü ER TES L YI Ü NİV Sİ İ LD L T IZ KO ÜN ER ES TE Ç İV SİT İ E Ü E ER KN N RS Sİ C İK Ü İVE İTE AT İYE N RS S A S İV İ İ M TÜ Ü ER TES AR R Nİ S İ M K Ü VE İTE A R SE RA NİV Sİ Sİ E T L KA S ÇU ÜN RS ESİ R AB K Ü İVE İTE AD AN N R S EN C İV SİT İ IÜ E E AK İZ T Nİ RS Sİ D EK VE İTE E U Nİ NİK RS Sİ LU Z İT D ÜN ÜN ES AĞ İ VE İ Ü N RS R. . İV İT. ER E Sİ Sİ TE Sİ İS R O Dergi Etki Dilimleri URAP 2012 -2016 tarihli makaleler değerlendirmeye alındığında ilk %25’lik dilimde en çok yayını bulunan ilk 20 Türk üniversitesi 9000 8000 7000 6000 5000 4000 3000 2000 1000 0 İlk %25 İkinci %25 Üçüncü %25 Son %25

sa U ch ni us ve e rs tts ity In of sti Im Ca tute pe lifo o ria rn f T l C ia ec ol Be h. . . le r H U ni arv ge kele ve a rs rd Lon y ity U do U St of nive n ni ve an Ca rs rs i f ity Un ord mb ty r of ive U idg C rsi niv e al ty e rs if U Un C orn of O ity ni ve ive olum ia S xfo rs rs r a ity bia n D d of of Un ie U U. . W P i ni ve niv as en vers. Pi rs ers hin nsy ity er ity g to lvan re o C & f C ol n S ia M al leg e a ar ifo ie rn e L ttle C ia on ur L d ie os on A C U U or niv ng Jo niv nel ers. . . hn ers l U ity n i s H ty o ive. . . o r f U pki Mi sity ni ns ch Sh ve an rs Un igan T gh s ity ive ai ing of rs Ji hu T ity ao a or To Un ont ng ive o U rsi ni ty ve rs ity as M Dergi Etki Dilimleri URAP 2017 -2018 Dünya Sıralaması’ında ilk 20’de yer alan üniversitelerin %25’lik dilime düşen yayın oranına göre sıralaması (2012 -16 tarihli makaleler değerlendirmeye alınmıştır). 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% %Q 1 %Q 2 %Q 3 %Q 4

& ie ar M ar H C va ur rd U ie n U Un Un ive i ni r ve ver iver sity s rs sit ity y o ity f T -. . C o. o U l ni leg ron ve e rs Lo to St i n an ty o do U n fo f O n x Jo ive rd hn rs Un ford ity iv s er U H o ni U f o pk M sity ni v e i M v as rsit ers ins chig sa y o ity Un a ch f W o iv n f us C e et ash am rsity ts in b Im Ins gto ridg pe titu n S e ria te e l C of attl e T U Ts olle ec U ni h ve niv in g rs er gh e L n. . . ity o s u of ity o a U ndo n n C al f Pe ive ifo U r ni rn nns sity ve rs Co ia L ylva lu o Sh ity m s A nia o a b f U ni ngh Ca ia nge U ve l a rs i J ifor niv l. . . ni ity ia e of o T a B rsity C on er al k ifo g U ele rn niv y i C a S ers or i a ne n D ty ll U ieg ni ve o rs ity er re Pi Dergi Etki Dilimleri URAP 2017 -2018 Dünya Sıralaması’ında ilk 20’de yer alan üniversitelerin %25’lik dilime düşen yayın sayılarına göre sıralaması (2016 tarihli makaleler değerlendirmeye alınmıştır). 25000 20000 15000 10000 5000 0 Q 1 Q 2 Q 3 Q 4

Uluslararası Sıralamalardaki Genel Görünüm

http: //tr. urapcenter. org/2018/Universitelerimizin_2017_Yili_Dunya_Genel_Siralamalarindaki_Durumu. pdf

YÖK Araştırma Üniversiteleri ¡ 1. Yayın Çıktısı: Öğretim üyesi başına SCI, SSCI ve A&HCI endeksli dergilerde ortalama yıllık makale / derleme sayısı (2014 -2016) ¡ 2. Uluslararası Yayın Çıktısı: Öğretim üyesi başına uluslararası işbirliği ile yapılan SCI, SSCI ve A&HCI endeksli dergilerde ortalama yıllık makale / derleme sayısı (2014 -2016) ¡ 3. Bilimsel Yayın Puanı: İlk göstergede verilen her bir yayın için ilgili dergi etki faktörü yazılarak (güncel olan) alta toplanmasıyla elde edilen toplam etki puanının toplam yayın sayısına oranını ifade etmektedir. ¡ 4. Atıf Puanı: Öğretim üyesi başına üniversite adresli yayınlara 1 numaralı göstergede tanımlanan endekslerdeki dergilerde yapılan ortalama yıllık atıf sayısını ifade etmektedir. Araştırma Üniversitesi Ankara Ü Boğaziçi Ü Erciyes Ü Gazi Ü Gebze TÜ Hacettepe Ü İTÜ İstanbul Ü İzmir YTÜ ODTÜ URAP Sırası* 5 9 12 6 8 1 4 3 13 2 * Devlet üniversiteleri dikkate alınmıştır

C al ifo rn hu Te ia I se ch ns tts ni titu In cal te st U of itu ni te ve Tec of rsi hn Sw o Te ty Te is s ch of M logy c U Fe hn n n de ic ive olo uni al g c ra U rsit y ( h l. I ni y ns ve of MIT t i t r S O ) G u Ko eo te tan sity xf re rg o fo o or a Sh ia f Te rd f B d Ad an Ins ch Un erli va g tit no iv n nc ed De hai ute log ers In lft U Jia of y Z ity o T st itu niv To ec uric te ers ng hn h ol o it C f S y o Uni ogy ar ci f T ve ne. & e r U gi Te chn sity ni e ve M ch olo rs S İz ity a ello. (K gy m ir of ban n U AIS Yü C c ni T O ks alifo ı Ün ver ) rta ek r iv si D Te nia ers ty oğ k S it G u T nol an esi eb e oj D ze kn i E ieg Te ik Ü nst o kn ni itü ik ve sü Ü rsi n te İs B K ta oğ o iver si nb a c s ul ziç Un ites i T i i v Ih H ekn Üni ers ac ik ve ity sa et n te Ün rsite D og p iv ra Erc e Ü ers si m iy n i ac es ive tes i B Ü rs i il ni ite An ken ver si ka t U site ra ni v si G Ün ers İs azi ive ity ta r nb Ün site ul ive si Ü rsi ni te ve s rs i ite si ac as s M Yayın Çıktısı - Benchmark 12. 00 10. 00 8. 00 6. 00 4. 00 2. 00 0. 00 ÖÜ Başına Düşen Yıllık Yayın Oranı Yazar Başına Yıllık Yayın Oranı

Sw ifo r Te nia is s M F ch In as e ni sti d sa e ca tu ch ra l U te l us In ni of v T et st ts itu U ers ec In te niv ity hn st o e o ol Te itut f Te rsit f M ogy ch e o ch y o un ni f T no f O ich ca e lo x l U ch gy fo D el n n Z rd G ft U S ive olog ur eo n t rs y ich r i a i ( Sh gia ver nfo ty o MIT s an In ity rd f B ) gh stit o Un erl u f i C ai J te Te iver n ar ia o ch si ne o f T n ty İz Ko gi To ec olo m e n h g re U ir Y a ni ü B Me g U nolo y Ad ve k oğ llo n g va rs se az n ive y nc ity k i U rs ed of Tek çi Ü niv ity C no niv ers In al lo e it st if itu j r y te S orn i En site of ab ia S st si Sc an a itü O ie ci n D sü rta nc U ie D e niv go oğ & e G u eb Te Ko Tec rsit Ih sa İs ze k c h y n tan T nik Un no D b e Ü iv l. . og u kn n er. ra l T ik ive sit m ek Ü rs y ac ni ni it v e H i Bi k Ü ers si ac lk ni it et en ve es te t rs i An pe Un ite k Ü iv si İs ara niv ers ta i nb Ün ers ty i Er ul iv te ci Ü ers si ye n s iv ite G Ün ers si az iv ite i Ü er si ni sit ve es rs i ite si al C Uluslararası Yayın 7 6 5 4 3 2 1 0 ÖÜ Başına Düşen Yıllık Uluslarararsı Yayın Oranı Yazar Başına Yıllık UA Yayın Oranı

In s tit ut C e al of i Sw U for Te ni n c is i v er a I St hn s Fe si ns an ol ty ti fo og Ko de of tut rd y ra re C e o U (M l. I a al f ni IT ns Ad if T v ) t i va Te tu U orn ech ers nc it c te n ia ed G hn of ive Sa nol y o In eor ica Te rsit n D gy st gi l U ch y o i itu a n n f eg te In ive olo Ox o of stit rs gy fo C Sci ute ity o Zu rd Te arn enc of T f M rich e u c e D hn gie & ech nic el ic M T n h ft al e ec ol U U llo h og ni n n no y İz ve iv U lo Ih mir rs ers ni g sa Y v. . it n ük Bo y o ity o ers. D se ğa f T f ity o B Sh gra k T ziç ech er i an m ek Ü no lin gh aci no niv lo ai B loj er gy Ji ilke i E sit ao n n es To t U stitü i O ng niv sü rta D S Ko Un ers İs oğu ab c ive ity U ta nb Te anc niv rsit ul kn i U er y s T i H e k ni it G ac kn Üni ver y eb e ik ve sit ze tte Ün rs y Te pe ive ites k Ü r i An nik niv site k Ü e s İs ara niv rsite i ta nb Ün ers si u iv ite G l Ü ers si Er az niv ite ci i Ü er si ye n si s ive tes Ü rs i ni it ve es rs i ite si tts us e ch sa as M Etki Faktörü Yayın Oranı 7 6 5 4 3 2 1 0

C D ar n re el egi f a e Ad t Un M va ive ello nc n r U ed sity Te of nive In ch s T ni titu ec rsity ca h te l U of nol o S ni H ve ci gy ac & r et sity Te te. . . O pe of rta İs B Ü e ta D oğ nb niv rlin e u u İs Te l Ü rsit ta nb kn niv esi e ul ik Te Ü rsit kn niv esi e i An k Ü rsit ka niv es i e ra Ü rsit Eg niv esi e e Ü rsit ni es G v İh a i e Bo zi sa rs Ü n ğa ni ites D z i oğ iç ve ra Er i Ü rsit c m n e ac iye ive si ı B s Ü rs İz ilk ni ites m ve e i ir n r t Yü s Ü ni ites ks K ek oç ver i si Te Ü kn niv tesi e o G Sab loji rsit eb En es a i ze nc s Te ı Ü titü kn niv sü e ik Ü rsit ni e ve si rs ite si Ko Atıf Puanı - Benchmark 180 160 140 120 100 80 60 40 20 0 OÜ Başı Yıllık Ort. Atıf Yazar Başı Ort. Atıf

Örnek Durum: Nörobilim Araştırmaları 2016’da yayınlanmış Türkiye ve Hollanda adresli nörobilim yayınlarının anahtar kelime dağılımı Kaynak: Wo. S ve VOSViewer

Gözlemler ¡ Nitelikli araştırma nitelikli araştırma kadrosu ve yeterli bilimsel altyapı gerektirmektedir ¡ Caltech, MIT, Stanford gibi önde gelen araştırma kurumlarında nitelikli yayın başına 1 -2 yazar düştüğü görülmektedir ¡ Araştırma bütçeleri Türk üniversiteleriyle kıyaslanamayacak boyutlardadır ¡ Sıralamalar, benchmark analizleri ve bibliyometrik haritaları bir arada kullanarak kurumlarımızın dünya üniversiteleri arasındaki yerlerinin sağlıklı tespit edilmesi ve stratejik gelişme planları yapılması önem arz etmektedir. Kurum Caltech TU Munich MIT Stanford U S Jiao Tong U KAIST Türkiye Kurum Ankara Ü Hacettepe Ü İstanbul Ü + Cerrahpaşa ODTÜ İTÜ 2016 Yazar Öğretim Sayısı Üyesi 3903 327 Araştırma Bütçesi (milyar $) 2. 60 6251 712 1. 64 8501 11133 15190 1272 2027 2967 3. 35 1. 62 1. 26 1615 984 0. 68 2016 Yazar Öğretim Sayısı Üyesi 1935 1804 2355 1693 Toplam Ödenek (milyar $) 0. 19 3554 1296 1383 2915 754 817 0. 29 0. 10

URAP ekibinden teşekkürler Prof. Dr. Ural AKBULUT URAP Coordinator Former President of METU Prof. Dr. Nazife BAYKAL URAP Associate Coordinator Informatics Institute, METU Prof. Dr. Canan ÇİLİNGİR Dept. of Industrial Eng, METU Dr. Serkan Alkan Informatics Institute, METU Prof. Dr. Ayşen AKKAYA Dept. of Statistics, METU İlker Koç Society and Science Application and Research Center, METU Assist. Prof. Dr. Murat Perit ÇAKIR Informatics Institute, METU Assist Prof. Dr. Cengiz ACARTÜRK Informatics Institute, METU Murat KOÇAK Informatics Institute, METU Çağatay Taşcı Informatics Institute, METU Ece Çağlayan Informatics Institute, METU Elif Akça Department of Statistics, METU Buket Aran Informatics Institute, METU Oğuzhan ALAŞEHİR Informatics Institute, METU Fatih ÖMRÜUZUN Informatics Institute, METU

Yayın Sayısı Kısa Tanım Güçlü Yanlar Kısıtlar Belirli bir zaman aralığında bir kurum/kişi tarafından yapılan bilimsel yayınların toplam sayısı • Çoğu bilim dalında • Çok yazarlı makalelerin önemsenen bir çıktı kurum/yazar katkılarının türü olması. değerlendirilmesindeki • Ağırlıklı olarak zorluklar dergilerde basılan • Kesirsel sayım makaleleri içermekle • Yayın hacminin alanlar beraber konferans arasında önemli farklılıklar bildirisi, kitap göstermesi kısmı vb. türleri de • Yayın sayılarından elde içerebilmesi edilen ham farkların • Performans. değerlendirilmesindeki göstergelerinde alt limit zorluklar olarak kullanılabilmesi. • 1 sosyoloji makalesi = 15 kimya makalesi

Atıf Sayısı Kısa Tanım Güçlü Yanlar Kısıtlar Belirli bir zaman aralığında bir kurum/kişi tarafından yapılan bilimsel yayınlara yapılan toplam atıf sayısı • Bilimsel etkinin bir göstergesi olması. • Nesnel olarak sayısallaştırılabilen bir etki/önem değeri sunması. • Ağırlıklı olarak dergi makaleleri için hesaplanabilir olsa da bu durum değişmektedir. • Uzun veya kısa dönem bilimsel etkinin incelenmesine imkan vermesi • Bilimsel etkinin haricindeki faktörlerin de atıf sayısını etkileyebilmesi • Alanlar arasında atıf verme usulleri bakımından önemli farklılıklar olması • Dergi yayınlarından gelen atıflara yanlılık göstermesi • Sosyal bilimlerde özellikle kitapların bilimsel etkisinin ölçülmesini zorlaştırmaktadır.

Makale Başına Düşen Atıf Sayısı Kısa Tanım Güçlü Yanlar Toplam atıf sayısının, • Boyuttan bağımsız toplam yayın sayısına olması oranı (belirli bir • Yayın miktarından zaman aralığında) bağımsız olarak atıf etkisini ölçme imkanı vermesi • Nesnel olarak sayısallaştırılabilen bir etki/önem değeri sunması. • Ağırlıklı olarak dergi makaleleri için hesaplanabilir olsa da başka yayın türlerini de içerecek şekilde genişlemektedir. Kısıtlar • Yayın hacimleri farklı kurumların kıyaslanmasındaki zorluklar • Alan normalizasyonu içermemesi • Aşırı derecede yatık bir dağılım gösteren atıfların ortalaması olması

Bağıl Atıf Hızı (Relative Citation Rate) Kısa Tanım Güçlü Yanlar Kısıtlar • Alanlar arası atıf dağılımı farklılıkları nı gidermesi • Alana ek olarak yayın türlerine göre de normalizasyon yapılabilmesi (ör. derleme makaleleri arasında) • Atıf dağılımının tamamını dikkate alabilmesi • Alan tanımı ve ayrımlarının sağlıklı yapılmasındaki zorluklar • Yayın hacimleri farklı olan veya belirli alanlara özelleşmiş kurumlar için yorumlanırken dikkat gerektirmesi

Hersh H-Indeks Kısa Tanım Güçlü Yanlar Toplam makale sayısı • Hem niceliği (yayın Nxp olan bir yazar sayısı) hem niteliği (atıf veya kurumun h sayısı) bir araya sayıdaki makalesinin getirmesi en az h atıfı olması, • Çok atıf almış veya hiç atıf almamış aykırı (Nxp-h makalenin ise durumların tesirinde h den fazla atıfı kalmaması olmaması) Makalelerin atıf sayısı azalan şekilde sıralanıp, atıf sayısı ile sıranın aynı rakama denk geldiği değer Kısıtlar • Alanlar arası farklılıkları dikkate almaması • Alanda daha uzun süredir aktif olan araştırmacıların lehine yanlılık oluşturması • Çok atıf alan makalelerin h değerini değiştirmesindeki zorluklar

Toplam Etki Göstergesi Kısa Tanım Güçlü Yanlar Bir kurum/yazarın • Hem niceliği (yayın alana göre normalize sayısı) hem niteliği (atıf edilmiş ve yüzdelik sayısı) bir araya dilimler olarak ifade getirmesi edilmiş atıf • Alanlar arası farklılıkları değerlerinin toplamı dikkate alması • Tüm yayınları dikkate aldığı için yayın sayısı çok olan kurum/yazarlara avantaj sağlaması Kısıtlar • Alanda daha uzun süredir aktif olan araştırmacıların lehine yanlılık oluşturması • Ham değerleri 0 -100 aralığına indirgemesi • Ham değerler arası farkların belirsizleşmesi

Journal Impact Factor Kısa Tanım Güçlü Yanlar Bir derginin son iki yılda basılan yayınlarına belirli bir yılda yapılan ortalama atıf sayısı • Kolay anlaşılır olması • Alanlar arası atıf sıklığı • Uzun süredir dergi farklarını dikkate seçimlerinde kullanılıyor almaması olması • Atıf sayısı bakımından • Büyük miktarda dergi aykırı durumlardan için ölçülüyor olması etkilenmesi • Derleme makalelerin basıldığı dergilerin lehine yanlılık göstermesi ör. IF 2017 = 4. 5, ilgili derginin 2015 ve 2016’da basılmış yayınlarına 2017 yılında verilmiş ortalama atıf = 4. 5 Kısıtlar

Source Normalized Impact per Paper (SNIP) Kısa Tanım Güçlü Yanlar Bir derginin son 3 • Alanlar arası farklılıkları yılda basılan hesaba katması yayınlarına son yıl • İlgili alan o dergiye atıf yapılan ortalama atıfın veren makaleler olarak ilgili alandaki tanımlandığı için alan dergilerin ortalama taksonomisinden referans sayısına oranı bağımsız olması Kısıtlar • Zor anlaşılır olması • Atıf sayısı bakımından aykırı durumlardan etkilenmesi • Derleme makalelerin basıldığı dergilerin lehine yanlılık göstermesi

SCImago Journal Rank (SJR) ve Eigen. Factor Kısa Tanım Güçlü Yanlar Dergiler arası atıf ağını • Alanlar arası farklılıkları çıkarıp merkezi ağırlığı hesaba katması fazla olan dergilerden • Tüm dergiler arası atıf gelen atıflara daha çok ilişkilerini hesaba ağırlık verilerek elde katması edilen değer (Google Page. Rank algoritmasına benzerdir) Kısıtlar • Elde edilen değerlerin anlaşılması zor ölçeğe dönüşmesi (ör. 0. 02) • Dergiler arası eşitsizliği daha da arttırması (Matthew etkisi – zenginin daha da zenginleşmesi)

İşbirlikleri Kısa Tanım Güçlü Yanlar Uluslararası veya ulusal düzeyde, kurum dışından yazarlarla birlikte yapılan yayın sayısı • Mobilite – yazarların araştırma kariyerlerinde yaptıkları dolaşımın çeşitliliği Disiplinlerarasılık – yayınların birden fazla disiplin altında tasnif edilebilirliği Kısıtlar Uluslararası bilimsel ağlardaki konumu göstermesi İşbirliklerini bir çıktı olarak somutlaştırması • • Yayınlara yazar seviyesinde uzun bir zaman penceresi içinde bakılması, dolaşım etkisinin gözlenmesini mümkün hale getirmiştir. • Dolaşım sırasında yapılan yayınlarda kurum bilgisi doğru verilmemiş olabilir • Yakın alanlardan gelen atıfların tespiti Etkinin bilimsel alanlara ne kadar yaygınlaştığının gözlenebilir hale gelmesi • Alaln tanımlarının yapılmasındaki zorluklar • • • İşbirliğinin niteliğini ölçmekteki zorluklar Ör. çok yazarlı makalelerdeki bireysel katkının ölçülmesindeki zorluklar