Siirry pääsisältöön

Tieteellisten julkaisujen arviointi

Opas esittelee keskeiset tutkimuksen arvioinnin työkalut ja indikaattorit.

Viittaustiedot

Tutkimusryhmien ja tutkijoiden arvioinnin perusteena ovat julkaisuaktiivisuus, viittaukset, verkostot sekä julkaisukanavien laatu. Indikaattoreita ovat mm. h-indeksi ja g-indeksi.

Jos esim. yhtä yksikköä koskevien viittausdatan ja h-indeksien halutaan olevan vertailukelpoisia, on hyvä sopia etukäteen tietojen hakemisessa käytettävät rajaukset:

  • Tehdäänkö haku vain Web of Science -tietokannassa? Entä Scopus ja Google Scholar?
  • Otetaanko huomioon kaikki julkaisuvuodet vai vain esimerkiksi viimeiset 5 vuotta?
  • Otetaanko huomioon kaikki julkaisutyypit vai vain esim. artikkelit, review artikkelit ja konferenssipaperit (proceeding papers)?
  • Huomioidaanko itseviittaukset?

H-indeksi

Professori Jorge E. Hirschin vuonna 2005 kehittämä Hirsch-indeksi mittaa tutkijan julkaisutehokkuutta ja tuotettujen julkaisujen merkittävyyttä. Mitä suurempi h-indeksi on, sitä enemmän tutkijalla on viittauksia saaneita julkaisuja.

H-indeksi lasketaan seuraavasti:
Tutkijan h-indeksi on h, jos h kappaletta tutkijan julkaisuista (Np) on jokainen saanut vähintään h viittausta ja loput julkaisut (Np-h) ovat saaneet vähemmän kuin h viittausta.

 

  • Etuna vakaus, sillä indeksiarvoon ei vaikuta suuresti muutama erittäin paljon viittauksia saanut julkaisu. Vähän tai ei lainkaan viittauksia saaneet julkaisut eivät vaikuta indeksin arvoon lainkaan.
  • H-indeksin arvot vaihtelevat eri aloilla, joten eri alojen tutkijoiden h-indeksit eivät yleensä ole keskenään vertailukelpoisia.
  • H-indeksi on yleensä korkeampi pitkän uran tehneillä tutkijoilla kuin nuorilla aloittelevilla tutkijoilla.
  • Voidaan käyttää myös lehtien arviointiin.

H-indeksi viittaustietokannoissa

Viittausraportin luominen ja tutkijan h-indeksi

Kirjaudu oman korkeakoulusi (Vaasan yliopisto, Novia) Finnaan HAKA-tunnuksillasi ja avaa Web of Science -tietokanta.

  1. Kirjoita henkilön sukunimi ja etunimen alkukirjain hakukenttään ja valitse vasemmalta alasvetovalikosta Author.
  2. Valitse haluamasi rajaukset vasemmalta, esim. julkaisuvuosi, aineistotyyppi, affiliaatio.
  3. Saadaksesi raportin rajausten jälkeen kaikista listalle jääneistä julkaisuista, klikkaa oikeassa reunassa olevaa Citation Report.
  4. Raportista löytyy h-indeksi sekä paljon muuta tietoa viittausmääristä. Raportin voi tallentaa Excel-muodossa valitsemalla Export Full Report.
  • Jos valittujen rajausten jälkeen listalla on julkaisuja, jotka eivät ole halutun tekijän kirjoittamia, voit valita halutut julkaisut yksitellen ja klikata kohtaa Add To Marked List.
  • Omalle listalle pääsee vasemman reunan valikosta Marked List. Klikkaa taas Citation Report saadaksesi raportin valitsemistasi julkaisuista.

Hakujen tekeminen

WoS-tietokannassa on hyvä huomioida aina etunimen alkukirjain, affiliaatiotiedot ja mahdolliset epämääräiset tieteenalat. Hankaluuksia voivat aiheuttaa myös aasialaiset nimet, ääkköset, moniosaiset nimet, erikoismerkit sekä sukunimeään vaihtaneet tutkijat.

Tietokannasta voi olla hankalaa löytää ja tunnistaa tietyn tutkijan KAIKKI julkaisut.

  • Hakuja kannattaa tehdä useita ja kokeilla eri rajauksia (tutkimusala, maa, affiliaatio) ja hakutapoja (tekijä, affiliaatio). Hyvä apuväline marked list, jonne valitut julkaisut voi siirtää sitä mukaa kun niitä eri hauilla löytyy.
  • Haut voi tallentaa omaan Web of Science -profiiliin tai omalle koneelle (View your search history -> Export).

Ohjeita ja oppaita

Tutkijan h-indeksi

Kirjaudu Vaasan yliopiston Finnaan HAKA-tunnuksillasi ja avaa Scopus-tietokanta.

  1. Valitse Authors-välilehti.
  2. Kirjoita henkilön sukunimi ja etunimen alkukirjain erillisiin kenttiin.
  3. Valitse oikea henkilö tekijälistalta.
  4. Henkilön h-indeksi näkyy tekijätiedossa.
  • Scopuksessa tutkijoiden h-indeksit ovat saatavilla vuodesta 1995 alkaen.
  • Joskus samalla tekijällä voi olla Scopuksen tekijälistalla useampi erillinen tietue. Jos huomaat näin olevan omalla kohdallasi, voit pyytää Scopusta yhdistämään tekijätiedot. Valitse yhdistettävät tekijät, klikkaa Request to merge authors ja seuraa ohjeita.

Hakujen tekeminen

Scopuksessa on hyvä huomioida etenkin mahdollisesti väärin yhdistyneet tekijätiedot. Hankaluuksia voivat aiheuttaa myös aasialaiset nimet, ääkköset, moniosaiset nimet, erikoismerkit sekä sukunimeään vaihtaneet tutkijat.

Ohjeita ja oppaita

Google Scholar Citations

Google Scholar Citations on Googlen ylläpitämä käyttäjäprofiilipalvelu, johon jokainen tutkija voi luoda oman tilin (gmail-tili) ja liittää sinne omat Google Scholarin kautta löytyvät julkaisunsa. Profiilissa näkyy julkaisujen saamat viittaukset ja automaattisesti laskettu h-indeksi. Profiili voi olla joko yksityinen tai julkinen.

Huom! Google Scholar ei löydä kaikkia julkaisuja, sillä se haravoi vain julkaisuja, joiden tiivistelmät ovat verkossa saatavilla. Google Scholar ei myöskään pääse esim. kirjastotietokantojen ja kaikkien yliopistojen julkaisuarkistojen tietoihin. Julkaisuja, joita Google ei löydä, ei toistaiseksi voi lisätä erikseen esim. Google Scholar Citations -käyttäjäprofiiliin.

Tutkijan h-indeksi

Hae käyttäjäprofiileita Google Scholarin kautta tai kirjaudu omalle Google Scholar Citations -tilillesi.

  1. Kirjoita henkilön nimi hakukenttään. Jos tutkijalla on avoin GS-profiili, näkyy se hakutuloksissa.
  2. Klikkaa tutkijan nimeä.
  3. H-indeksi näkyy tutkijan tiedoissa oikeassa laidassa.

Viittaustietojen analysointityökaluja

Publish or Perish (PoP) on australialaisen Anne-Wil Harzingin kehittämä ilmainen ohjelma, jonka avulla voi tehdä mm. Google Scholarin, PubMedin ja Crossrefin viittaustietoihin perustuvia viittausanalyyseja. Ohjelma on ladattavissa Harzingin verkkosivuilta.  

Ohjelman avulla voidaan arvioida mm. tutkijoiden vaikuttavuutta (author impact) sekä lehtien vaikuttavuutta (journal impact) erilaisten tunnuslukujen avulla (h-indeksi, g-indeksi jne.).

Tutkijan h-indeksi

  1. Valitse lähteenä käytettävä tietokanta.
  2. Kirjoita tekijän nimi Authors-kenttään (joko etunimi sukunimi tai etunimen alkukirjain sukunimi).
  3. Rajaa tarvittaessa julkaisuvuosien mukaan ja hae.
  4. Poista listalta ei-halutut julkaisut yksitellen.
  5. H-indeksi päivittyy automaattisesti oikeassa reunassa.

Hakujen tekeminen

Publish or Perish -ohjelmassa on hyvä huomioida käyttääkö etunimeä vai etunimen alkukirjainta sekä mahdolliset virheet julkaisu- ja tekijätiedoissa. Hankaluuksia voivat aiheuttaa myös aasialaiset nimet, ääkköset, moniosaiset nimet, erikoismerkit sekä sukunimeään vaihtaneet tutkijat.

SciVal on Elsevierin maksullinen Scopuksen julkaisudataa hyödyntävä työkalu tutkimustoiminnan analysointiin ja visualisointiin. Vaasan yliopistolla on pääsy SciValiin, joka on käytettävissä Finnan kautta yliopiston verkossa tai etänä.

Julkaisuja voi tarkastella jo valmiiksi työkalussa olevien organisaatioiden, maiden, maanosien tai tutkimusaiheiden tasolla. Käyttäjä voi itse luoda tarkasteltavia kohteita eli entiteettejä lisäämällä yksittäisiä tutkijoita ja muodostamalla heistä tutkimusryhmiä tai -yksikköjä. Myös valittujen julkaisujen joukkoja voi tarkastella.

Explore-moduulissa voi analysoida eri indikaattoreita, tutkimusaiheita sekä yhteistyöorganisaatioita. Compare-moduulissa voi vertailla valittujen entiteettien tai esim. korkeakoulujen tutkimustoimintaa. SciValista löytyvistä tiedoista voi koostaa erilaisia kaavioita ja kuvioita sisältäviä analyysiraportteja, joita pystyy muokkaamaan Reporting-osiossa.

Ohjeita SciValin käyttöön löytyy heidän omasta LibGuide-oppaasta.

Virheellisten julkaisutietojen korjaaminen

Viittaustietokannoissa voi olla korkeakoulujen nimistä eri versioita, joten on mahdollista, että julkaisuja jää huomioimatta tai ne tulkitaan toisen organisaation julkaisuiksi. Tämän vuoksi on tärkeää, että julkaisemasi artikkelin tiedoissa lukee aina korkeakoulusi virallinen nimi oikein! Tutkimusyksikön, -keskuksen tai -ohjelman nimi ei riitä osoittamaan, että kyseessä on korkeakoulusi julkaisu.

Jos huomaat, että viittaustietokannassa on julkaisusi tiedoissa virheitä tai puutteita tai kaikki julkaisusi eivät ole rekisteröityneet profiilisi alle, kannattaa niitä pyytää aina korjattavaksi.

Saavutettavuusseloste — Opas on jaettu CC BY 4.0 -lisenssilläCC-lisenssi.Nimeä.