Stikkordarkiv: Impact Factor

Høystatuspublisering

Det skal ikke så mye fantasi til for å se for seg at forskere vil strekke seg etter å publisere i tidsskrifter med høyest mulig status, slik som f.eks. Nature og Science. Hvem er det som bestemmer denne statusen? Jo, f.eks. mediegiganten Thomson Reuters, som «eier» rangeringsmålestokken Impact Factor. Eller det fulle navnet Thomson Reuters Impact Factor, kjent som IF for de innvidde.

IF 10 på topp 2011

IF 10 på topp 2011

Nå kan vi jo tenke oss at noen vil strekke seg for langt, vha manglende kritisk blikk og i verste fall juks. Det er et faktum at slikt forekommer, at det har økt noe i omfrang, og at det er mest framtredende i – ja nettopp – høystatustidsskriftene. Det er Björn Brembs and Marcus Munafò som legger fram empiriske belegg for disse påstandene i artikkelen Deep Impact: Unintended consequences of journal rank (som jeg har blitt oppmerksom på gjennom Pål Magnus Lykkja). De har sett på i hvor stor grad artikler blir trukket tilbake (mest i tidsskrifter med høy IF) samt andre mål på artiklenes kvalitet, blant annet i hvor stor grad de blir bekreftet av supplerende forskning og i hvor stor grad de siteres.

Brembs og Munafò konkluderer med at det bare er en svak positiv sammenheng mellom en artikkels kvalitet (impact) og tidsskriftets IF. Men det er derimot en ganske sterk sammenheng mellom IF og antall artikler som trekkes tilbake eller «forfaller» (dvs ikke bekreftes). Og videre at «Journal rank is expensive, delays science and frustrates researchers».

Forfatterne ønsker seg en reform hvor dagens tidsskriftsystem forlates og erstattes av institusjonelle publiseringskanaler og arkiver, i regi av bibliotekene. Hermed forkaster de også «tradisjonell open access-publisering» som bærekraftige alternativer.

Les artikkelen og bedøm. Den er ikke publisert i noe topp-IF-tidsskrift, men i arXiv.org.

Om velting av hellige kyr

Fra TV2s nettsider i dag: «Bibliotekdirektør Taxt usikker på hvor hun skal finne penger til å kjøpe nødvendig faglitteratur – – – Markedet for vitenskapelige tidsskrifter er unikt, ettersom etterspørselen ikke påvirkes av pris – – – Forskningsministeren ønsker ikke å kommentere saken»Rådyre tidsskrifter kveler økonomien til universiteter og høyskoler )

Vi har hørt det før. I mange år. Og lurer etter hvert på om vi ikke er flinke nok til å skjøtte kunderollen i dette markedet. Tja, det er kanskje grunn til å finslipe våre verktøy, f.eks. til kost-nytte-vurderinger. Er det f.eks. sikkert at Thomson Reuters’ Impact Factor (IF) er en god måleenhet? Dette er blant spørsmålene Björn Brembs stiller i blogginnlegget Do you really want to publish in a high-retraction journal?

Han spør bl.a. «If your livelihood depends on this Science/Nature paper, doesn’t the pressure increase to maybe forget this one crucial control experiment, or leave out some data points that don’t quite make the story look so nice?»

Og han viser med regresjonsanalyse at måleenheten IF ikke er veldig egnet til å forutsi etterspørselen av en gitt artikkel (antall siteringer), men bedre til å forutsi omfanget av tilbaketrekkinger av artikler fra et gitt tidssskrift!

Eller sagt med litt andre ord og litt spissere: Å publisere i et tidsskrift med høy IF er så ettertraktet at man fristes til å renonsere litt her og der for å nå fram. Samtidig som IF er et tvilsomt kvalitetsmål (noe Brembs begrunner på forskjellige måter).

Se også:

http://retractionwatch.wordpress.com/ (mer om tilbaketrekkingsfenomenet.)
http://www.slideshare.net/brembs/whats-wrong-with-scholarly-publishing-today-ii (mer fra Björn Brembs)

300px-Cow_lying_on_side.jpg (300×163)

http://upload.wikimedia.org/wikipedia/commons/thumb/0/0b/Cow_lying_on_side.jpg/300px-Cow_lying_on_side.jpg

En annen som stiller grunnleggende spørsmål om mekanismene for vitenskapelig publisering er Herbert van de Sompel fra Los Alamos National Laboratory (kanskje mest kjent som oppfinneren av OpenURL og SFX). I en presentasjon på SWIB11 (Semantic Web in Bibliotheken) i Hamburg for en måned siden tok han et oppgjør med disse mekanismene: Tipping the Sacred Cow: Thinking Beyond the Journal System

Han mener at det er nokså drastiske endringer som må til, bl.a. må hellige kyr veltes. Hans presentasjon anbefales. Den omfatter mange sider ved publiseringsvirksomheten, som f.eks. alternative måter for vurdering og arkivering.

Altså:

Vi kommer ingen vei med å bli enda flinkere og tøffere som kunder i dagens marked. Vi må ha ett nytt opplegg for publisering. Det må være bygd på åpen publisering. Hellige kyr må veltes.  Og vi – det er vel bibliotekene og forskerne i fellesskap det?