Citeringar till tidigare litteratur används i stor utsträckning för att mäta kunskapernas kvalitet och spridning. Men vi vet inte mycket om de olika sätt på vilka en undersökning kan citeras, i synnerhet om det hänvisas till dokument för att peka på deras förtjänster eller deras brister? Vi utvecklade en metod för att karakterisera "negativa" citeringar med hjälp av bibliometrisk data och behandling av naturligt språk. Vi fann att negativa citeringar gällde artiklar av högre kvalitet, var fokuserade på en studies resultat snarare än teorier eller metoder, och härrörde från forskare som var närmare författarna till den fokala tidningen i termer av disciplin och socialt avstånd, men inte geografiskt. Att få en negativ citering var också förknippat med en något snabbare minskning av citeringar till tidningen i det långa loppet. Sociala studier av vetenskap  på citeringsanalys  på bibliometrisk teknik  på naturspråksbearbetning  och negativa citeringar Vetenskaplig kunskap är ett viktigt bidrag för ekonomiskt välstånd (1-3) och utvecklas tack vare de kompletterande bidragen från olika forskare. De normer som reglerar forskarsamhället samordnar denna strävan (4-6). Citering av tidigare arbeten är en sådan norm och ett viktigt sätt att dokumentera kunskapsproduktionens kollektiva och kumulativa karaktär. Omnämnanden gör det möjligt att fastställa kredit och identifiera vetenskapliga paradigmer och deras förskjutningar (7, 8); de mäter effekterna och kvaliteten på upptäckter och, i förlängningen, en forskare, en institution eller en tidskrift (9, 10). Studier bygger också på citeringsdata för att analysera spridningen av vetenskapliga idéer, skapandet och utvecklingen av vetenskapliga nätverk, och de främsta vetenskapsmännens och uppfinningarnas roll (11) (12) (13) (14) (15) (16) (17). Mindre uppmärksamhet har ägnats åt de olika avsikterna bakom en hänvisning. I synnerhet kan man ibland hänvisa till begränsningar, inkonsekvenser eller brister som är ännu allvarligare, även om dokument ofta citeras på grund av att en aktuell studie är förenlig med tidigare arbete eller bygger på det. Dessa "negativa" citeringar kan ifrågasätta eller begränsa omfattningen och effekten av ett bidrag, en forskare eller en hel forskningslinje. Kritik som uttrycks genom citeringar kan också vara en del av den "falsifieringsprocess" som enligt Karl Popper karakteriserar vetenskapen och kan vara en signal om ett fälts soliditet (18). Den senaste tidens kritik och slutligen avfärdande av bevisen för gravitationsvågor och ultrasnabb expansion av universum i "big bang" tolkades till exempel som en utveckling i studiet av universums ursprung (19). Även för upptäckter som så småningom bekräftas kan kritik vara till nytta i processen. Till exempel drog den koperniska revolutionen nytta av och förfinades av Tycho Brahes iakttagelser om inkonsekvenser i den heliocentriska synen, trots den slutliga förfalskningen av Brahes teori (20). En grundlig klassificering och förståelse av olika typer av citeringar, och särskilt av negativa citeringar- deras förekomst, distribution inom forskningsområden och över tid, deras placering i en uppsats, och de kopplingar som de etablerar mellan studier och forskare-är därför en värdefull övning för att förstå vetenskapens utveckling. Denna förbättrade klassificering kan också erbjuda aktuella arkiv av vetenskapligt arbete (som Google Scholar, PubMed, ISI Web of Science, och Scopus) en möjlighet att förbättra sin sökning och ranking algoritmer; genom att extrahera mer information från citeringar, kan vi avslöja mer information, avvisa falsk kunskap snabbare, och i slutändan förbättra den vetenskapliga diskursen. En sådan klassificering är emellertid svår att utföra och skulle ha varit omöjlig för bara några år sedan. De senaste framstegen inom behandling av naturligt språk (NLP) (21) och i förmågan att tolka och analysera stora delar av texten gör det emellertid nu möjligt för oss att rekonstruera det sammanhang i vilket en hänvisning gjordes, och därför förstå varför en viss studie citerades i första hand. Vi utvecklade en metod för att identifiera citeringar som ifrågasätter giltigheten av tidigare resultat och för att analysera deras incidens och mönster för att bestämma deras roll, relevans och påverkan med hjälp av bibliometriska data, NLP-tekniker och domänexperter. I denna studie ger vi belägg för (i) hur negativa citeringar uttrycks, (ii) deras förekomst eller frekvens, (iii) de typer av papper som får dessa kritiker och de typer av papper som gör kritiken, (iv) de delar av en studie som är negativt citerade (t.ex. teori, resultat, konsekvenser, etc.), v) förhållandet mellan de åberopade och citerade författarna och vi) konsekvenserna av en negativ citering när det gäller framtida citeringar. För att garantera homogenitet i analysen och definiera en genomförbar testplats baserades analysen i detta dokument på 15 731 artiklar i fulltext i tidskriften Journal of Immunology (1998Immunology (2007) och 76 2 355 citeringar i dessa dokument. Detaljer om våra rutiner finns i Material och Metoder och Supporting Information. Av 762,355 citeringar från 15,731 artiklar i tidskriften Journal of Immunology (1998Immunology ( -2007 identifierade vi 18,304 som negativa (ca 2,4 % av det totala antalet). De 762355 citaten hänvisar till 146.891 unika papper, och av dessa dokument 10.405 (ca 7.1%) fick minst en negativ citering. Även om incidensen på perciteringsbasis är relativt låg, fick således ett icke-trivialt antal dokument minst en negativ citering. Å ena sidan kan den låga frekvensen vara bevis på en begränsad, oinfluentiell roll av negativa citeringar, eller av betydelse Tillhandahålla en detaljerad klassificering av de typer av citeringar som en artikel får är viktigt för att fastställa kvaliteten på en studie och för att karakterisera hur aktuell forskning bygger på tidigare arbete. Den metod som vi föreslår informerar också om hur man kan förbättra citeringsprocessen, till exempel genom att låta forskare bifoga ytterligare metadata till sina citeringar. Metoden är skalbar till andra områden och perioder och kan även användas för att identifiera andra typer av citeringar (t.ex. återanvändning av metoder, material, empiriska teoritester osv.). Slutligen, våra metoder ger online-arkiv som Google Scholar, PubMed, ISI Web of Science och Scopus ett sätt att förbättra sin sökning och ranking algoritmer.
Omnämnanden som mått för att mäta effekten av papper har varit kontroversiella, särskilt på grund av förekomsten av tvivelaktiga citeringar REF.
The incidence and role of negative citations in science
{'venue': 'Proceedings of the National Academy of Sciences of the United States of America', 'journal': 'Proceedings of the National Academy of Sciences of the United States of America', 'mag_field_of_study': ['Medicine']}