피인용지수

3. 계산 방법

학술지의 피인용지수는 특정 기간 동안 그 학술지에 게재된 논문의 수와 피인용 수에 의해 결정된다. 이는 기본적으로 학술지에 실린 논문들의 피인용 횟수의 평균을 의미한다.

일반적인 계산식은 다음과 같다.^[35]

:$\backslash text\{피\; 인\; 용\; 지\; 수\; \}\; =\; \backslash frac\; \{\backslash text\{학\; 술\; 지\; 에\; 실\; 린\; 논\; 문\; 이\; 다\; 른\; 논\; 문\; 에\; 인\; 용된\; 횟\; 수\; \}\}\; \{\backslash text\{학\; 술\; 지\; 에\; 실\; 린\; 논\; 문\; 의\; 총\; 수\; \}\}$

같은 학술지라도 측정 기간에 따라 피인용지수 값이 달라질 수 있다. 일반적으로 최근 2년간의 데이터를 사용하지만, 3년 또는 5년으로 사용하는 경우도 있다. 예를 들어, 사이언스의 2014년 피인용지수는 33.61, 5년간 피인용지수는 35.26이었다.^[230] 이는 2012년, 2013년 두 해 동안 사이언스에 실린 논문들이 평균 33.61회 인용되었음을 의미하고, 2009-2013년의 5년 동안 사이언스에 실린 논문들이 평균 35.26회 인용되었음을 의미한다.

2년 저널 피인용지수는 해당 저널의 이전 2년 동안 출판된 논문에 대해 그 해에 받은 피인용 횟수와 이전 2년 동안 해당 저널에 출판된 총 "인용 가능한 항목" 수의 비율이다.^[6]

:$$\backslash text\{IF\}\_y\; =\; \backslash frac\{\backslash text\{Citations\}\_y\}\{\backslash text\{Publications\}\_\{y-1\}\; +\; \backslash text\{Publications\}\_\{y-2\}\}.$$

예를 들어, 네이처의 2017년 피인용지수는 다음과 같이 계산되었다.^[7]

:$$\backslash text\{IF\}\_\{2017\}\; =\; \backslash frac\{\backslash text\{Citations\}\_\{2017\}\}\{\backslash text\{Publications\}\_\{2016\}\; +\; \backslash text\{Publications\}\_\{2015\}\}\; =\; \backslash frac\{74090\}\{880\; +\; 902\}\; =\; 41.577.$$

이는 평균적으로 2015년과 2016년에 출판된 논문이 2017년에 각각 약 42회 인용되었음을 의미한다. 2017년 피인용지수는 2018년에 보고되는데, 이는 모든 2017년 출판물이 색인 기관에 의해 처리될 때까지 계산할 수 없기 때문이다.

피인용지수의 값은 "피인용 횟수"와 "출판물"(인용 가능한 항목)을 어떻게 정의하느냐에 따라 달라진다. 현재 "피인용 횟수"와 "출판물"은 클래리베이트 애널리틱스에 의해 독점적으로 정의된다.^[8] "출판물"은 Web of Science (WoS) 데이터베이스에서 "논문", "리뷰" 또는 "학술 회의 논문"^[101]으로 분류된 항목이며, 사설, 수정 사항, 노트, 철회 및 토론과 같은 다른 항목은 제외된다.

4. 적용

피인용지수는 같은 학문 분야의 비슷한 주제를 다루는 학술지를 서로 비교할 수 있게 정보를 전달하는 역할을 한다. 숫자가 높다고 하여 더 좋은 학술지인 것은 아니며, 서로 다른 학문을 비교하는 것도 큰 의미가 없다.^[232] 원래는 대학 도서관 사서가 어떤 저널을 구매할지 결정하는 데 도움을 주기 위해 고안되었지만, 곧 학문적 성공을 평가하는 척도로 사용되었다.

피인용지수는 저널 수준의 지표이지 논문 또는 개인 수준의 지표가 아니기 때문에 이러한 사용은 논란의 여지가 있다. JIF의 발명가인 유진 가필드(Eugene Garfield)는 "단일 저널 내에서 논문마다 인용 횟수가 크게 다르기" 때문에 "개인을 평가하는 데 오용"될 수 있다고 경고했다.^[15] 이러한 경고에도 불구하고 JIF의 사용은 개별 연구자, 채용 지원서 및 연구비 지원 제안을 평가하는 과정에서 핵심적인 역할을 하고 있다.

피인용지수와 인용 분석은 일반적으로 분야 의존적 요인의 영향을 받는다고 알려져 있다.^[141] 또한 분야 간뿐만 아니라, 동일 분야의 서로 다른 연구 영역 간에도 비교가 무효화될 가능성이 있다.^[142] 출판 후 처음 2년 동안 발생하는 총 인용 비율도 분야에 따라 크게 다르다.^[143] 따라서, 피인용지수를 사용하여 분야를 초월하여 저널을 비교하는 것은 어렵다.

피인용지수는 저널뿐만 아니라 그 안의 논문을 평가하기 위해 사용되는 경우가 있다.^[144] 그러나, 이상치의 영향을 크게 받는다. 예를 들어, ''Acta Crystallographica Section A''의 피인용지수는 특정 논문으로 인해 2008년에 2.051이었던 것에 비해 2009년에는 49.926이 되었고, ''네이처'' (31.434)나 Science (28.103)를 넘어섰다.^[145] 이러한 현상이 일어날 수 있기 때문에, 피인용지수는 저널의 지표이며, 개별 연구자나 기관을 평가하기 위해 사용해서는 안 된다는 생각이 주류를 이루고 있다.^{[147][148][149]}

5. 비판

피인용지수는 학술지의 영향력을 평가하는 지표로 널리 사용되지만, 여러 비판에 직면해 있다. 본래 학술지 정보를 제공하기 위해 고안되었으나, 개별 논문이나 연구자를 평가하는 데 오용되면서 문제가 발생하고 있다.^[233][234]

피인용지수는 인용 횟수를 기반으로 계산되는데, 리뷰 논문에 의한 과대 평가, 자기 인용 등의 문제로 인해 신뢰도가 떨어질 수 있다.^[235] 또한, 통계적 타당성 문제,^{[2][18][19][20][55]} 편집 정책 왜곡,^[33][34] 학문 분야 간 비교의 어려움^[232] 등 다양한 비판이 제기된다.

피인용지수 강조는 연구의 질보다 학술지의 명성을 우선시하는 출판 관행을 조장하며, 연구 주제 및 방법론의 다양성을 저해할 수 있다는 비판도 있다.^[22] 이는 신자유주의 정책이 학계에 미치는 부정적 영향의 결과라는 주장도 제기된다.^[23][24]

이러한 문제점을 해결하기 위해 유럽 과학 편집자 협회(EASE)는 피인용지수의 신중한 사용을 권고했으며,^[198] 국제 과학 협의회(ICSU)는 연구 평가 방식 개선을 위한 제안을 제시했다.^[199] 독일 연구 진흥 협회(DFG) 등 여러 기관에서는 연구 평가 시 논문의 질을 우선적으로 고려하는 정책을 도입하고 있다.^[200] 또한, 연구 평가에 관한 샌프란시스코 선언(DORA)을 통해 피인용지수의 부적절한 사용에 대한 문제 제기가 이루어지고 있으며,^[201] 일부 출판사 및 플랫폼은 피인용지수를 표시하지 않는 방식을 채택하고 있다.

5. 1. 통계적 문제점

5. 2. 편집 정책

5. 3. 학문 분야 간 차이

5. 4. 연구 평가에 미치는 영향

6. 대한민국의 상황

대한민국에서는 대학 평가, 연구비 지원, 교수 임용 등 연구 평가 전반에 걸쳐 피인용지수가 광범위하게 활용되고 있다. 특히, BK21, WCU 사업 등 대규모 정부 재정 지원 사업에서 피인용지수가 중요한 평가 지표로 사용되면서, 연구자들의 피인용지수 경쟁이 심화되었다.

도쿄 여자 의과대학은 2016년 교수 채용에서 피인용지수 합계가 15 이상이어야 한다는 조건을 제시했다.^[205] 후쿠이 대학은 2011년 조교 채용에서 채용 후 피인용지수가 10 이상인 잡지에 논문을 게재해야 한다는 조건을 계약 조건에 포함했다.^[206]

아키히토 친왕은 2015년 학술 세계에서 단기적인 성과를 요구하는 경향과 피인용지수 중심의 평가 방식에 대해 우려를 표명했다.^[209] 오스미 요시노리는 2016년 노벨상 수상 이후 인터뷰에서 젊은 연구자들이 연구의 즐거움을 알지 못하고 피인용지수에만 매달리는 현실을 비판했다.^[210] 2018년 노벨상 수상자 혼조 타스쿠는 피인용지수를 만든 회사를 비판하며, 논문의 가치를 모르는 사람들이 피인용지수를 사용한다고 지적했다.^[212]

이처럼 피인용지수 중심의 평가 방식은 연구의 질적 평가를 소홀히 하고, 연구의 다양성을 저해하며, 장기적인 연구를 어렵게 만든다는 비판이 제기되고 있다.

7. 관련 지표

• 피인용 반감기(Cited Half-life): 학술지에 게재된 논문이 피인용되는 기간의 중앙값이다. 예를 들어, 2005년의 저널 반감기가 5년이라면, 2001년부터 2005년까지의 인용이 2005년 해당 저널의 모든 인용의 절반을 차지하고, 나머지 절반은 2001년 이전에 인용된 것을 의미한다.^[93]
• 즉시성 지수(Immediacy index): 특정 연도에 학술지의 논문이 받은 피인용 횟수를 게재된 논문 수로 나눈 값이다.^[217]
• 저널 인용 지표(Journal Citation Indicator, JCI): 과학 분야를 조정한 JIF이며, Scopus 데이터베이스를 기반으로 계산된 논문당 출처 정규화 영향력과 유사하다.^[94] JCI는 Web of Science Core Collection(WoS CC)의 모든 저널(AHCI, ESCI, BCI, CPCI 포함)에 대해 사용할 수 있는 반면, JIF는 SCIE 및 SSCI에 대해서만 사용할 수 있다. 그러나 2023년 6월부터 JIF도 WoS CC의 모든 저널에 대해 발행될 예정이다.^[95]
• 기타 피인용 지표: CiteScore, h-지수, 알트메트릭스 등이 있다. CiteScore는 엘스비어에서 2016년 12월에 출시한 Scopus에 등재된 연재물의 지표이다.^[102][103] h-지수는 개별 연구자에게 적용되는 지표이다. 알트메트릭스는 논문 조회수, 다운로드, 또는 소셜 미디어 언급 등을 포함하며, 학계 안팎에서 즉각적인 사회적 영향에 더 집중하여 연구 영향력에 대한 다른 관점을 제공한다.^[104][105]

8. 대안적 평가 노력

연구 평가에 관한 샌프란시스코 선언(DORA), 라이덴 선언 등 국제적인 움직임을 통해 피인용지수 중심의 평가에서 벗어나려는 노력이 이루어지고 있다.^{[58][59][104]} 이러한 움직임은 학술 커뮤니케이션 시스템의 근본적인 변화를 요구하고 있다.^[57]

일부 대학 및 연구 기관에서는 피인용지수를 사용하지 않거나, 다양한 지표를 함께 고려하는 방식으로 연구 평가 방식을 개선하고 있다. 예를 들어, 유럽 과학 편집자 협회(EASE)는 2007년 공식 성명을 통해 저널 피인용지수는 전체 저널의 영향력을 측정하고 비교하는 데에만 신중하게 사용되어야 하며, 개별 논문 평가, 연구자나 연구 프로그램 평가에는 절대 사용해서는 안 된다고 권고했다.^[19] 독일 연구 재단은 2010년 자금 지원 신청 시 제출 가능한 출판물 수를 줄이는 새로운 지침을 발표하면서, "누가 어떤 연구를 했는가보다는 얼마나 많은 논문을 어디에 게재했는가에 초점을 맞추지 않았다"고 언급했다.^[81]

미국 세포 생물학회는 학술 저널 편집자 및 출판사 그룹과 함께 연구 평가에 관한 샌프란시스코 선언(DORA)을 만들었다. 2013년 5월에 발표된 DORA는 수천 명의 개인과 수백 개의 기관으로부터 지지를 얻었으며,^[24] 2015년 3월에는 유럽 연구 대학교 연맹도 이 문서를 지지했다.^[84]

2021년, 위트레흐트 대학교는 임팩트 팩터를 포함한 모든 정량적 서지 계량을 폐기하겠다고 발표했다.^[89][90] 이는 2018년 네덜란드 연구 위원회(NWO)가 모든 콜 텍스트 및 신청 양식에서 저널 임팩트 팩터와 h-index에 대한 모든 언급을 삭제하기로 결정한 데 따른 것이다.^[91]

연구의 질적 평가, 연구 과정의 투명성, 연구 결과의 사회적 영향력 등을 종합적으로 고려하는 평가 방식이 필요하다는 인식이 확산되고 있다.

참조

_[1] 논문 Use of the journal impact factor for assessing individual articles: Statistically flawed or not? 2021-03-01
_[2] 논문 Relative Citation Ratio (RCR): A New Metric That Uses Citation Rates to Measure Influence at the Article Level. 2016-09
_[3] 논문 Thomson Corporation acquired ISI http://www.highbeam.[...] 2012-02-26
_[4] 간행물 Acquisition of the Thomson Reuters Intellectual Property and Science Business by Onex and Baring Asia Completed https://www.prnewswi[...] 2016-10-03
_[5] 웹사이트 Journal Citation Reports https://clarivate.co[...] 2019-09-14
_[6] 웹사이트 Web of Science Group https://clarivate.co[...] 2020-07-28
_[7] 서적 2017 Journal Citation Reports Thomson Reuters
_[8] 논문 Casting a wide net: The Journal Impact Factor numerator
_[9] 웹사이트 RSC Advances receives its first partial impact factor http://blogs.rsc.org[...] 2018-07-16
_[10] 뉴스 Our first (partial) impact factor and our continuing (full) story https://crosstalk.ce[...] 2014-07-30
_[11] 웹사이트 JCR with Eigenfactor http://www.thomsonre[...] 2009-08-26
_[12] 웹사이트 ISI 5-Year Impact Factor https://apa.org/pubs[...] 2017-11-12
_[13] 논문 Journal impact factors 1998-12
_[14] 논문 The history and meaning of the journal impact factor 2006-01
_[15] 논문 "[The impact factor and its proper application]" http://www.garfield.[...] 1998-06
_[16] 논문 Use of the Journal Impact Factor in academic review, promotion, and tenure evaluations 2019-07
_[17] 논문 Thinking with indicators. Exploring the epistemic impacts of academic performance indicators in the life sciences https://academic.oup[...] 2017-07-01
_[18] 논문 Time to remodel the journal impact factor 2016-07
_[19] 웹사이트 EASE Statement on Inappropriate Use of Impact Factors http://www.ease.org.[...] 2012-07-23
_[20] 논문 Beat it, impact factor! Publishing elite turns against controversial metric 2016-07
_[21] 논문 Evaluation by Citation: Trends in Publication Behavior, Evaluation Criteria, and the Strive for High Impact Publications 2016-02
_[22] 논문 Ignoring journal metrics on CVs is an act of privilege https://www.nature.c[...] 2024-11-12
_[23] 웹사이트 It's the Neoliberalism, Stupid: Why instrumentalist arguments for Open Access, Open Data, and Open Science are not enough http://blogs.lse.ac.[...] 2018-07-16
_[24] 논문 The Index and the Moon. Mortgaging Scientific Evaluation http://ijoc.org/inde[...]
_[25] 논문 What do citation counts measure? A review of studies on citing behavior
_[26] SSRN Quantifying the Life Cycle of Scholarly Articles Across Fields of Economic Research 2014-11-11
_[27] 논문 Why Do Statistics Journals Have Low Impact Factors?
_[28] 논문 Hate journal impact factors? New study gives you one more reason
_[29] 웹사이트 House of Commons – Science and Technology – Tenth Report https://publications[...] 2004-07-07
_[30] 논문 Why the impact factor of journals should not be used for evaluating research 1997-02
_[31] 웹사이트 EASE Statement on Inappropriate Use of Impact Factors http://www.ease.org.[...] 2013-04-13
_[32] 보고서 The Metric Tide: Report of the Independent Review of the Role of Metrics in Research Assessment and Management 2015-07
_[33] 뉴스 The Number That's Devouring Science http://chronicle.com[...] 2005-10-14
_[34] 논문 Nefarious Numbers
_[35] 웹사이트 The Clarivate Impact Factor https://clarivate.co[...] 1994-06-20
_[36] 논문 Influential variables in the Journal Impact Factor of Dentistry journals 2020-03
_[37] 논문 The impact factor game. It is time to find a better way to assess the scientific literature 2006-06
_[38] 논문 Corruption of journal Impact Factors http://www.eeb.corne[...] 2005-04
_[39] 논문 Impact factor bias and proposed adjustments for its determination 2002-08
_[40] 논문 Reaction of Folia Phoniatrica et Logopaedica on the current trend of impact factor measures
_[41] 웹사이트 Journal Citation Reports – Notices http://admin-apps.is[...] 2009-09-24
_[42] 논문 Should authors cite sources suggested by peer reviewers? Six antidotes for handling potentially coercive reviewer citation suggestions 2020-09-25
_[43] 논문 Scientific publications. Coercive citation in academic publishing 2012-02
_[44] 논문 Business journals combat coercive citation 2012-03
_[45] 논문 Widow can be inseminated with husband's sperm 1997-02
_[46] arXiv The Journal Impact Factor: A Brief History, Critique, and Discussion of Adverse Effects
_[47] 논문 Let's move beyond the rhetoric: it's time to change how we judge research 2018-02
_[48] 논문 The seven sins of L2 research: A review of 30 journals' statistical quality and their CiteScore, SJR, SNIP, JCR Impact Factors
_[49] 논문 The top-ten in journal impact factor manipulation
_[50] 논문 Rising publication delays inflate journal impact factors
_[51] 논문 Authorship and citation manipulation in academic research
_[52] 논문 Citation Statistics: A Report from the International Mathematical Union (IMU) in Cooperation with the International Council of Industrial and Applied Mathematics (ICIAM) and the Institute of Mathematical Statistics (IMS) https://www.mathunio[...] 2009
_[53] 논문 Prestigious Science Journals Struggle to Reach Even Average Reliability
_[54] arXiv The Impact Factor's Matthew Effect: A Natural Experiment in Bibliometrics
_[55] 논문 Deep impact: unintended consequences of journal rank 2013-06-24
_[56] 논문 Relationship between journal impact factor and the thoroughness and helpfulness of peer reviews 2023-08-29
_[57] 논문 Excellence or quality? Impact of the current competition regime on science and scientific publishing in Latin America and its implications for development https://journals.sag[...] 2014-09
_[58] 논문 'Excellence R Us': University Research and the Fetishisation of Excellence
_[59] 논문 Responsible Research and Innovation: From Science in Society to Science for Society, with Society
_[60] 논문 Open Access and the Divide between 'Mainstream" and "peripheral
_[61] 논문 How significant are the public dimensions of faculty work in review, promotion and tenure documents? 2019-02
_[62] 논문 Show me the data 2007-12
_[63] 논문 The counting house 2002-02
_[64] 논문 Sprucing up one's impact factor 1999-09
_[65] 웹사이트 Just how widespread are impact factor negotiations? http://bjoern.brembs[...] 2020-07-14
_[66] 논문 Beat it, impact factor! Publishing elite turns against controversial metric 2016-07
_[67] 뉴스 Citation Statistics http://www.mathunion[...] International Mathematical Union 2008-06-12
_[68] 논문 Not-so-deep impact 2005-06
_[69] 논문 The weakening relationship between the impact factor and papers' citations in the digital age
_[70] 뉴스 New impact factors yield surprises https://www.the-scie[...] 2024-10-23
_[71] 웹사이트 What does it mean to be #2 in Impact? http://community.tho[...] 2010-06-17
_[72] 간행물 A Simple Proposal for the Publication of Journal Citation Distributions
_[73] 웹사이트 Measuring Up: Impact Factors Do Not Reflect Article Citation Rates http://blogs.plos.or[...] PLOS
_[74] 웹사이트 Ditching Impact Factors for Deeper Data http://www.the-scien[...] 2016-07-29
_[75] 학술지 Bad summer for the journal impact factor 2016
_[76] 서적 The Journal Impact Factor: A Brief History, Critique, and Discussion of Adverse Effects Springer International Publishing 2019
_[77] 학술지 Modeling and Prediction of the Impact Factor of Journals Using Open-Access Databases: With an Application to the Austrian Journal of Statistics https://www.ajs.or.a[...] 2020-06-19
_[78] 학술지 Reviewers are blinkered by bibliometrics 2017-04
_[79] 웹사이트 Informing Research Choices: Indicators and Judgment https://cca-reports.[...] 2021-08-16
_[80] 웹사이트 International Council for Science statement http://www.icsu.org/[...] Icsu.org 2014-05-02
_[81] 웹사이트 Quality not Quantity: DFG Adopts Rules to Counter the Flood of Publications in Research https://www.dfg.de/e[...] Deutsche Forschungsgemeinschaft 2010-02-23
_[82] 뉴스 Departmental H-Index is a more transparent, fair and cost-effective method for distributing funding to universities. https://blogs.lse.ac[...] 2013-02-08
_[83] 웹사이트 Business as usual in judging the worth of a researcher? http://www.theguardi[...] 2012-11-30
_[84] 웹사이트 Not everything that can be counted counts … http://www.leru.org/[...] League of European Research Universities 2015-03-16
_[85] 학술지 Beat it, impact factor! Publishing elite turns against controversial metric 2016-07
_[86] 학술지 Time to remodel the journal impact factor 2016-07
_[87] 웹사이트 Journal Information https://journals.plo[...]
_[88] 웹사이트 FAQ https://academic.mic[...]
_[89] 학술지 Impact factor abandoned by Dutch university in hiring and promotion decisions 2021-07
_[90] 웹사이트 Recognition and rewards {{!}} Universiteit Utrecht https://www.uu.nl/en[...]
_[91] 웹사이트 DORA {{!}} NWO https://www.nwo.nl/e[...]
_[92] 웹사이트 Scientists at odds on Utrecht University reforms to hiring and promotion criteria https://www.naturein[...] 2021-08-09
_[93] 웹사이트 Impact Factor, Immediacy Index, Cited Half-life http://www.bib.slu.s[...] Swedish University of Agricultural Sciences
_[94] 웹사이트 Journal impact factor gets a sibling that adjusts for scientific field https://www.science.[...] 2021-06-30
_[95] 웹사이트 Web of Science Journal Evaluation Process and Selection Criteria https://clarivate.co[...] 2022-07-26
_[96] 웹사이트 Scientific & Academic Research https://support.clar[...] Clarivate
_[97] 웹사이트 Journal Impact Factor Percentile https://jcr.help.cla[...]
_[98] 웹사이트 Bibliometrics (journal measures) http://www.elsevier.[...] Elsevier
_[99] 웹사이트 Glossary of Thomson Scientific Terminology http://ip-science.th[...] Thomson Reuters
_[100] 웹사이트 Journal Citation Reports Contents – Immediacy Index http://admin-apps.we[...] Clarivate Analytics
_[101] 학술지 The journal impact factor denominator: defining citable (counted) items 2009-09
_[102] 웹사이트 Metrics – Features – Scopus – Solutions https://www.elsevier[...]
_[103] 학술지 Controversial impact factor gets a heavyweight rival 2016-12
_[104] 학술지 Bibliometrics: The Leiden Manifesto for research metrics 2015-04
_[105] 웹사이트 Altmetrics: A manifesto http://altmetrics.or[...] 2010-10-26
_[106] 논문 The story of fake impact factor companies and how we detected them
_[107] 웹사이트 Misleading Metrics https://scholarlyoa.[...]
_[108] 웹사이트 Misleading Metrics – Beall's List https://beallslist.n[...]
_[109] 논문 Alternative journal impact factors in open access publishing
_[110] 웹사이트 Scholarly Open-Access – Fake impact factors https://scholarlyoa.[...]
_[111] 보고서 Discussion document: Predatory Publishing Committee on Publication Ethics 2019-11-01
_[112] 웹사이트 Master Journal List https://mjl.clarivat[...] Clarivate
_[113] 논문 Validated Measures of Publication Quality: Guide for Novice Researchers to Choose an Appropriate Journal for Paper Submission 2016-04
_[114] 논문 The Rigor and Transparency Index Quality Metric for Assessing Biological and Medical Science Methods https://www.scienced[...] 2020-11-20
_[115] 웹사이트 Every journal has a story to tell https://clarivate.co[...] Clarivate Analytics 2019-03-15
_[116] 논문 Thomson Corporation acquired ISI http://www.highbeam.[...] 2012-02-26
_[117] 웹사이트 Acquisition of the Thomson Reuters Intellectual Property and Science Business by Onex and Baring Asia Completed https://www.prnewswi[...] 2021-05-16
_[118] 웹사이트 Journal Citation Reports https://clarivate.co[...] 2019-09-14
_[119] 웹사이트 Web of Science Group https://clarivate.co[...] 2020-07-28
_[120] 논문 The Thomson Reuters Impact Factor https://clarivate.co[...] Thomson Reuters 1994-06-20
_[121] 서적 2017 Journal Citation Reports Thomson Reuters
_[122] 논문 The Journal Impact Factor Denominator
_[123] 논문 Casting a wide net: The Journal Impact Factor numerator
_[124] 웹사이트 RSC Advances receives its first partial impact factor http://blogs.rsc.org[...] 2018-07-16
_[125] 웹사이트 Our first (partial) impact factor and our continuing (full) story http://news.cell.com[...] 2015-05-21
_[126] 웹사이트 JCR with Eigenfactor http://www.thomsonre[...] 2009-08-26
_[127] 웹사이트 ISI 5-Year Impact Factor https://apa.org/pubs[...] 2017-11-12
_[128] 논문 Use of the Journal Impact Factor in academic review, promotion, and tenure evaluations 2019-07-31
_[129] 논문 Journal impact factors 1998
_[130] 논문 The History and Meaning of the Journal Impact Factor http://garfield.libr[...] 2006
_[131] 논문 The Impact Factor and Using It Correctly http://www.garfield.[...] 1998-06
_[132] 간행물 The Agony and the Ecstasy - The History and the Meaning of the Journal Impact Factor http://garfield.libr[...] presented at the International Congress on Peer Review and Biomedical Publication, Chicago, U.S.A. 2005-09-16
_[133] 논문 Time to remodel the journal impact factor
_[134] 웹사이트 European Association of Science Editors (EASE) Statement on Inappropriate Use of Impact Factors http://www.ease.org.[...] 2012-07-23
_[135] 논문 Beat it, impact factor! Publishing elite turns against controversial metric 2016
_[136] 논문 Deep impact: Unintended consequences of journal rank
_[137] 논문 Show me the data 2007-12-17
_[138] 논문 Evaluation by Citation: Trends in Publication Behavior, Evaluation Criteria, and the Strive for High Impact Publications
_[139] 웹사이트 It's the Neoliberalism, Stupid: Why instrumentalist arguments for Open Access, Open Data, and Open Science are not enough http://blogs.lse.ac.[...] 2018-07-16
_[140] 논문 The Index and the Moon. Mortgaging Scientific Evaluation http://ijoc.org/inde[...]
_[141] 논문 What do citation counts measure? A review of studies on citing behavior
_[142] 논문 Quantifying the Life Cycle of Scholarly Articles Across Fields of Economic Research 2014-11-11
_[143] 논문 Why Do Statistics Journals Have Low Impact Factors?
_[144] 논문 Hate journal impact factors? New study gives you one more reason
_[145] 뉴스 New impact factors yield surprises http://www.the-scien[...] 2011-03-31
_[146] 웹사이트 What does it mean to be #2 in Impact? http://community.tho[...] 2018-07-16
_[147] 논문 Why the impact factor of journals should not be used for evaluating research
_[148] 논문 EASE Statement on Inappropriate Use of Impact Factors http://www.ease.org.[...] European Association of Science Editors 2013-04-13
_[149] 논문 The Metric Tide: Report of the Independent Review of the Role of Metrics in Research Assessment and Management http://rgdoi.net/10.[...] 2015
_[150] 논문 Comparing the expert survey and citation impact journal ranking methods: Example from the field of Artificial Intelligence http://www.aserenko.[...]
_[151] 논문 Science perceived through the Science Citation Index
_[152] 뉴스 The Number That's Devouring Science http://chronicle.com[...] 2005-10-14
_[153] 논문 Nefarious Numbers
_[154] 논문 The Thomson Reuters Impact Factor https://clarivate.co[...] Thomson Reuters 1994-06-20
_[155] 논문 The Impact Factor Game 2006-06-06
_[156] 논문 Corruption of Journal Impact Factors http://www.eeb.corne[...]
_[157] 논문 Impact factor bias and proposed adjustments for its determination
_[158] 논문 Reaction of ''Folia Phoniatrica et Logopaedica'' on the Current Trend of Impact Factor Measures
_[159] 웹사이트 Journal Citation Reports – Notices http://admin-apps.is[...] 2009-09-24
_[160] 논문 Should authors cite sources suggested by peer reviewers? Six antidotes for handling potentially coercive reviewer citation suggestions https://onlinelibrar[...] 2020-09-25
_[161] 논문 Coercive Citation in Academic Publishing
_[162] 논문 Business Journals Combat Coercive Citation
_[163] 논문 Journal accused of manipulating impact factor
_[164] 논문 The Journal Impact Factor: A Brief History, Critique, and Discussion of Adverse Effects
_[165] 논문 Let's Move beyond the Rhetoric: It's Time to Change How We Judge Research
_[166] 논문 The seven sins of L2 research: A review of 30 journals' statistical quality and their CiteScore, SJR, SNIP, JCR Impact Factors https://journals.sag[...] 2019
_[167] 웹사이트 "Quality not Quantity" – DFG Adopts Rules to Counter the Flood of Publications in Research. https://www.dfg.de/e[...] 2020-05-16
_[168] 논문 The Top-Ten in Journal Impact Factor Manipulation
_[169] 논문 Rising Publication Delays Inflate Journal Impact Factors
_[170] 논문 Authorship and Citation Manipulation in Academic Research
_[171] 논문 Citation Statistics
_[172] 논문 Prestigious Science Journals Struggle to Reach Even Average Reliability
_[173] 논문 The Impact Factor's Matthew Effect: A Natural Experiment in Bibliometrics
_[174] 논문 Deep impact: Unintended consequences of journal rank
_[175] 논문 Excellence or Quality? Impact of the Current Competition Regime on Science and Scientific Publishing in Latin America and Its Implications for Development http://eprints.rclis[...]
_[176] 논문 Open Access and the Divide between 'Mainstream" and "peripheral
_[177] 논문 How Significant Are the Public Dimensions of Faculty Work in Review, Promotion, and Tenure Documents? https://hcommons.org[...]
_[178] 논문 Show Me the Data
_[179] 웹사이트 The Leiden Manifesto for Research Metrics http://www.leidenman[...] 2020-05-16
_[180] 웹사이트 Plan S implementation guidelines https://www.coalitio[...] 2020-05-16
_[181] 논문 'Excellence R Us': University Research and the Fetishisation of Excellence
_[182] 논문 Responsible Research and Innovation: From Science in Society to Science for Society, with Society
_[183] 논문 Bibliometrics: The Leiden Manifesto for Research Metrics
_[184] 논문 The counting house
_[185] 논문 Sprucing up one's impact factor https://www.nature.c[...] 1999-09
_[186] 논문 The Impact Factor Game 2006-06-06
_[187] 논문 Deep impact: Unintended consequences of journal rank
_[188] 웹사이트 Just how widespread are impact factor negotiations? http://bjoern.brembs[...] 2020-07-14
_[189] 논문 Beat it, impact factor! Publishing elite turns against controversial metric 2016
_[190] 논문 Beat it, impact factor! Publishing elite turns against controversial metric 2016-07-14
_[191] 뉴스 Citation Statistics http://www.mathunion[...] International Mathematical Union 2008-06-12
_[192] 논문 Not-so-deep impact 2005-06-23
_[193] 논문 The weakening relationship between the impact factor and papers' citations in the digital age
_[194] 논문 A Simple Proposal for the Publication of Journal Citation Distributions
_[195] 논문 Bibliometrics: The Leiden Manifesto for Research Metrics
_[196] 웹사이트 Ditching Impact Factors for Deeper Data http://www.the-scien[...] 2016-07-29
_[197] 논문 Bad summer for the journal impact factor 2016
_[198] 웹사이트 European Association of Science Editors (EASE) Statement on Inappropriate Use of Impact Factors http://www.ease.org.[...] 2012-07-23
_[199] 웹사이트 International Council for Science statement http://www.icsu.org/[...] Icsu.org 2014-05-18
_[200] 웹사이트 Quality not Quantity: DFG Adopts Rules to Counter the Flood of Publications in Research https://www.dfg.de/e[...] Deutsche Forschungsgemeinschaft 2018-07-16
_[201] 논문 The Index and the Moon. Mortgaging Scientific Evaluation http://ijoc.org/inde[...]
_[202] 웹사이트 Not everything that can be counted counts … http://www.leru.org/[...] League of European Research Universities 2021-05-16
_[203] 웹사이트 House of Commons – Science and Technology – Tenth Report https://publications[...] 2008-07-28
_[204] 웹사이트 Microsoft Academic https://academic.mic[...] 2020-12-15
_[205] 웹사이트 消化器外科学講座（消化管分野）教授 候補者の公募について 東女医大医教第16240号 http://www.twmu.ac.j[...] 東京女子医科大学　学長 吉岡俊正 2019-03-05
_[206] 웹사이트 福井大学 テニュアトラック教員 公募要項 https://www.jst.go.j[...] 国立大学法人福井大学 2019-03-05
_[207] 논문 歯学部教授選考をめぐって http://home.hiroshim[...] 広島大学 2015-04-11
_[208] 논문 インパクトファクターはどこへ行く？ 日本顕微鏡学会
_[209] 뉴스 秋篠宮さま、５０歳誕生日で質問とご回答＜１＞ https://archive.is/2[...] 読売新聞 2015-11-30
_[210] 뉴스 NHKスペシャル 追跡 東大研究不正 ～ゆらぐ科学立国ニッポン～ http://www6.nhk.or.j[...] NHK 2017-12-10
_[211] 뉴스 ノーベル生理学・医学賞受賞の大隅氏「視野の狭い研究者ほど客観指標に依存する」 https://newswitch.jp[...] 日刊工業新聞社 2019-03-05
_[212] Youtube 本庶佑さんが京大で会見 SankeiNews 2018年12月26日 oildPCAURkY
_[213] 웹사이트 数学の研究業績評価について https://mathsoc.jp/p[...] 社団法人 日本数学会 理事会 2003
_[214] 웹사이트 Impact Factor, Immediacy Index, Cited Half-life http://www.bib.slu.s[...] Swedish University of Agricultural Sciences 2016-10-30
_[215] 웹사이트 Bibliometrics (journal measures) http://www.elsevier.[...] Elsevier 2012-07-09
_[216] 웹사이트 Glossary of Thomson Scientific Terminology http://ip-science.th[...] Thomson Reuters 2012-07-09
_[217] 웹사이트 Journal Citation Reports Contents – Immediacy Index http://admin-apps.we[...] Clarivate Analytics 2012-07-09
_[218] 논문 The Journal Impact Factor Denominator
_[219] 웹사이트 Metrics – Features – Scopus – Solutions {{!}} Elsevier https://www.elsevier[...] 2016-12-09
_[220] 논문 Controversial impact factor gets a heavyweight rival
_[221] 논문 The story of fake impact factor companies and how we detected them
_[222] 논문 The story of fake impact factor companies and how we detected them
_[223] 웹사이트 Misleading Metrics https://scholarlyoa.[...]
_[224] 논문 Alternative journal impact factors in open access publishing
_[225] 웹사이트 Scholarly Open-Access – Fake impact factors https://scholarlyoa.[...] 2021-05-16
_[226] 웹사이트 Thomson Reuters Intellectual Property & Science Master Journal List http://ip-science.th[...] 2021-05-16
_[227] 논문 Validated Measures of Publication Quality: Guide for Novice Researchers to Choose an Appropriate Journal for Paper Submission 2016-04
_[228] 저널 https://science.scie[...]
_[229] 웹인용 https://www.enago.co[...]
_[230] 웹인용 https://www.sciencem[...] 2019-09-03
_[231] 저널 http://garfield.libr[...] 2019-09-03
_[232] 웹인용 https://www.seoul.co[...] 2019-09-03
_[233] 웹인용 https://www.sciencet[...] 2019-09-03
_[234] 웹인용 http://dongascience.[...] 2019-09-03
_[235] 웹인용 http://www.hani.co.k[...] 2019-09-03