SlideShare une entreprise Scribd logo
1  sur  34
Télécharger pour lire hors ligne
2020년 7월
엘스비어 코리아
장현주
연구성과 분석을 위한 기초:
Scopus, SciVal을 중심으로
Agenda
▪ Scopus, SciVal 기능 - 3
▪ 연구성과 평가 매트릭스 -16
▪ 학과단위의 연구성과 분석 - 24
▪ 실습 - 별도 자료
Scopus, SciVal 주요 기능
*자세한 기능은 각 솔루션별 상세 매뉴얼을 같이 참고하여 주시기 바랍니다.
3
Scopus (www.scopus.com)
▪ Scopus는 Elsevier 출판사에서 구축한 초록/인용데이터베이스로 학술연구의 탐색 출발점으로 관련 선행연구
및 연구동향을 분석할 수 있으며 연구 전략수립 시 활용
▪ 전세계 5,000개 이상의 출판사에서 출판되는 25,185 이상의 타이틀, 120,000여권의 인문 사회학 도서,
100,000여건의 컨퍼런스 등 등재 및 특허자료 링크
▪ 논문별 인용정보: 논문별 피 인용정보를 실시간 확인, 인용하거나, 인용된 논문 등 관련 논문 탐색 시 활용
▪ Author Profile: 저자의 연구성과 분석: 논문, 피인용 현황, 참고문헌, H-index 제공
▪ Affiliation Profile: 특정 기관명을 발표된 논문을 기반으로 기관별 페이지 제공하며, 기관의 논문, 인용,
저자, 주제정보, 연구협력 기관 정보 제공
▪ Journal Analyzer: 저널의 영향력 평가 및 분석, 논문, 피 인용도, SJR, SNIP, CiteScore 지수 제공
▪ 저널 등재: Scopus Content Selection & Advisory Board(CSAB)에서 타이틀 선정 기준에 따라 철저한
심사 후 등재 결정
▪ 평가도구로 활용: OECD, 주요 국가(미국, 유럽, 영국, 일본, 호주)의 정부 기관/ 연구위원회, 전세계
대학랭킹평가기관 (QS, THE, Financial Times), 우리나라 한국경제 등에서 연구 성과 평가 도구로 활용
<Scopus 등재 컨텐츠 현황>
Contents Active titles
Peer-reviewed
Journals
Trade
publication
Book Series
No. of titles 25,185 24,039 294 852
Subject Social Science Health Sciences Physical Sciences Life Sciences
No. of titles 10,465 7,129 8,443 4,890
Scopus, SciVal 주제분류 체계
27개 주제 분야 (ASJC – Scopus 기준)
• Agricultural and Biological Sciences
• Arts and Humanities
• Biochemistry, Genetics and Molecular Biology
• Business, Management and Accounting
• Chemical Engineering
• Chemistry
• Computer Science
• Decision Sciences
• Earth and Planetary Sciences
• Economics, Econometrics and Finance
• Energy
• Engineering
• Environmental Science
• Immunology and Microbiology
• Multidisciplinary
• Materials Science
• Mathematics
• Medicine
• Neuroscience
• Nursing
• Pharmacology, Toxicology and
Pharmaceutics
• Physics and Astronomy
• Psychology
• Social Sciences
• Veterinary
• Dentistry
• Health Professions
▪ Scopus 분류 기준인 ASJC journal classification 적용
• 4개의 대 주제를 27개의 중 주제, 308 개의 소주제분야로 선택 및 제한하여 성과 분석
▪ SciVal 의 주제 분류: Scopus 의 주제분류 방식 외에 다른 국가에서 활용하는 분류 체계를 통해서도 분석
할 수 있음
• Field of Science and Technology (FOS) Classification – OECD 주제분류
• QS, THE 주제분류
Scopus 의 기관별 논문 성과는 THE, QS의 세계, 아시아, 주제분야, 한국경제 이공계대학 랭킹 등에 활용
기관의 연구성과 분석
기관의 대표자가 관리자 계정 만들어
단과대학등 구조 구성할 수 있음
저자의 연구성과 분석
Scopus author ID 기준으로 THE
세계대학 랭킹의 설문조사 대상자 추출
및 설문조사 진행
Scopus/SciVal의 데이터 구조(Entity)
Institution
School/
department
Researcher
Publication
MechPhysChem
연구자/그룹/기관 구조 Scopus SciVal
Document
Affiliation
Data
Institution
Researcher
Researcher
Groups
Country Country・ ・ ・
Author
Affiliation
Scopus 등재 논문은 저자와 기관, 국가로 분류 및 할당됨
▪ Scopus를 기반으로 한 연구성과 분석 솔루션으로 220여개 국가 16,000여개 기관, 수백만 연구자의 성과를
손쉽게 비교, 분석할 수 있으며, 분석결과를 통한 전략적인 의사결정 및 연구전략 수립 지원
▪ Overview, Collaboration, Trends는 현재 3,4,5,6,10년으로 연도구성이 셋팅되어 있으나 Benchmarking
모듈은 1996년부터 현재까지 자유롭게 연도 선택할 수 있음
SciVal (www.scival.com)
Visualize research
performance
Benchmark
your progress
Develop
collaborative
partnerships
국가, 기관, 연구팀/
학과, 연구자에 대한
연구성과 분석
30여개 이상의 성과 평가
매트릭스를 통한 국가,
기관, 연구자, 연구팀의
성과 분석 및 비교
연구협력 현황 분석 및
잠재적인 협력
가능기관 및 연구자
추천
Analyze
research
trends
연구 주제, 키워드별
동향 분석 및 우수 연구
국가, 기관, 연구자 탐색
<Overview> <Benchmarking> <Collaboration> <Trends> <9>
1. SciVal 기능 이해
2. (모니터링) 우리 학교의 연구성과 분석 및 타 기관 벤치마킹 / 대학랭킹
(기관의 연구성과 분석 보고서)
3. 연구자 성과 분석 (우수 연구자 상 시상, 연구자 채용)
4. (벤치마킹) 학과별 성과분석 타 기관의 학과와 비교
5. 연구협력 강화를 위한 전략 수립 (연구협력 보고서, VIP 해외 기관 방문 시)
6. 연구동향 분석 (Industry 4.0, SDG, Smart…주요 키워드, 저널경향)
*선행과제
세계대학 랭킹
평가지표에 대한
구성원의 이해
랭킹 향상을
위해 세계대학
랭킹지표를
기반으로 한
연구자, 학과
평가 지표 선정
각 단계별 기존
샘플을 활용한
결과물 공유
SciVal 활용 사례
7. 연구프로포잘, 계획서 작성 시 기초데이터로 활용
Overview Module
1
3
1.4가지 모듈 중 특정 모듈 선택. 자주 분석하는 분석단위(국가, 기관, 저자, 연구키워드 등)를 Report에 저장하여 해당 분석단위에
대한 결과 확인. My SciVal에는 해당 이용자가 SciVal에 접속한 후 이용한 모든 분석 단위가 저장되어 있음
2. 기관, 저자, publication set(이용자가 분석을 원하는 데이터 셋), 국가, 연구토픽(Topic Prominence), 연구 주제분야(이용자가
직접 구성) 선택하여 분석
3. 분석기간(연도), 주제분야 선택할 수 있으며, Scopus, QS, THE 주제분야 선택할 수 있음
4. 탭별 메뉴
• Summary: 특정 국가, 기관, 학과, 연구자등의 3,4,5,6,10년 기관의 연구성과(양, 질적 평가, 논문을 주로 발표한 저널, 연구협력
현황, 연구기금, 특허인용, 논문 다운로드 통계등)를 직관적으로 파악할 수 있음
• Topics: 국가, 기관, 연구자 등의 연구주제 중 경쟁력있는 연구토픽 분석
• Collaboration: 기관, 학과, 연구자의 연구협력 현황 및 협력별 연구영향력 분석
• Published: 어떤 저널에 논문을 발표했는지와 저널별 영향력 지수 확인
• Cited: 논문의 인용현황
• Authors: 특정 주제분야별 우수 연구자 500명까지 리스트 다운로드
• Economic Impact: 특허에 인용된 논문 수, 논문에 인용된 특허 수 등 논문이 특허와 연결되어 경제적 이익 창출을 기대
• Social Impact: 뉴스미디어에 언급된 우리 기관의 논문 확인
• 펀딩관련 정보: 국가, 기관, 연구자가 전세계 주요 펀딩기관의 지원을 얼마나 받았는지 분석
4
<5>
2
1. 특정 연도(1996년부터 2019년까지)범위, 주제등을 선택
2. 왼쪽 패널에서 국가, 기관, 학과, 연구자, 토픽, 연구주제를 선택하여 성과분석
3. 분석단위 선택 후 Chart, Table 형태 선택하여 데이터 확인
4. 평가지표의 경우 한번에 3개까지 선택 및 아티클 형태 선택하여 데이터 추출 가능
5. Table 형태 선택 하면, 평가지표를 최대 20개까지 선택하여 분석
Table 형태 선택
후, “Add
metrics”
클릭하여 평가
매트릭스 최대
20개까지 추가
Benchmarking Module
2 1
3
4
5
<6>
Collaboration Module
1. 특정 연도(3,4,5,6,10년) 범위, 주제등을 선택
2. 왼쪽 패널에서 국가, 기관, 학과, 연구자를 선택하여 성과분석
3. 현재의 연구협력 현황 분석 및 잠재적인 협력현황 분석
4. 지역, 국가, 기관, 저자 수 기준 선택하여 협력 현황 및 잠재적인 협력 현황 분석
5. Table, Map 형태 선택하여 데이터 확인.
2
4
5
<7>
3
1
Trends Module
1. 특정 연도(3,4,5,6,10년) 범위 선택
2. 왼쪽 패널에서 Publication set, 연구토픽(Topic Prominence), 연구
주제를 선택하여 성과분석
3. 왼쪽 패널에서 선택한 분석단위에 대한 Summary, 주요 연구기관, 국
가, 저자, 저널 리스트, 연구키워드등 확인
4. 검색된 논문에서 가장 활발히 연구되고 있는 연구 키워드 Word cloud
형태로 확인
2
1
3
5
4
<8>
기관 연구자/학과 Publication set(데이터 업로드) 국가 Topic Prominence 연구주제
Reporting
2
1
1. 상단의 메뉴바에서 Reporting 선택
2. 개인 이용자가 저장한 리포트 확인할 수 있으며, Merge를 통해 기존 리포트 통합, Share를 클릭하여 다른 이용자와 공유
3. 전세계 SciVal 고객들이 가장 많이 활용하는 분석을 리포트 템플릿으로 구성하여 제공하고 있으며, 요구에 따른 리포트 출력
3
<9>
기관 연구자/학과 Publication set(데이터 업로드) 국가 Topic Prominence 연구주제
My SciVal
2 1
1. 상단의 메뉴바에서 My SciVal 선택: 로그인 후 이용한 분석단위는 My SciVal에 모두 저장됨
2. 왼쪽 패널의 메뉴에서 분석단위(기관, 연구자, publication set, 국가, Topic Prominence, 연구주제 등 선택
3. 분석리스트 확인하고 이를 수정, 추가, 공유, 삭제
4. 설정을 클릭하여, Preference, Tags등 수정할 수 있으며, 주제분류 체계 선택
3
4
4
<10>
연구성과 평가 매트릭스
SciVal의 Overview, Benchmarking 모듈을 활용하여, 저자별, 사업단별 논문 리스트와 FWCI
일괄 다운로드
<17>
연구성과 평가지표
평가 매트릭스: 연구성과를 분석, 평가하는데 활발히 활용되는 양, 질적인 다양한 지표가 있으나, 이 중 FWCI가
BK21에 활용되고 있음
Benchmarking Metrics
연구 생상성
(양적 측면)
Scholarly Output Scopus 상에 등재된 기관의 논문 수 (논문 수)
연구 영향력
(질적 측면)
Citation Count 해당 기관의 이름으로 발표된 논문이 피인용 된 전체 건수
Citations per publication 논문 한 편당의 피인용 수
H-index
연구자의 연구영향력 측정하기 위한 지수로 생산성과 효과를 함께 측정, 발표한 논문
건수와 피인용 횟수를 모두 고려한 지수
Field Weighted Citation
Impact (FWCI)
상대적인 피인용 지수. 해당 연구 분야, 논문 타입, 발표 연도에 따른 전세계 평균 대
비 피인용 비율. 전세계 평균=1,
FWCI가 1.20인 경우 전세계 평균대비 20% 더 인용되었다고 해석
Outputs in Top 1, 10%
Percentiles
인용 건수 기준 전세계 상위 1%,10%에 해당되는 아티클 편수의 비율
인용 수 기준이나, FWCI 기준으로 상위 1, 10%에 해당하는 비율 분석
Publications in Top 1, 10%
Journal Percentiles
저널의 영향력 지수기준 상위 10% 저널에 발표된 논문 수 및 해당 비율
CiteScore: 저널의 영향력 지수
SJR: 저널의 명성에 따른 영향력 지수 (전세계 영향력 지수 평균을 1로 정규화)
SNIP: 저널의 주제에 따른 영향력 지수 (특정 주제의 영향력 지수 평균을 1로 정규화)
공동연구
International Collaboration 해당 기관과 다른 국가의 기관 저자가 공동으로 발표한 논문의 비율
Collaboration Impact 다른 국가 기관 저자와의 협력으로 발표한 논문의 한 편당 피 인용 수
연구 관심도 View per publication
Scopus상에서 기관의 논문이 다운로드 된 횟수를 논문 수로 나눈 논문 한 편당 다운
로드 수
▪ 연구자의 연구성과를 평가하기 위한 지표로 UCSD의 물리학자 Jorge E. Hirsch에 의해 개발
▪ 연구자가 발표한 논문의 수나 피 인용 수 등 개별 지표에서 성과를 양이나 질로 단순히 평가하는 기존의 지표와
달리, 질과 양적인 측면 모두 고려
▪ 논문을 인용빈도가 높은 순부터 나열 하였을 때, 논문의 인용빈도가 논문의 순위보다 크거나 같은 마지막
논문의 순위가 h-지수
▪ 현재는 연구자뿐만 아니라, 저널, 기관, 국가의 연구성과 측정에도 활용되고 있으며, QS 주제분야 평가에서
25% 활용 됨
연구자의 h-지수가 13라면, 최소 13회
이상 인용된 논문을 13편 발표했다는
의미
No Citations
1 134
2 69
3 43
4 42
5 39
6 31
7 29
8 28
9 28
10 20
11 18
12 15
13 13
H-index: 연구자의 연구 영향력 평가 지수
▪ 동일한 출판연도, 주제분야, 논문 형태에
따라 인용을 측정하여 정규화한
인용지수로 다양한 주제분야를
비교하는데 있어 활용될 수 있음
▪ 특정 논문들이 받은 실제 인용 수에 대한
비율로, 전체 인용은 주제 분야 평균에
기반에서 산출
▪ 2015년 THE 세계대학평가의 연구성과
평가에 도입되면서 전세계적으로
활용되고 있음 (30% 활용)
FWCI of Publication P(1) =
P(1)의 인용 수
P(1)과 같은 연도, 주제, 출판물 형태가 같은 논문들의
전세계 평균 인용 수
FWCI of publication group P(1)-P(N) = Average FWCI of P(1), P(2), P(3)… P(N)
Field Weighted Citation Impact(FWCI): 상대적인 피인용 지수
FWCI의 전세계 평균은 1이며, 1보다 크면 평균이상, 1 이하이면 평균 이하로 해석되며, FWCI가 1.07인 경우 전세계 평균대비 7%
이상 인용되고 있음
BK 21 의 연구성과 평가에서 FWCI는 환산 보정 피인용수로 반영
<20>
모든 매트릭스가 갖게 되는 약점…
• Figure is taken from International Comparative Performance of the UK Research Base 2013, a report for the UK’s Department of Business, Innovation and Skills, and shows the citations received in 2008-2012 by articles published in 2008
and indexed in Scopus.
▪ 저널에서의 인용분포는 파레토의
법칙 – “80/20”룰을 따름: 80%의
인용은 20%의 논문에서 발생
▪ 평범한 논문이 영향력 높은 저널에
출판될 수 있음
▪ 우수한 논문이 영향력이 낮은 저널에
출판될 수 있음
저널 영향력 지수를 이용한 연구성과 평가 (1/2)
저널 영향력 지수를 이용한 연구성과 평가 (2/2)
▪ 여러 주제 및 다른 학문을 비교, 평가할 때 논문 편수를 기준으로 평가 하는 것이 적절한 방법인지
검토해야 함
▪ 주제분야별 정규화된(Field-normalized) 매트릭스를 이용하거나 특정 주제 분야별로 구분해서
평가
CiteScore Impact Factor
A = 특정 저널의 2016-2019년 논문(아티클, 리뷰,
컨퍼런스, 북 챕터, 데이터 페이퍼)이 2016-2019년
동안 인용된 수
A = citations to 2 or 5 years of documents
(특정 출판물의 2년, 5년간 논문이 2018년에 인용된
수)
B = 특정 저널의 2016-2019년 논문(아티클, 리뷰,
컨퍼런스, 북 챕터, 데이터 페이퍼) 수
B = only citable items (articles and reviews),
different from A (특정 출판물에 등재된 아티클,
리뷰 형태로 제한)
저널의 영향력 지수: CiteScore
▪ 2016년 12월 최초로 발표되었고, 2020년 산출 방법 수정
▪ CiteScore 는 Scopus에 등재된 모든 출판물(저널, Book Series, Conference)에 적용
▪ 저널에 대한 영향력 지수이지, 아티클 혹은 저자에 대한 영향력 지수가 아니므로 명확한 이해 및 활용 필요
*논문(Documents)은 Scopus 에서 이용 가능한 Article, Review, Conference paper, Book Chapter, Data paper 만을
대상으로 함
저널의 영향력 지수
▪ 3년간 발표된 논문 및 인용건수를 기반으로 학술지의 영향력지수 산출
▪ Citescore: 학술지 영향력 지수, 특정기간 동안 인용된 빈도수의 척도로서 그 논문이 실린 저널의 수준을 평가하는 지표로 활용
▪ SJR(SCImago Journal Rank): 학술지의 명성에 따른 지수 (평균=1로 정규화), 모든 인용을 동등하게 평가하면 안된다.”는
전제하에 학술지 명성에 따라 지수 산출. 한국경제 이공계대학 평가에 활용
▪ SNIP(Source Normalized Impact Per Paper): 학술지의 주제에 따른 지수, 학술지의 주제 분야별 인용패턴 고려하고 얼마나
빨리 인용되는지 영향 고려하여 지수 산출(평균= 1로 정규화, 1보다 높으면 주제분야에서 평균 이상)
Scopus 타이틀 리스트 및 저널 페이지, Journal metrics 싸이트에서 확인 (http://www.journalmetrics.com)
학과단위의 성과분석
- Scopus기반으로 검색 후 성과 분석
- 연구자 그룹핑을 통한 성과 분석
<26>
▪ Scopus에서 학과의 성과 검색 후, Publication set 구성하여 SciVal에 업로드 (Scopus와 SciVal 기능 연동)
• 예시: 저자가 논문에 “Department of ***”를 정확하게 기입하지 않은 경우 제외될 수 있으며,
교수님 실적만이 아닌 석/박사 연구원의 실적 또한 집계될 수 있음
• 실시간으로 업데이트된 성과가 반영되지 않음
AFFIL ( “Department of Chemical Engineering & Materials Science, XXXX Univ*" OR "Chemical Engineering and Materials Science,
XXXX Univ*" OR "Chemical Engineering and Materials Science, XXX Univ*" ) OR AFFIL ( "Chung-Ang Univ*" W/5 "Chemical
engineering and materials" ) OR AFFIL ( "XXXUniv*" W/5 "materials science" ) AND ( LIMIT-TO ( DOCTYPE , "ar" ) OR LIMIT-TO
( DOCTYPE , "re" ) OR LIMIT-TO ( DOCTYPE , "cp" ) ) AND ( LIMIT-TO ( PUBYEAR , 2019 ) OR LIMIT-TO ( PUBYEAR , 2018 ) OR
LIMIT-TO ( PUBYEAR , 2017 ) OR LIMIT-TO ( PUBYEAR , 2016 ) OR LIMIT-TO ( PUBYEAR , 2015 ) ) AND ( LIMIT-TO ( AF-ID , “XXX
University" 60014237 ) ) )
학과단위의 성과 분석
I
III
<26>
* 다른 학교의 성과도 위와 같은 방식으로 셋팅 후 비교 분석 할 수 있음
▪ 교수님들의 Scopus Author ID를 기반으로 그룹핑하여 성과 분석
• 그룹핑하기 전 교수님별의 논문 리스트 정확히 확인해야 함
• 이직한 교수님들의 이전 학교 성과가 포함될 수 있음
• 교수님들의 논문이 새로이 발표될 때마다 실시간으로 그룹에 성과가 반영됨
▪ 학교 자체적으로 논문별 EID, DOI, PubMed ID를 확보하고 있다면 이를 SciVal로 업로드
II
검색식 기반의 학과 구성 (1/4)
I
▪ 학과 영문명은 영문 홈페이지에서 확인
▪ 학과마다 affiliation을 작성하는 방식이 다르므로 실제로 검색 결과를 확인하면서 검색식을 학과에 맞게
작성해야 함
▪ 논문에서 소속정보는 일반적으로 학과 -> 대학교 -> 도시 -> 국가와 같은 순서로 작성
▪ 저자가 논문에 “**대학교”, “”학과” 등 기관명과 학과명을 정확하게 기입하지 않은 경우 분석에서 제외될 수
있으며, 해당 소속으로 논문을 발표한 석/박사 연구원의 실적 또한 집계될 수 있음
• 해당 자료에서 제시하는 검색식을 적용 한 후, 학과 실적의 논문이 검색되는지 검토
• 실제 학과 교수님의 논문을 검색해서 affiliation 등의 검색식을 확인하여 기존 검색식으로 검색 되는지
검토
▪ 학과를 생성한 이용자가 해당 기관의 다른 구성원과 publication set을 공유할 수 있음
▪ Publications set 생성을 위한 논문 검색은 Scopus에서 먼저 진행해야 하며, Scopus 접속 후 Advanced 클릭
후, Field code 활용하여 검색 식 작성 및 논문 검색
Field
code
적용
Affil Affiliation의 약자. 저자의 소속기관
W/n
Within의 약자. 입력한 검색어 수(n)와 검색어와의
근접도와 관련된 연산자
‘pain W/5 cancer’ 이라고 하면 pain과 cancer가 5
단어 내에 기재되어 있으면 논문을 검색
*검색 결과는 나오는 검색어 순서와 관계 없음
Limit-to
해당 연도 혹은 기관에서 출판된 논문으로 제한 (연도,
논문 형태, 국가 등 제한)
Publication sets
<27>
검색식 기반의 학과 구성 (2/4)
옵션 1
2
1
3
4
5
1. Scopus의 Advanced Search 클릭하여 검색식 입력 후
결과 확인. All 선택 후, Export 클릭
Option 1
2. 새로운 창이 활성화되면, SciVal클릭하여 검색결과 바로
SciVal로 업로드
3. 해당 Publication set이름 입력 후 저장. Overview,
Benchmarking 모듈에서 결과 확인
옵션2
<28>
Option 2
4. Export에서 CSV 클릭하여 논문 리스트 다운로드
5.논문 리스트의 EID를 복사하여, SciVal의 Publication
set 패널에서 Import EID (Scopus 논문의 고유 ID)
클릭하고 복사해 둔 EID를 업로드하여 학과 구성
6. Overview, Benchmarking, Trends 모듈에서 학과의
성과 확인 및 분석
4
I
1.My SciVal, Benchmarking 모듈 선택 후,
왼쪽 패널의 “Publication Sets”에서
업로드한 학과별 Publication set 선택
2.오른쪽의 “Table” 선택 후 “+” 아이콘 선택
3.“Add and manage metrics”의 새 창이
활성화되면, 오른쪽의 metrics를 선택하여
왼쪽의 “Metrics in the table”로 드래그 한
후 “Update Metrics” 클릭. Metrics는
다음페이지의 지표 10개를 기반으로 셋팅
4.Publication Sets로 업로드한 데이터의
경우는 H-index 산출이 되지 않기 때문에
논문 수 링크를 클릭하여 데이터 다운로드
받은 후 매뉴얼로 산출해야 함
검색식 기반의 학과 구성 (3/4)
1
2
4
3
<- # ->
I
▪ Scholarly outputs, Publication: Scopus에 등재된 논문 출판물 수
▪ CPP(Citation per publication): 논문 한 편당 인용 수
▪ FWCI(Field-Weighted Citation Impact): 상대적인 피 인용지수. 전세계 평균 1을 기준으로 기관의 FWCI 비교 분석
▪ Output in Top %: FWCI 지수 기반, 고 인용된 상위 1%, 10% 논문에 해당하는 비율
▪ Publications in Top 10 Journals (%): CiteScore 지수 기준 상위 10% 저널에 논문을 발표한 비율
▪ International Collaboration: 국제협력을 통해 발표한 논문
▪ International Collaboration Impact: 국제 협력을 통해 발표한 논문의 한 편당 인용 수
Name
Scholarly
Output
Citation
Count
CPP FWCI h-index
Outputs in Top
citations(%)
Publications
in Top 10
journals(%)
International
Collaboration
Top 1% Top 10% Rate(%)CPP
Korea University
Chung-Ang University
**대학교를 포함하여 **개 기관의 **사업단의 연구성과 분석 결과를 생산성, 영향력, 연구협력, 관심도 측면에서 분석
검색식 기반의 학과 구성 (4/4)
연구자의 h-지수가 13라면, 최소 13회 이상 인용된 논문을 13편 발표했다는 의미
No Citations
1 134
2 69
3 43
4 42
5 39
6 31
7 29
8 28
9 28
10 20
11 18
12 15
13 13
* H-index는 인용수가 높은 논문부터 내림차순으로 정렬하고, 해당 논문은 넘버링 하여, 논문번호와 인용수가 만나는 숫자를 H-index
로 산출. No가 인용 수 보다 크거나 같아야 함
<32>
I
연구자 기반의 학과 구성 (1/2)
▪ 교수님들의 Scopus Author ID를 기반으로 연구자 업로드 및 학과별 연구자 그룹핑하여 성과 분석
• 학과 그룹핑을 위해 교수님별의 논문 리스트 정확히 확인해야 함
• 교수님별 Scopus 프로파일 ID 정리한 후, “Researchers and Groups”에 업로드(파일 형식 또는
아이디 붙여넣기)
• 학과를 구성한 방식으로 연구팀 구성할 수 있으며, 특정 연구단 구성 시 어떤 구성원의 조합이
효과적인지 A그룹, B그룹 등으로 구성하여 성과 분석 시뮬레이션
• 우리학교의 학과 뿐 아니라 타 학교의 교수님 ID를 기반으로 학과 구성할 수 있음
<학과 예시: 개별 연구자를 기반으로 학과구성 및 성과분석>
II
▪ 연구자들의 우리 학교 소속으로 발표한 논문만으로 성과 분석하고자 하는 경우, 연구자 그룹에서
아이콘을 “On”으로 셋팅하여 확인할 수 있음
▪ 특정 연구자, 학과, 연구주제를 필요에 따라 특정 연구자, 교원, 직원 등과 서로 공유
▪ 연구자 식별을 위해 Tag에 학과, 연구자 사번 등 입력 <28>
연구자 기반의 학과 구성 (2/2)
2
1
3
45
1. Overview, Benchmarking 모듈 및 My SciVal의 Researchers and Groups 패널 선택, “+Add Researchers and
Groups” 클릭 후, “+ Import Researchers” 클릭
2. 새로운 창에 연구자의 ID를 복사하여 붙여 넣거나, 왼쪽 섹션의 지정된 파일 형식으로 일괄 업로드
3. 업로드한 Scopus ID 별 연구자명 확인
4. 화면 오른쪽 “Structures to be Imported”에서 해당 그룹명을 만들고, 왼쪽의 연구자 리스트를 선택 후 그룹명
안으로 드래그하여 그룹 구성 완료
5. My SciVal의 “Researchers and Groups” 패널에서 셋팅한 학과그룹 선택하여, Overview, Benchmarking
모듈에서 성과 확인
<32>
II
데이터를 기반으로 학과단위 성과 분석III
<33>
1.Overview, Benchmarking, Trends
모듈, My SciVal 선택 후, 왼쪽 패널의
“Publication Sets” 클릭
2.하단의 “+Add publications Sets” 클릭
3.Import publication set 창이
활성화되면 해당 학과별 논문의 DOI,
EID를 “Paste IDs”에 붙여넣기
4.해당 논문리스트의 Publication set
이름을 저장 후, 학과의 성과를
Overview, Benchmarking, Trends
모듈에서 확인
1
2
4
3
Thank you
감사합니다.
장현주 부장 (d.jang@Elsevier.com)

Contenu connexe

Similaire à 2020년 scival 기초_학과단위 성과분석

SKKU 온라인 튜토리얼 - JCR
SKKU 온라인 튜토리얼 - JCRSKKU 온라인 튜토리얼 - JCR
SKKU 온라인 튜토리얼 - JCR
MoonBanghee
 

Similaire à 2020년 scival 기초_학과단위 성과분석 (20)

2018 SciVal 이용자 매뉴얼
2018 SciVal 이용자 매뉴얼2018 SciVal 이용자 매뉴얼
2018 SciVal 이용자 매뉴얼
 
SciVal for Trend - 연구성과와 동향분석
SciVal for Trend - 연구성과와 동향분석SciVal for Trend - 연구성과와 동향분석
SciVal for Trend - 연구성과와 동향분석
 
2015 SciVal 이용자 가이드
2015 SciVal 이용자 가이드2015 SciVal 이용자 가이드
2015 SciVal 이용자 가이드
 
2022년 scival manual(한글판)
2022년 scival manual(한글판)2022년 scival manual(한글판)
2022년 scival manual(한글판)
 
2016 scival_연구경향 분석과 연구자 성과 분석 매뉴얼
2016 scival_연구경향 분석과 연구자 성과 분석 매뉴얼2016 scival_연구경향 분석과 연구자 성과 분석 매뉴얼
2016 scival_연구경향 분석과 연구자 성과 분석 매뉴얼
 
2021년 SciVal 매뉴얼
2021년 SciVal 매뉴얼2021년 SciVal 매뉴얼
2021년 SciVal 매뉴얼
 
2020년 SciVal Manual
2020년 SciVal Manual2020년 SciVal Manual
2020년 SciVal Manual
 
2019 scival manual
2019 scival manual2019 scival manual
2019 scival manual
 
2023_Scival User Manual_공통.pdf
2023_Scival User Manual_공통.pdf2023_Scival User Manual_공통.pdf
2023_Scival User Manual_공통.pdf
 
Journal
JournalJournal
Journal
 
InCites 20180918
InCites 20180918InCites 20180918
InCites 20180918
 
2018 SCOPUS 매뉴얼
2018 SCOPUS 매뉴얼2018 SCOPUS 매뉴얼
2018 SCOPUS 매뉴얼
 
2021_Scopus-manual.pdf
2021_Scopus-manual.pdf2021_Scopus-manual.pdf
2021_Scopus-manual.pdf
 
Sci val을 통한 타대학 학과 벤치마킹 분석
Sci val을 통한 타대학 학과 벤치마킹 분석Sci val을 통한 타대학 학과 벤치마킹 분석
Sci val을 통한 타대학 학과 벤치마킹 분석
 
SciVal 타대학 학과 벤치마킹 분석 매뉴얼
SciVal 타대학 학과 벤치마킹 분석 매뉴얼SciVal 타대학 학과 벤치마킹 분석 매뉴얼
SciVal 타대학 학과 벤치마킹 분석 매뉴얼
 
클래리베이트 inCites 교육 자료
클래리베이트 inCites 교육 자료클래리베이트 inCites 교육 자료
클래리베이트 inCites 교육 자료
 
Scopus libraryclass
Scopus libraryclassScopus libraryclass
Scopus libraryclass
 
SKKU 온라인 튜토리얼 - JCR
SKKU 온라인 튜토리얼 - JCRSKKU 온라인 튜토리얼 - JCR
SKKU 온라인 튜토리얼 - JCR
 
Scopus manual
Scopus manualScopus manual
Scopus manual
 
2020년 Scopus Quick Reference Guide
2020년 Scopus Quick Reference Guide 2020년 Scopus Quick Reference Guide
2020년 Scopus Quick Reference Guide
 

Plus de POSTECH Library

베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
POSTECH Library
 

Plus de POSTECH Library (20)

베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
베를린 필하모닉 디지털 콘서트홀 이용 가이드(계정 가입 절차 내용 포함)
 
2023 Library Orientation
2023 Library Orientation2023 Library Orientation
2023 Library Orientation
 
IEEE_Xplore_Userguide
IEEE_Xplore_UserguideIEEE_Xplore_Userguide
IEEE_Xplore_Userguide
 
Mendeley-Reference-Manager
Mendeley-Reference-ManagerMendeley-Reference-Manager
Mendeley-Reference-Manager
 
CAS SciFinder Discovery Platform Quick Reference Guide_2023(KR)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(KR)CAS SciFinder Discovery Platform Quick Reference Guide_2023(KR)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(KR)
 
2023 신입생 도서관 이용안내
2023 신입생 도서관 이용안내2023 신입생 도서관 이용안내
2023 신입생 도서관 이용안내
 
Grove Art and Music Online
Grove Art and Music OnlineGrove Art and Music Online
Grove Art and Music Online
 
ARTSTOR 매뉴얼
ARTSTOR 매뉴얼ARTSTOR 매뉴얼
ARTSTOR 매뉴얼
 
CAS SciFinder Discovery Platform Quick Reference Guide_2023(EN)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(EN)CAS SciFinder Discovery Platform Quick Reference Guide_2023(EN)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(EN)
 
CAS SciFinder Discovery Platform Quick Reference Guide_2023(국문)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(국문)CAS SciFinder Discovery Platform Quick Reference Guide_2023(국문)
CAS SciFinder Discovery Platform Quick Reference Guide_2023(국문)
 
Statista 소개
Statista 소개Statista 소개
Statista 소개
 
Nature Masterclass 이용안내
Nature Masterclass 이용안내Nature Masterclass 이용안내
Nature Masterclass 이용안내
 
Knovel Manual for Korea
Knovel Manual for KoreaKnovel Manual for Korea
Knovel Manual for Korea
 
Knovel Quick Start Guide
Knovel Quick Start GuideKnovel Quick Start Guide
Knovel Quick Start Guide
 
LMS Reading List Management Manual
LMS Reading List Management ManualLMS Reading List Management Manual
LMS Reading List Management Manual
 
PLMS Reading List 관리 매뉴얼
PLMS Reading List 관리 매뉴얼PLMS Reading List 관리 매뉴얼
PLMS Reading List 관리 매뉴얼
 
Music and Dance Online
Music and Dance OnlineMusic and Dance Online
Music and Dance Online
 
뉴욕타임스 매뉴얼-2022.pdf
뉴욕타임스 매뉴얼-2022.pdf뉴욕타임스 매뉴얼-2022.pdf
뉴욕타임스 매뉴얼-2022.pdf
 
ScienceDirect Quick Reference Guide
ScienceDirect Quick Reference GuideScienceDirect Quick Reference Guide
ScienceDirect Quick Reference Guide
 
ScienceDirect eBook 이용자 메뉴얼 - POSTECH
ScienceDirect eBook 이용자 메뉴얼 - POSTECHScienceDirect eBook 이용자 메뉴얼 - POSTECH
ScienceDirect eBook 이용자 메뉴얼 - POSTECH
 

2020년 scival 기초_학과단위 성과분석

  • 1. 2020년 7월 엘스비어 코리아 장현주 연구성과 분석을 위한 기초: Scopus, SciVal을 중심으로
  • 2. Agenda ▪ Scopus, SciVal 기능 - 3 ▪ 연구성과 평가 매트릭스 -16 ▪ 학과단위의 연구성과 분석 - 24 ▪ 실습 - 별도 자료
  • 3. Scopus, SciVal 주요 기능 *자세한 기능은 각 솔루션별 상세 매뉴얼을 같이 참고하여 주시기 바랍니다. 3
  • 4. Scopus (www.scopus.com) ▪ Scopus는 Elsevier 출판사에서 구축한 초록/인용데이터베이스로 학술연구의 탐색 출발점으로 관련 선행연구 및 연구동향을 분석할 수 있으며 연구 전략수립 시 활용 ▪ 전세계 5,000개 이상의 출판사에서 출판되는 25,185 이상의 타이틀, 120,000여권의 인문 사회학 도서, 100,000여건의 컨퍼런스 등 등재 및 특허자료 링크 ▪ 논문별 인용정보: 논문별 피 인용정보를 실시간 확인, 인용하거나, 인용된 논문 등 관련 논문 탐색 시 활용 ▪ Author Profile: 저자의 연구성과 분석: 논문, 피인용 현황, 참고문헌, H-index 제공 ▪ Affiliation Profile: 특정 기관명을 발표된 논문을 기반으로 기관별 페이지 제공하며, 기관의 논문, 인용, 저자, 주제정보, 연구협력 기관 정보 제공 ▪ Journal Analyzer: 저널의 영향력 평가 및 분석, 논문, 피 인용도, SJR, SNIP, CiteScore 지수 제공 ▪ 저널 등재: Scopus Content Selection & Advisory Board(CSAB)에서 타이틀 선정 기준에 따라 철저한 심사 후 등재 결정 ▪ 평가도구로 활용: OECD, 주요 국가(미국, 유럽, 영국, 일본, 호주)의 정부 기관/ 연구위원회, 전세계 대학랭킹평가기관 (QS, THE, Financial Times), 우리나라 한국경제 등에서 연구 성과 평가 도구로 활용 <Scopus 등재 컨텐츠 현황> Contents Active titles Peer-reviewed Journals Trade publication Book Series No. of titles 25,185 24,039 294 852 Subject Social Science Health Sciences Physical Sciences Life Sciences No. of titles 10,465 7,129 8,443 4,890
  • 5. Scopus, SciVal 주제분류 체계 27개 주제 분야 (ASJC – Scopus 기준) • Agricultural and Biological Sciences • Arts and Humanities • Biochemistry, Genetics and Molecular Biology • Business, Management and Accounting • Chemical Engineering • Chemistry • Computer Science • Decision Sciences • Earth and Planetary Sciences • Economics, Econometrics and Finance • Energy • Engineering • Environmental Science • Immunology and Microbiology • Multidisciplinary • Materials Science • Mathematics • Medicine • Neuroscience • Nursing • Pharmacology, Toxicology and Pharmaceutics • Physics and Astronomy • Psychology • Social Sciences • Veterinary • Dentistry • Health Professions ▪ Scopus 분류 기준인 ASJC journal classification 적용 • 4개의 대 주제를 27개의 중 주제, 308 개의 소주제분야로 선택 및 제한하여 성과 분석 ▪ SciVal 의 주제 분류: Scopus 의 주제분류 방식 외에 다른 국가에서 활용하는 분류 체계를 통해서도 분석 할 수 있음 • Field of Science and Technology (FOS) Classification – OECD 주제분류 • QS, THE 주제분류
  • 6. Scopus 의 기관별 논문 성과는 THE, QS의 세계, 아시아, 주제분야, 한국경제 이공계대학 랭킹 등에 활용 기관의 연구성과 분석 기관의 대표자가 관리자 계정 만들어 단과대학등 구조 구성할 수 있음
  • 7. 저자의 연구성과 분석 Scopus author ID 기준으로 THE 세계대학 랭킹의 설문조사 대상자 추출 및 설문조사 진행
  • 8. Scopus/SciVal의 데이터 구조(Entity) Institution School/ department Researcher Publication MechPhysChem 연구자/그룹/기관 구조 Scopus SciVal Document Affiliation Data Institution Researcher Researcher Groups Country Country・ ・ ・ Author Affiliation Scopus 등재 논문은 저자와 기관, 국가로 분류 및 할당됨
  • 9. ▪ Scopus를 기반으로 한 연구성과 분석 솔루션으로 220여개 국가 16,000여개 기관, 수백만 연구자의 성과를 손쉽게 비교, 분석할 수 있으며, 분석결과를 통한 전략적인 의사결정 및 연구전략 수립 지원 ▪ Overview, Collaboration, Trends는 현재 3,4,5,6,10년으로 연도구성이 셋팅되어 있으나 Benchmarking 모듈은 1996년부터 현재까지 자유롭게 연도 선택할 수 있음 SciVal (www.scival.com) Visualize research performance Benchmark your progress Develop collaborative partnerships 국가, 기관, 연구팀/ 학과, 연구자에 대한 연구성과 분석 30여개 이상의 성과 평가 매트릭스를 통한 국가, 기관, 연구자, 연구팀의 성과 분석 및 비교 연구협력 현황 분석 및 잠재적인 협력 가능기관 및 연구자 추천 Analyze research trends 연구 주제, 키워드별 동향 분석 및 우수 연구 국가, 기관, 연구자 탐색 <Overview> <Benchmarking> <Collaboration> <Trends> <9>
  • 10. 1. SciVal 기능 이해 2. (모니터링) 우리 학교의 연구성과 분석 및 타 기관 벤치마킹 / 대학랭킹 (기관의 연구성과 분석 보고서) 3. 연구자 성과 분석 (우수 연구자 상 시상, 연구자 채용) 4. (벤치마킹) 학과별 성과분석 타 기관의 학과와 비교 5. 연구협력 강화를 위한 전략 수립 (연구협력 보고서, VIP 해외 기관 방문 시) 6. 연구동향 분석 (Industry 4.0, SDG, Smart…주요 키워드, 저널경향) *선행과제 세계대학 랭킹 평가지표에 대한 구성원의 이해 랭킹 향상을 위해 세계대학 랭킹지표를 기반으로 한 연구자, 학과 평가 지표 선정 각 단계별 기존 샘플을 활용한 결과물 공유 SciVal 활용 사례 7. 연구프로포잘, 계획서 작성 시 기초데이터로 활용
  • 11. Overview Module 1 3 1.4가지 모듈 중 특정 모듈 선택. 자주 분석하는 분석단위(국가, 기관, 저자, 연구키워드 등)를 Report에 저장하여 해당 분석단위에 대한 결과 확인. My SciVal에는 해당 이용자가 SciVal에 접속한 후 이용한 모든 분석 단위가 저장되어 있음 2. 기관, 저자, publication set(이용자가 분석을 원하는 데이터 셋), 국가, 연구토픽(Topic Prominence), 연구 주제분야(이용자가 직접 구성) 선택하여 분석 3. 분석기간(연도), 주제분야 선택할 수 있으며, Scopus, QS, THE 주제분야 선택할 수 있음 4. 탭별 메뉴 • Summary: 특정 국가, 기관, 학과, 연구자등의 3,4,5,6,10년 기관의 연구성과(양, 질적 평가, 논문을 주로 발표한 저널, 연구협력 현황, 연구기금, 특허인용, 논문 다운로드 통계등)를 직관적으로 파악할 수 있음 • Topics: 국가, 기관, 연구자 등의 연구주제 중 경쟁력있는 연구토픽 분석 • Collaboration: 기관, 학과, 연구자의 연구협력 현황 및 협력별 연구영향력 분석 • Published: 어떤 저널에 논문을 발표했는지와 저널별 영향력 지수 확인 • Cited: 논문의 인용현황 • Authors: 특정 주제분야별 우수 연구자 500명까지 리스트 다운로드 • Economic Impact: 특허에 인용된 논문 수, 논문에 인용된 특허 수 등 논문이 특허와 연결되어 경제적 이익 창출을 기대 • Social Impact: 뉴스미디어에 언급된 우리 기관의 논문 확인 • 펀딩관련 정보: 국가, 기관, 연구자가 전세계 주요 펀딩기관의 지원을 얼마나 받았는지 분석 4 <5> 2
  • 12. 1. 특정 연도(1996년부터 2019년까지)범위, 주제등을 선택 2. 왼쪽 패널에서 국가, 기관, 학과, 연구자, 토픽, 연구주제를 선택하여 성과분석 3. 분석단위 선택 후 Chart, Table 형태 선택하여 데이터 확인 4. 평가지표의 경우 한번에 3개까지 선택 및 아티클 형태 선택하여 데이터 추출 가능 5. Table 형태 선택 하면, 평가지표를 최대 20개까지 선택하여 분석 Table 형태 선택 후, “Add metrics” 클릭하여 평가 매트릭스 최대 20개까지 추가 Benchmarking Module 2 1 3 4 5 <6>
  • 13. Collaboration Module 1. 특정 연도(3,4,5,6,10년) 범위, 주제등을 선택 2. 왼쪽 패널에서 국가, 기관, 학과, 연구자를 선택하여 성과분석 3. 현재의 연구협력 현황 분석 및 잠재적인 협력현황 분석 4. 지역, 국가, 기관, 저자 수 기준 선택하여 협력 현황 및 잠재적인 협력 현황 분석 5. Table, Map 형태 선택하여 데이터 확인. 2 4 5 <7> 3 1
  • 14. Trends Module 1. 특정 연도(3,4,5,6,10년) 범위 선택 2. 왼쪽 패널에서 Publication set, 연구토픽(Topic Prominence), 연구 주제를 선택하여 성과분석 3. 왼쪽 패널에서 선택한 분석단위에 대한 Summary, 주요 연구기관, 국 가, 저자, 저널 리스트, 연구키워드등 확인 4. 검색된 논문에서 가장 활발히 연구되고 있는 연구 키워드 Word cloud 형태로 확인 2 1 3 5 4 <8>
  • 15. 기관 연구자/학과 Publication set(데이터 업로드) 국가 Topic Prominence 연구주제 Reporting 2 1 1. 상단의 메뉴바에서 Reporting 선택 2. 개인 이용자가 저장한 리포트 확인할 수 있으며, Merge를 통해 기존 리포트 통합, Share를 클릭하여 다른 이용자와 공유 3. 전세계 SciVal 고객들이 가장 많이 활용하는 분석을 리포트 템플릿으로 구성하여 제공하고 있으며, 요구에 따른 리포트 출력 3 <9>
  • 16. 기관 연구자/학과 Publication set(데이터 업로드) 국가 Topic Prominence 연구주제 My SciVal 2 1 1. 상단의 메뉴바에서 My SciVal 선택: 로그인 후 이용한 분석단위는 My SciVal에 모두 저장됨 2. 왼쪽 패널의 메뉴에서 분석단위(기관, 연구자, publication set, 국가, Topic Prominence, 연구주제 등 선택 3. 분석리스트 확인하고 이를 수정, 추가, 공유, 삭제 4. 설정을 클릭하여, Preference, Tags등 수정할 수 있으며, 주제분류 체계 선택 3 4 4 <10>
  • 17. 연구성과 평가 매트릭스 SciVal의 Overview, Benchmarking 모듈을 활용하여, 저자별, 사업단별 논문 리스트와 FWCI 일괄 다운로드 <17>
  • 18. 연구성과 평가지표 평가 매트릭스: 연구성과를 분석, 평가하는데 활발히 활용되는 양, 질적인 다양한 지표가 있으나, 이 중 FWCI가 BK21에 활용되고 있음 Benchmarking Metrics 연구 생상성 (양적 측면) Scholarly Output Scopus 상에 등재된 기관의 논문 수 (논문 수) 연구 영향력 (질적 측면) Citation Count 해당 기관의 이름으로 발표된 논문이 피인용 된 전체 건수 Citations per publication 논문 한 편당의 피인용 수 H-index 연구자의 연구영향력 측정하기 위한 지수로 생산성과 효과를 함께 측정, 발표한 논문 건수와 피인용 횟수를 모두 고려한 지수 Field Weighted Citation Impact (FWCI) 상대적인 피인용 지수. 해당 연구 분야, 논문 타입, 발표 연도에 따른 전세계 평균 대 비 피인용 비율. 전세계 평균=1, FWCI가 1.20인 경우 전세계 평균대비 20% 더 인용되었다고 해석 Outputs in Top 1, 10% Percentiles 인용 건수 기준 전세계 상위 1%,10%에 해당되는 아티클 편수의 비율 인용 수 기준이나, FWCI 기준으로 상위 1, 10%에 해당하는 비율 분석 Publications in Top 1, 10% Journal Percentiles 저널의 영향력 지수기준 상위 10% 저널에 발표된 논문 수 및 해당 비율 CiteScore: 저널의 영향력 지수 SJR: 저널의 명성에 따른 영향력 지수 (전세계 영향력 지수 평균을 1로 정규화) SNIP: 저널의 주제에 따른 영향력 지수 (특정 주제의 영향력 지수 평균을 1로 정규화) 공동연구 International Collaboration 해당 기관과 다른 국가의 기관 저자가 공동으로 발표한 논문의 비율 Collaboration Impact 다른 국가 기관 저자와의 협력으로 발표한 논문의 한 편당 피 인용 수 연구 관심도 View per publication Scopus상에서 기관의 논문이 다운로드 된 횟수를 논문 수로 나눈 논문 한 편당 다운 로드 수
  • 19. ▪ 연구자의 연구성과를 평가하기 위한 지표로 UCSD의 물리학자 Jorge E. Hirsch에 의해 개발 ▪ 연구자가 발표한 논문의 수나 피 인용 수 등 개별 지표에서 성과를 양이나 질로 단순히 평가하는 기존의 지표와 달리, 질과 양적인 측면 모두 고려 ▪ 논문을 인용빈도가 높은 순부터 나열 하였을 때, 논문의 인용빈도가 논문의 순위보다 크거나 같은 마지막 논문의 순위가 h-지수 ▪ 현재는 연구자뿐만 아니라, 저널, 기관, 국가의 연구성과 측정에도 활용되고 있으며, QS 주제분야 평가에서 25% 활용 됨 연구자의 h-지수가 13라면, 최소 13회 이상 인용된 논문을 13편 발표했다는 의미 No Citations 1 134 2 69 3 43 4 42 5 39 6 31 7 29 8 28 9 28 10 20 11 18 12 15 13 13 H-index: 연구자의 연구 영향력 평가 지수
  • 20. ▪ 동일한 출판연도, 주제분야, 논문 형태에 따라 인용을 측정하여 정규화한 인용지수로 다양한 주제분야를 비교하는데 있어 활용될 수 있음 ▪ 특정 논문들이 받은 실제 인용 수에 대한 비율로, 전체 인용은 주제 분야 평균에 기반에서 산출 ▪ 2015년 THE 세계대학평가의 연구성과 평가에 도입되면서 전세계적으로 활용되고 있음 (30% 활용) FWCI of Publication P(1) = P(1)의 인용 수 P(1)과 같은 연도, 주제, 출판물 형태가 같은 논문들의 전세계 평균 인용 수 FWCI of publication group P(1)-P(N) = Average FWCI of P(1), P(2), P(3)… P(N) Field Weighted Citation Impact(FWCI): 상대적인 피인용 지수 FWCI의 전세계 평균은 1이며, 1보다 크면 평균이상, 1 이하이면 평균 이하로 해석되며, FWCI가 1.07인 경우 전세계 평균대비 7% 이상 인용되고 있음 BK 21 의 연구성과 평가에서 FWCI는 환산 보정 피인용수로 반영 <20>
  • 21. 모든 매트릭스가 갖게 되는 약점… • Figure is taken from International Comparative Performance of the UK Research Base 2013, a report for the UK’s Department of Business, Innovation and Skills, and shows the citations received in 2008-2012 by articles published in 2008 and indexed in Scopus. ▪ 저널에서의 인용분포는 파레토의 법칙 – “80/20”룰을 따름: 80%의 인용은 20%의 논문에서 발생 ▪ 평범한 논문이 영향력 높은 저널에 출판될 수 있음 ▪ 우수한 논문이 영향력이 낮은 저널에 출판될 수 있음 저널 영향력 지수를 이용한 연구성과 평가 (1/2)
  • 22. 저널 영향력 지수를 이용한 연구성과 평가 (2/2) ▪ 여러 주제 및 다른 학문을 비교, 평가할 때 논문 편수를 기준으로 평가 하는 것이 적절한 방법인지 검토해야 함 ▪ 주제분야별 정규화된(Field-normalized) 매트릭스를 이용하거나 특정 주제 분야별로 구분해서 평가
  • 23. CiteScore Impact Factor A = 특정 저널의 2016-2019년 논문(아티클, 리뷰, 컨퍼런스, 북 챕터, 데이터 페이퍼)이 2016-2019년 동안 인용된 수 A = citations to 2 or 5 years of documents (특정 출판물의 2년, 5년간 논문이 2018년에 인용된 수) B = 특정 저널의 2016-2019년 논문(아티클, 리뷰, 컨퍼런스, 북 챕터, 데이터 페이퍼) 수 B = only citable items (articles and reviews), different from A (특정 출판물에 등재된 아티클, 리뷰 형태로 제한) 저널의 영향력 지수: CiteScore ▪ 2016년 12월 최초로 발표되었고, 2020년 산출 방법 수정 ▪ CiteScore 는 Scopus에 등재된 모든 출판물(저널, Book Series, Conference)에 적용 ▪ 저널에 대한 영향력 지수이지, 아티클 혹은 저자에 대한 영향력 지수가 아니므로 명확한 이해 및 활용 필요 *논문(Documents)은 Scopus 에서 이용 가능한 Article, Review, Conference paper, Book Chapter, Data paper 만을 대상으로 함
  • 24. 저널의 영향력 지수 ▪ 3년간 발표된 논문 및 인용건수를 기반으로 학술지의 영향력지수 산출 ▪ Citescore: 학술지 영향력 지수, 특정기간 동안 인용된 빈도수의 척도로서 그 논문이 실린 저널의 수준을 평가하는 지표로 활용 ▪ SJR(SCImago Journal Rank): 학술지의 명성에 따른 지수 (평균=1로 정규화), 모든 인용을 동등하게 평가하면 안된다.”는 전제하에 학술지 명성에 따라 지수 산출. 한국경제 이공계대학 평가에 활용 ▪ SNIP(Source Normalized Impact Per Paper): 학술지의 주제에 따른 지수, 학술지의 주제 분야별 인용패턴 고려하고 얼마나 빨리 인용되는지 영향 고려하여 지수 산출(평균= 1로 정규화, 1보다 높으면 주제분야에서 평균 이상) Scopus 타이틀 리스트 및 저널 페이지, Journal metrics 싸이트에서 확인 (http://www.journalmetrics.com)
  • 25. 학과단위의 성과분석 - Scopus기반으로 검색 후 성과 분석 - 연구자 그룹핑을 통한 성과 분석 <26>
  • 26. ▪ Scopus에서 학과의 성과 검색 후, Publication set 구성하여 SciVal에 업로드 (Scopus와 SciVal 기능 연동) • 예시: 저자가 논문에 “Department of ***”를 정확하게 기입하지 않은 경우 제외될 수 있으며, 교수님 실적만이 아닌 석/박사 연구원의 실적 또한 집계될 수 있음 • 실시간으로 업데이트된 성과가 반영되지 않음 AFFIL ( “Department of Chemical Engineering & Materials Science, XXXX Univ*" OR "Chemical Engineering and Materials Science, XXXX Univ*" OR "Chemical Engineering and Materials Science, XXX Univ*" ) OR AFFIL ( "Chung-Ang Univ*" W/5 "Chemical engineering and materials" ) OR AFFIL ( "XXXUniv*" W/5 "materials science" ) AND ( LIMIT-TO ( DOCTYPE , "ar" ) OR LIMIT-TO ( DOCTYPE , "re" ) OR LIMIT-TO ( DOCTYPE , "cp" ) ) AND ( LIMIT-TO ( PUBYEAR , 2019 ) OR LIMIT-TO ( PUBYEAR , 2018 ) OR LIMIT-TO ( PUBYEAR , 2017 ) OR LIMIT-TO ( PUBYEAR , 2016 ) OR LIMIT-TO ( PUBYEAR , 2015 ) ) AND ( LIMIT-TO ( AF-ID , “XXX University" 60014237 ) ) ) 학과단위의 성과 분석 I III <26> * 다른 학교의 성과도 위와 같은 방식으로 셋팅 후 비교 분석 할 수 있음 ▪ 교수님들의 Scopus Author ID를 기반으로 그룹핑하여 성과 분석 • 그룹핑하기 전 교수님별의 논문 리스트 정확히 확인해야 함 • 이직한 교수님들의 이전 학교 성과가 포함될 수 있음 • 교수님들의 논문이 새로이 발표될 때마다 실시간으로 그룹에 성과가 반영됨 ▪ 학교 자체적으로 논문별 EID, DOI, PubMed ID를 확보하고 있다면 이를 SciVal로 업로드 II
  • 27. 검색식 기반의 학과 구성 (1/4) I ▪ 학과 영문명은 영문 홈페이지에서 확인 ▪ 학과마다 affiliation을 작성하는 방식이 다르므로 실제로 검색 결과를 확인하면서 검색식을 학과에 맞게 작성해야 함 ▪ 논문에서 소속정보는 일반적으로 학과 -> 대학교 -> 도시 -> 국가와 같은 순서로 작성 ▪ 저자가 논문에 “**대학교”, “”학과” 등 기관명과 학과명을 정확하게 기입하지 않은 경우 분석에서 제외될 수 있으며, 해당 소속으로 논문을 발표한 석/박사 연구원의 실적 또한 집계될 수 있음 • 해당 자료에서 제시하는 검색식을 적용 한 후, 학과 실적의 논문이 검색되는지 검토 • 실제 학과 교수님의 논문을 검색해서 affiliation 등의 검색식을 확인하여 기존 검색식으로 검색 되는지 검토 ▪ 학과를 생성한 이용자가 해당 기관의 다른 구성원과 publication set을 공유할 수 있음 ▪ Publications set 생성을 위한 논문 검색은 Scopus에서 먼저 진행해야 하며, Scopus 접속 후 Advanced 클릭 후, Field code 활용하여 검색 식 작성 및 논문 검색 Field code 적용 Affil Affiliation의 약자. 저자의 소속기관 W/n Within의 약자. 입력한 검색어 수(n)와 검색어와의 근접도와 관련된 연산자 ‘pain W/5 cancer’ 이라고 하면 pain과 cancer가 5 단어 내에 기재되어 있으면 논문을 검색 *검색 결과는 나오는 검색어 순서와 관계 없음 Limit-to 해당 연도 혹은 기관에서 출판된 논문으로 제한 (연도, 논문 형태, 국가 등 제한) Publication sets <27>
  • 28. 검색식 기반의 학과 구성 (2/4) 옵션 1 2 1 3 4 5 1. Scopus의 Advanced Search 클릭하여 검색식 입력 후 결과 확인. All 선택 후, Export 클릭 Option 1 2. 새로운 창이 활성화되면, SciVal클릭하여 검색결과 바로 SciVal로 업로드 3. 해당 Publication set이름 입력 후 저장. Overview, Benchmarking 모듈에서 결과 확인 옵션2 <28> Option 2 4. Export에서 CSV 클릭하여 논문 리스트 다운로드 5.논문 리스트의 EID를 복사하여, SciVal의 Publication set 패널에서 Import EID (Scopus 논문의 고유 ID) 클릭하고 복사해 둔 EID를 업로드하여 학과 구성 6. Overview, Benchmarking, Trends 모듈에서 학과의 성과 확인 및 분석 4 I
  • 29. 1.My SciVal, Benchmarking 모듈 선택 후, 왼쪽 패널의 “Publication Sets”에서 업로드한 학과별 Publication set 선택 2.오른쪽의 “Table” 선택 후 “+” 아이콘 선택 3.“Add and manage metrics”의 새 창이 활성화되면, 오른쪽의 metrics를 선택하여 왼쪽의 “Metrics in the table”로 드래그 한 후 “Update Metrics” 클릭. Metrics는 다음페이지의 지표 10개를 기반으로 셋팅 4.Publication Sets로 업로드한 데이터의 경우는 H-index 산출이 되지 않기 때문에 논문 수 링크를 클릭하여 데이터 다운로드 받은 후 매뉴얼로 산출해야 함 검색식 기반의 학과 구성 (3/4) 1 2 4 3 <- # -> I
  • 30. ▪ Scholarly outputs, Publication: Scopus에 등재된 논문 출판물 수 ▪ CPP(Citation per publication): 논문 한 편당 인용 수 ▪ FWCI(Field-Weighted Citation Impact): 상대적인 피 인용지수. 전세계 평균 1을 기준으로 기관의 FWCI 비교 분석 ▪ Output in Top %: FWCI 지수 기반, 고 인용된 상위 1%, 10% 논문에 해당하는 비율 ▪ Publications in Top 10 Journals (%): CiteScore 지수 기준 상위 10% 저널에 논문을 발표한 비율 ▪ International Collaboration: 국제협력을 통해 발표한 논문 ▪ International Collaboration Impact: 국제 협력을 통해 발표한 논문의 한 편당 인용 수 Name Scholarly Output Citation Count CPP FWCI h-index Outputs in Top citations(%) Publications in Top 10 journals(%) International Collaboration Top 1% Top 10% Rate(%)CPP Korea University Chung-Ang University **대학교를 포함하여 **개 기관의 **사업단의 연구성과 분석 결과를 생산성, 영향력, 연구협력, 관심도 측면에서 분석 검색식 기반의 학과 구성 (4/4) 연구자의 h-지수가 13라면, 최소 13회 이상 인용된 논문을 13편 발표했다는 의미 No Citations 1 134 2 69 3 43 4 42 5 39 6 31 7 29 8 28 9 28 10 20 11 18 12 15 13 13 * H-index는 인용수가 높은 논문부터 내림차순으로 정렬하고, 해당 논문은 넘버링 하여, 논문번호와 인용수가 만나는 숫자를 H-index 로 산출. No가 인용 수 보다 크거나 같아야 함 <32> I
  • 31. 연구자 기반의 학과 구성 (1/2) ▪ 교수님들의 Scopus Author ID를 기반으로 연구자 업로드 및 학과별 연구자 그룹핑하여 성과 분석 • 학과 그룹핑을 위해 교수님별의 논문 리스트 정확히 확인해야 함 • 교수님별 Scopus 프로파일 ID 정리한 후, “Researchers and Groups”에 업로드(파일 형식 또는 아이디 붙여넣기) • 학과를 구성한 방식으로 연구팀 구성할 수 있으며, 특정 연구단 구성 시 어떤 구성원의 조합이 효과적인지 A그룹, B그룹 등으로 구성하여 성과 분석 시뮬레이션 • 우리학교의 학과 뿐 아니라 타 학교의 교수님 ID를 기반으로 학과 구성할 수 있음 <학과 예시: 개별 연구자를 기반으로 학과구성 및 성과분석> II ▪ 연구자들의 우리 학교 소속으로 발표한 논문만으로 성과 분석하고자 하는 경우, 연구자 그룹에서 아이콘을 “On”으로 셋팅하여 확인할 수 있음 ▪ 특정 연구자, 학과, 연구주제를 필요에 따라 특정 연구자, 교원, 직원 등과 서로 공유 ▪ 연구자 식별을 위해 Tag에 학과, 연구자 사번 등 입력 <28>
  • 32. 연구자 기반의 학과 구성 (2/2) 2 1 3 45 1. Overview, Benchmarking 모듈 및 My SciVal의 Researchers and Groups 패널 선택, “+Add Researchers and Groups” 클릭 후, “+ Import Researchers” 클릭 2. 새로운 창에 연구자의 ID를 복사하여 붙여 넣거나, 왼쪽 섹션의 지정된 파일 형식으로 일괄 업로드 3. 업로드한 Scopus ID 별 연구자명 확인 4. 화면 오른쪽 “Structures to be Imported”에서 해당 그룹명을 만들고, 왼쪽의 연구자 리스트를 선택 후 그룹명 안으로 드래그하여 그룹 구성 완료 5. My SciVal의 “Researchers and Groups” 패널에서 셋팅한 학과그룹 선택하여, Overview, Benchmarking 모듈에서 성과 확인 <32> II
  • 33. 데이터를 기반으로 학과단위 성과 분석III <33> 1.Overview, Benchmarking, Trends 모듈, My SciVal 선택 후, 왼쪽 패널의 “Publication Sets” 클릭 2.하단의 “+Add publications Sets” 클릭 3.Import publication set 창이 활성화되면 해당 학과별 논문의 DOI, EID를 “Paste IDs”에 붙여넣기 4.해당 논문리스트의 Publication set 이름을 저장 후, 학과의 성과를 Overview, Benchmarking, Trends 모듈에서 확인 1 2 4 3