Transcript Загрузить
Slide 1
Ресурсы Elsevier для науки и образования:
Эффективный процесс управления и оценки
научной деятельности
Вадим Александрович Соболев
Руководитель аналитических проектов Elsevier в России
[email protected]
Slide 2
Почему столько внимания библиометрии?
• Необходимость в наиболее эффективном вложении
ограниченных ресурсов
• Постоянное повышение ответственности перед теми, кто
финансирует исследования, и перед общественностью
• Все меньше места для ошибки
Slide 3
Проблема – Эффективная оценка научных
исследований
Slide 4
Крупнейшая в мире реферативная и аналитическая
база научных публикаций и цитирования
20 000 журналов от 5,000 различных издательств включая >300
российских изданий
• 50 миллионов записей с 1823г. (показатели цитируемости с 1996г.)
5,3 млн. материалов научных конференций
25 миллионов патентных записей
450 миллионов научных web-страниц
Уникальные профили авторов и организаций.
75 000 книг (3х летний проект с 2013г.).
Slide 5
Scopus используется во всем мире для анализа
состояния и перспектив развития науки
Slide 6
Анализ публикационной активности в Scopus
Как меняется
активность по
годам?
Кто наиболее
публикуемые и
цитируемые
авторы?
Какие журналы
содержат
публикации?
В каких странах
и организациях
ведутся
исследования?
Slide 7
SciVal - инновационный аналитический продукт
Elsevier
SciVal
революционный продукт,
который помогает организациям
идентифицировать и оценить
свои текущие силы, а так же
определить и выполнить
перспективную стратегию
развития
Slide 8
Что такое SciVal ?
Единый инструмент, соблюдающий баланс между
простотой в использовании и передовые аналитические
возможности
Полная гибкость: возможность создавать любую желаемую
группу исследователей и организаций, и сравнивать их с
любой референтной группой.
Предлагая широкий спектр общепринятых в отрасли и
простых в интерпретации метрик, SciVal позволяет
пользователю делать всестороннюю оценку научной
эффективности
8
Slide 9
Slide 10
Обзор текущих достижений организации
(Performance Overview )
Обзор и сравнение
4,600 организаций и
200 стран мира
Slide 11
Гибкие инструменты для оценки научной производительности
Slide 12
Cравнение различных метрик на уровне ученых, организаций,
стран, предметных областей и т.п.
Slide 13
Интерактивные карты научных коллабораций
Slide 14
www.snowballmetrics.com
• Метрики согласованы ведущими ВУЗами Великобритании
• Стремление стать международным стандартом для
- Оценки организаций
- Поддержки процесса принятия решений
- Охватывает весь спектр научного процесса
• Методология протестирована и доступна бесплатно
- Протестировано на данных Scopus, но не является “Эльзевировской”
метрикой
- Может использоваться любой организацией с любыми данными
14
Slide 15
Богатый набор метрик для анализа
Можно выбирать любые метрики и любые организации для
подробного анализа и сравнения
Productivity metrics
Scholarly Output
h-indices (h, g, m)
Citation Impact metrics
Citation Count
Citations per Publication
Cited Publications
h-indices (h, g, m)
Field-Weighted Citation Impact
Publications in Top Percentiles
Publications in Top Journal Percentiles
Collaboration Impact (geographical)
Academic-Corporate Collaboration Impact
Collaboration metrics
Authorship Count
Number of Citing Countries
Collaboration
(geographical)
Academic-Corporate Collaboration
Disciplinarity metrics
Journal count
Journal category count
Snowball Metric: www.snowballmetrics.com
Slide 16
Citation Count
Число цитирований
University of Oxford
University of St Andrews
Scholarly Output - общее число публикаций дает
представление о размере вуза
Подходит для:
• Демонстрации достижений
• Повышает видимость крупных
вузов
• Прозрачная и понятная метрика
Однако….
• Не позволяет сравнивать вузы
разного размера
• Не позволяет сравнивать
узкоспециализированные
организации (вуз гуманитарного
профиля)
• Недостаточно данных за
последние годы
Slide 17
Citations per Publication
Среднее цитирование на
публикацию
(метрика,
нормированная по размеру
организации)
University of Oxford
University of St Andrews
Подходит для:
• Демонстрации эффективности
• Сравнения вузов разного
размера
• Прозрачная и понятная метрика
Однако….
• Не позволяет сравнивать
узкоспециализированные
организации (вуз гуманитарного
профиля)
• Недостаточно данных за
последние годы
Slide 18
Field-Weighted Citation Impact
Метрика, нормированнная по
размеру организации,
предметной области и типу
публикаций
University of Oxford
University of St Andrews
Подходит для:
• Честного сравнения
разнотипных вузов
• Немедленное понимание
превосходства (1 = средний
уровень)
Однако….
• Теряется понимание масштаба достижений
• Сложные алгоритмы рассчета, которые почти невозможно воспроизвести
• Публике не нравится видеть маленькие цифры
18
Slide 19
h-index и его варианты, обычно используются для оценки
отдельных ученых
h-index = 7, означает что 7 статей были
процитированы как минимум 7 раз.
Productivity metrics
Scholarly Output
простой и легко
Collaboration metrics
+ Широко используемый,
воспроизводимый
индикатор
Number of
Citing Countries
для молодых(geographical)
ученых
Collaboration
- Не подходит
Citation Impact metrics
Academic-Corporate Collaboration
Citation Count
g-index выделяет наиболее
Citations per Publication
цитируемые
стати, увеличивая
престиж
Disciplinarity
metrics
Cited Publications
автора.Journal
Обычно
равен или больше hcount
h-indices (h, g, m)
index. Category count
Field-Weighted Citation Impact
Подчеркивает выдающиеся
Outputs in Top Percentiles
достижения автора.
Publications in Top Journal Percentiles Не подходит для среднего или
Collaboration Impact (geographical) молодого ученого.
Academic-Corporate Collaboration Impact
m-index это h-index деленный на число лет научной
активности ученого.
Выравнивает данные по ученым с разной
продолжительностью
карьеры
Snowball
Metric; www.snowballmetrics.com/metrics
19
Не подходит, если был перерыв в карьере.
+
-
+
-
Slide 20
Публикации в топ персентилях (Top Percentiles)
• Публикации в топ персентилях (Outputs in Top Percentiles )
- Публикации в 1%, 5%, 10% или 25% лучших публикаций всего мира
- По умолчанию берутся все данные Scopus, но можно выбрать и
отдельную страну (например, публикации в топ 1% всей России)
- Скоро можно будет выбирать любой объект для сравнения, например
публикации в топ 5% по физике/ в статьях CERN и т.п.
• Публикации в топ журналах (Top Journal Percentiles)
- Публикации в топ 1%, 5%, 10% or 25% научных журналов
- Можно делать выбор по SNIP, SJR или Raw Impact per Paper (аналог
“Impact Factor”)
Slide 21
Публикации в топ персентилях (Top Percentiles)
Outputs in Top Percentiles
Полезно для сравнения похожих
организаций, а так же для
показа своей
Productivity metrics
Collaboration
metrics
Scholarly Outputисключительности.
Number of Citing Countries
Не подходит для малых
организаций с(geographical)
Collaboration
числом статей
и цитирования. Не
Citation Impact небольшим
metrics
Academic-Corporate
Collaboration
Citation Count показывает общие достижения
Citations per Publication
Disciplinarity metrics
Cited Publications
Journal count
Publications
in Top Journal
h-indices (h, g, m)
Category count
Percentiles.
Field-Weighted Citation Impact
Подходит для начала карьеры, т.к.
Outputs in Top Percentiles
не требует накопления
Publications in Top Journal Percentiles
цитируемости.
Collaboration Impact (geographical)
Не отражает реальной важности
Academic-Corporate Collaboration Impact
работы автора. Не все журналы
имеют метрики (а книги совсем не
имеют…)
+
-
+
-
Snowball Metric; www.snowballmetrics.com/metrics
Slide 22
Метрики коллабораций (collaboration)
для ранней карьеры и для
+ Подходит
Productivity metrics
демонстрации видимости
Scholarly Output
организаций, можно применять сразу
после издания статьи, не нужно
Citation Impact
metrics привлекает
дожидаться
цитирования,
Citation Count
внимание.
Citations per Publication
Cited Publications
???
h-indices (h, g, m)
Field-Weighted Citation Impact
Outputs in Top Percentiles
Publications in Top Journal Percentiles
Collaboration Impact (geographical)
Academic-Corporate Collaboration Impact
-
Collaboration metrics
Number of Citing Countries
Collaboration
(geographical)
Academic-Corporate Collaboration
Disciplinarity metrics
Journal count
Category count
Slide 23
Все специалисты согласны, что ни одна
метрика не может эффективно отразить
весь спектр научной производительности
Метрики служат лишь дополнением к другим
источникам информации
Slide 24
Основные направления использования SciVal
Elsevier предлагает комплекс
информационных решений, который:
• оптимизирует научно-исследовательскую
деятельность
• обеспечивает оценку результатов
исследований по всем отраслям науки
• позволяет организациям и их
руководителям оптимизировать
стратегическое вложение средств
Slide 25
Thank
You
СПАСИБО!
Вадим Соболев
[email protected]
Ресурсы Elsevier для науки и образования:
Эффективный процесс управления и оценки
научной деятельности
Вадим Александрович Соболев
Руководитель аналитических проектов Elsevier в России
[email protected]
Slide 2
Почему столько внимания библиометрии?
• Необходимость в наиболее эффективном вложении
ограниченных ресурсов
• Постоянное повышение ответственности перед теми, кто
финансирует исследования, и перед общественностью
• Все меньше места для ошибки
Slide 3
Проблема – Эффективная оценка научных
исследований
Slide 4
Крупнейшая в мире реферативная и аналитическая
база научных публикаций и цитирования
20 000 журналов от 5,000 различных издательств включая >300
российских изданий
• 50 миллионов записей с 1823г. (показатели цитируемости с 1996г.)
5,3 млн. материалов научных конференций
25 миллионов патентных записей
450 миллионов научных web-страниц
Уникальные профили авторов и организаций.
75 000 книг (3х летний проект с 2013г.).
Slide 5
Scopus используется во всем мире для анализа
состояния и перспектив развития науки
Slide 6
Анализ публикационной активности в Scopus
Как меняется
активность по
годам?
Кто наиболее
публикуемые и
цитируемые
авторы?
Какие журналы
содержат
публикации?
В каких странах
и организациях
ведутся
исследования?
Slide 7
SciVal - инновационный аналитический продукт
Elsevier
SciVal
революционный продукт,
который помогает организациям
идентифицировать и оценить
свои текущие силы, а так же
определить и выполнить
перспективную стратегию
развития
Slide 8
Что такое SciVal ?
Единый инструмент, соблюдающий баланс между
простотой в использовании и передовые аналитические
возможности
Полная гибкость: возможность создавать любую желаемую
группу исследователей и организаций, и сравнивать их с
любой референтной группой.
Предлагая широкий спектр общепринятых в отрасли и
простых в интерпретации метрик, SciVal позволяет
пользователю делать всестороннюю оценку научной
эффективности
8
Slide 9
Slide 10
Обзор текущих достижений организации
(Performance Overview )
Обзор и сравнение
4,600 организаций и
200 стран мира
Slide 11
Гибкие инструменты для оценки научной производительности
Slide 12
Cравнение различных метрик на уровне ученых, организаций,
стран, предметных областей и т.п.
Slide 13
Интерактивные карты научных коллабораций
Slide 14
www.snowballmetrics.com
• Метрики согласованы ведущими ВУЗами Великобритании
• Стремление стать международным стандартом для
- Оценки организаций
- Поддержки процесса принятия решений
- Охватывает весь спектр научного процесса
• Методология протестирована и доступна бесплатно
- Протестировано на данных Scopus, но не является “Эльзевировской”
метрикой
- Может использоваться любой организацией с любыми данными
14
Slide 15
Богатый набор метрик для анализа
Можно выбирать любые метрики и любые организации для
подробного анализа и сравнения
Productivity metrics
Scholarly Output
h-indices (h, g, m)
Citation Impact metrics
Citation Count
Citations per Publication
Cited Publications
h-indices (h, g, m)
Field-Weighted Citation Impact
Publications in Top Percentiles
Publications in Top Journal Percentiles
Collaboration Impact (geographical)
Academic-Corporate Collaboration Impact
Collaboration metrics
Authorship Count
Number of Citing Countries
Collaboration
(geographical)
Academic-Corporate Collaboration
Disciplinarity metrics
Journal count
Journal category count
Snowball Metric: www.snowballmetrics.com
Slide 16
Citation Count
Число цитирований
University of Oxford
University of St Andrews
Scholarly Output - общее число публикаций дает
представление о размере вуза
Подходит для:
• Демонстрации достижений
• Повышает видимость крупных
вузов
• Прозрачная и понятная метрика
Однако….
• Не позволяет сравнивать вузы
разного размера
• Не позволяет сравнивать
узкоспециализированные
организации (вуз гуманитарного
профиля)
• Недостаточно данных за
последние годы
Slide 17
Citations per Publication
Среднее цитирование на
публикацию
(метрика,
нормированная по размеру
организации)
University of Oxford
University of St Andrews
Подходит для:
• Демонстрации эффективности
• Сравнения вузов разного
размера
• Прозрачная и понятная метрика
Однако….
• Не позволяет сравнивать
узкоспециализированные
организации (вуз гуманитарного
профиля)
• Недостаточно данных за
последние годы
Slide 18
Field-Weighted Citation Impact
Метрика, нормированнная по
размеру организации,
предметной области и типу
публикаций
University of Oxford
University of St Andrews
Подходит для:
• Честного сравнения
разнотипных вузов
• Немедленное понимание
превосходства (1 = средний
уровень)
Однако….
• Теряется понимание масштаба достижений
• Сложные алгоритмы рассчета, которые почти невозможно воспроизвести
• Публике не нравится видеть маленькие цифры
18
Slide 19
h-index и его варианты, обычно используются для оценки
отдельных ученых
h-index = 7, означает что 7 статей были
процитированы как минимум 7 раз.
Productivity metrics
Scholarly Output
простой и легко
Collaboration metrics
+ Широко используемый,
воспроизводимый
индикатор
Number of
Citing Countries
для молодых(geographical)
ученых
Collaboration
- Не подходит
Citation Impact metrics
Academic-Corporate Collaboration
Citation Count
g-index выделяет наиболее
Citations per Publication
цитируемые
стати, увеличивая
престиж
Disciplinarity
metrics
Cited Publications
автора.Journal
Обычно
равен или больше hcount
h-indices (h, g, m)
index. Category count
Field-Weighted Citation Impact
Подчеркивает выдающиеся
Outputs in Top Percentiles
достижения автора.
Publications in Top Journal Percentiles Не подходит для среднего или
Collaboration Impact (geographical) молодого ученого.
Academic-Corporate Collaboration Impact
m-index это h-index деленный на число лет научной
активности ученого.
Выравнивает данные по ученым с разной
продолжительностью
карьеры
Snowball
Metric; www.snowballmetrics.com/metrics
19
Не подходит, если был перерыв в карьере.
+
-
+
-
Slide 20
Публикации в топ персентилях (Top Percentiles)
• Публикации в топ персентилях (Outputs in Top Percentiles )
- Публикации в 1%, 5%, 10% или 25% лучших публикаций всего мира
- По умолчанию берутся все данные Scopus, но можно выбрать и
отдельную страну (например, публикации в топ 1% всей России)
- Скоро можно будет выбирать любой объект для сравнения, например
публикации в топ 5% по физике/ в статьях CERN и т.п.
• Публикации в топ журналах (Top Journal Percentiles)
- Публикации в топ 1%, 5%, 10% or 25% научных журналов
- Можно делать выбор по SNIP, SJR или Raw Impact per Paper (аналог
“Impact Factor”)
Slide 21
Публикации в топ персентилях (Top Percentiles)
Outputs in Top Percentiles
Полезно для сравнения похожих
организаций, а так же для
показа своей
Productivity metrics
Collaboration
metrics
Scholarly Outputисключительности.
Number of Citing Countries
Не подходит для малых
организаций с(geographical)
Collaboration
числом статей
и цитирования. Не
Citation Impact небольшим
metrics
Academic-Corporate
Collaboration
Citation Count показывает общие достижения
Citations per Publication
Disciplinarity metrics
Cited Publications
Journal count
Publications
in Top Journal
h-indices (h, g, m)
Category count
Percentiles.
Field-Weighted Citation Impact
Подходит для начала карьеры, т.к.
Outputs in Top Percentiles
не требует накопления
Publications in Top Journal Percentiles
цитируемости.
Collaboration Impact (geographical)
Не отражает реальной важности
Academic-Corporate Collaboration Impact
работы автора. Не все журналы
имеют метрики (а книги совсем не
имеют…)
+
-
+
-
Snowball Metric; www.snowballmetrics.com/metrics
Slide 22
Метрики коллабораций (collaboration)
для ранней карьеры и для
+ Подходит
Productivity metrics
демонстрации видимости
Scholarly Output
организаций, можно применять сразу
после издания статьи, не нужно
Citation Impact
metrics привлекает
дожидаться
цитирования,
Citation Count
внимание.
Citations per Publication
Cited Publications
???
h-indices (h, g, m)
Field-Weighted Citation Impact
Outputs in Top Percentiles
Publications in Top Journal Percentiles
Collaboration Impact (geographical)
Academic-Corporate Collaboration Impact
-
Collaboration metrics
Number of Citing Countries
Collaboration
(geographical)
Academic-Corporate Collaboration
Disciplinarity metrics
Journal count
Category count
Slide 23
Все специалисты согласны, что ни одна
метрика не может эффективно отразить
весь спектр научной производительности
Метрики служат лишь дополнением к другим
источникам информации
Slide 24
Основные направления использования SciVal
Elsevier предлагает комплекс
информационных решений, который:
• оптимизирует научно-исследовательскую
деятельность
• обеспечивает оценку результатов
исследований по всем отраслям науки
• позволяет организациям и их
руководителям оптимизировать
стратегическое вложение средств
Slide 25
Thank
You
СПАСИБО!
Вадим Соболев
[email protected]