вторник, 15 августа 2017 г.

Размер пристатейной бибилиографии

Небольшой кейс наукометрического анализа.
Открываем InCites, аналитическую надстройку над данными Web of Science (требует наличия подписки). Смотрим в разделе Research Areas, для организации, в данном случае УрФУ за пять лет (2012–2016), список публикаций по категориям WoS которые дают больше всего публикаций. Почетное четвертое место занимает металлургия (~10% публикаций), которые цитируются в четыре раза хуже чем по миру, и только 40% из них были за этот период процитированы.


Может быть, это специфическая область, в которой работы цитируются медленней, чем в среднем по категории Metallurgy & Metallurgical Engineering? Загрузим в InCites референтные публикации, отобранные по тематике на основании цитирования, в рамках работы по разработке плана развития науки в УрФУ выполненного компанией Clarivate Analytics (ранее подразделение Thomson Reuters). Референтные публикации строились на основании публикаций УрФУ и УрО РАН по металлургии отобранных вручную учеными университета и институтов, за период 2003 по 2013, данные за последние четыре года не добавлялись.

За период 2003 по 2013, видим, что среднее число цитирований публикаций в области по миру в 2–3 раза выше, чем в УрФУ. Отдельно показаны публикации ИФМ УрО РАН, публикации РАН на графике сделаны только институтами УрО РАН по металлургии. Соотношение показателей лучше, чем по категории Metallurgy & Metallurgical Engineering, однако не кардинально лучше. 
Замечание по публикациям 2003 года, в референтные публикации за этот год попали только публикации УрФУ и институтов УрО РАН и те, которые в них цитировались за этот год.

Одна из гипотез почему такие низкие показатели по цитированию, была сформулирована на основании анализа данных по качеству пристатейной библиографии в 2011 году.
Один из факторов, определяющих низкие показатели цитирования, это низкое качество библиографии, те кому потенциально интересна опубликованная работа практически не имеют шансов найти ее в момент выхода на основании поиска по цитированию ключевых работ в области.
Может, мало цитируют, так как тематика публикаций малоинтересная? Вопрос интересный, и требует отдельного рассмотрения.
На пироге ниже, анализ библиографии статей (брался только тип article и 10% случайных статей от опубликованных), в журналах выполненных металлургами и химиками УрФУ за 2010 год, по сравнению со статьями, опубликованными в тех же журналах в тот же год, по данным Scopus. В среднем авторы приводили на ~20% ссылок меньше чем их коллеги по журналу. Треть ссылок базой не распознавалась и вела на русские публикации, часто на русскую версию публикации в переводном издании. И размер пристатейной библиографии у металлургов был от 4 до 12 со средним значением 6. Плюс половина ссылок была самоцитированием.


Посмотрим, что было в динамике и сравним с референтными публикациями.
Построенная в лоб картинка распределения числа публикаций по размеру библиографического списка ниже, учитывался только тип article. Анализ только по типу article исключает проблему длинных и коротких библиографических списков в обзорах и сообщениях.
Видим скошенное распределение, со смещенными средними и медианой, из-за длинного хвоста. Еще одной причиной отклонения распределения от нормального является раздувание размеров пристатейной библиографии (смотри следующую картину), на которую обратил мое внимание Иван Стерлигов. Большое спасибо за обсуждение и присланные ссылки.



Распределение среднего размера пристатейной библиографии по годам, приведено на графике ниже, для наглядности показаны значения УрФУ и институтов УрО РАН. Распределение по годам ближе к нормальным, и вычисления среднего осмысленно.



Посмотрим на достоверность различия размеров пристатейной библиографии за период, для красоты пририсуем «усики». Для наглядности сравнения взяты публикации из четырех дополнительных областей по материаловедению построенные за тот же период.


Предварительно можно рекомендовать ученым УрФУ и УрО РАН публикующимся в области металлургии обратить внимание на формирование пристатейной библиографии. 

Можно ли такой анализ сделать самостоятельно? Да можно, в выгрузках WoS размер пристатейной библиографии тоже доступен. Окрестность с референтными публикациями тоже можно построить либо оценить средние значения для нее.

Над чем можно поработать дальше? Можно сравнить процент распознавания источников и старость источников и проверить актуальность тематик. 
Об этом будут отдельные заметки. 

пятница, 7 июля 2017 г.

Чек-лист подготовки публикации

Чек-лист был подготовлен и опубликован в Методические рекомендации по подготовке и оформлению научных статей в журналах, индексируемых в международных наукометрических базах данных / Ассоциация научных редакторов и издателей; под общ. ред. О.В. Кирилловой. М, 2017. 144 c. (доступен полный текст рекомендаций по приведенной ссылке).

Как читать чеклист?

Чек-лист читается и проверяется по пунктам в процессе выполнения научных исследований для предотвращения ошибок при написании и опубликовании научной работы. К каждому пункту предполагается написание методических указаний, раскрывающих способ выполнения работы. Чек-лист не ставят целью показать, как выполнять научное исследование. Цель чек-листа – сформулировать в форме проверочных утверждений критерии выполнения практик, применяемых в научном исследовании.

Применимость

Пункты, отмеченные звездочкой *, должны быть уточнены в зависимости от сложившейся практики научной коммуникации в отдельных науках. 
 1. Сформулировано направление исследований.
2. Определено сообщество ученых и практиков, которым интересны результаты проводимых исследований.
3. Регулярно читаются и отслеживаются публикации из журналов и трудов конференций по теме исследований.
4. Определены работы, в которых описано возникновение темы исследований, и отслеживая цитирования которых, члены сообщества найдут вашу работу.
5. Определены обзоры и работы за последние 2–3 года с результатами по теме исследования.
6. Тема исследования четко сформулирована в форме research proposal. Написано введение для будущей публикации.
7. Выбраны признанные сообществом методы исследования.
8. Определены следующие шаги по развитию исследования.
9. Известны средства коммуникации, принятые в сообществе (конференции, научные журналы, семинары).
10. Намечены варианты изданий для публикации итогового варианта работы.
11. Определены требования к изложению результатов и полученные результаты соответствуют им.
12. Проведено обсуждение research proposal с научной группой внутри организации.
13. Определен объем раскрываемых сведений и принято решение по обнародованию презентации с неопубликованными результатами исследований (вопрос приоритетов и оригинальности).
14. Проведено обсуждение research proposal и первых результатов на научной конференции или семинаре, признанными сообществом.
15. Составлен список коллег, которым будет интересна итоговая публикация.
16. Предварительные результаты исследования опубликованы на странице автора (если решено опубликовать предварительный материал, презентацию или препринт).
17. Проведено обсуждение материалов публикации с будущими соавторами.
18. * Соавторы дали согласие на указание своего имени в качестве автора.
19. * Составлен итоговый список авторов публикации. Для каждого соавтора определена его роль в публикации (роли не публикуются, но предъявляются по первому требованию редактора).
20. * Определен порядок указания авторов в публикации.
21. * Для каждого автора указаны места работы, их порядок и каноническое написание организации (просим прислать соавторов и сверяем на сайте).
22. Изучены правила грантовых организаций по указанию грантов. Исключены конфликты по указанию нескольких источников финансирования.
23. Выбран тип публикации и написан черновой вариант текста публикации.
24. * Принято решение о публикации в открытом доступе и определены источники оплаты публикации открытого доступа (если это допускается правилами журнала).
25. * Наборы экспериментальных данных и лабораторный журнал подготовлен для предъявления в случае требования верифицировать результаты исследований.
26. Составлен и проверен полный перечень использованных источников в тексте и в ходе работы (использовано программное обеспечение для управления библиографией).
27. * Принято решение о публикации и дате публикации наборов экспериментальных данных и лабораторного журнала в data repository.
28. * Наборы экспериментальных данных и лабораторный журнал опубликованы в data repository.
29. Установлен и соблюдается порядок внесения правок в текст публикации.
30. Сформирована последовательность изданий, в которые будет подаваться публикация. Порядок изданий определяется на основании престижности журналов и значимости полученных результатов. Публикация в каждый момент времени подается только в один журнал.
31. Сформулировано итоговое название публикации, содержащее ключевые слова и отражающее полученный результат.
32. Изучены Руководства для Авторов (Guide for Authors) и получены шаблоны оформления публикаций для каждого журнала и текст публикации приведен в соответствие требованиям.
33. Составлен перечень требований к комплектности подаваемого материала.
34. Иллюстративный и сопроводительный материал публикации приведен в соответствии с требованием журнала.
35. Составлена аннотация, дающая точное и полное представление о содержании работы.
36. Составлен полный и точный список ключевых слов к публикации.
37. Пристатейная библиография отформатирована в соответствии со стилем, требуемым в журнале.
38. Сформирован раздел благодарностей (Acknowledgements).
39. Определен порядок подачи материала: способ подачи в редакцию и автор, ответственный за переписку с редактором. Автор, ответственный за переписку, указывается как автор по переписке (контактный автор, corresponding author), указывается одно место его работы.
40. Текст публикации вычитан на предмет отсутствия ошибок и приведен к требованиям, принятым в подаваемом журнале.
41. Публикация проверена на предмет соответствия требованиям к подаваемому в журнал материалу.
42. Проверено выполнение требований организации к публикации материалов: патентная проверка, экспортный контроль, уведомление о посылке публикации в печать.
43. Определены требования журнала по публикации авторской версии работы в репозиториях открытого доступа и отправки материалов коллегам.
44. Написано сопроводительное письмо (Cover Letter) редактору с пояснением, почему работа будет полезной и важной для журнала.
45. Публикация отправлена в журнал.
46. Отработаны замечания рецензентов и редактора, отметка об исправлении или выражение несогласия по каждому пункту доработки отправлены редактору.
47. В случае отказа публикация переоформлена по правилам следующего в очереди журнала и отправлена в него.
48. Авторская версия с внесенными исправлениями подготовлена для публикации в репозитории открытого доступа и рассылке коллегам.
49. Авторская версия опубликована в репозитории открытого доступа и отправлена коллегам в сроки и в соответствии с правилами издательства.

понедельник, 26 июня 2017 г.

Чек-лист отказа от участия в разборе кейса

Важно, речь о  важных либо крупных  кейсах. Один выполненный пункт повод провести детальную диагностику, два и более выполненных пункта кейс отправляется в прозекторскую и на кладбище.
NB помню, что есть полный и надежный набор чек-листов состояний альф. Цель краткого списка быстро похоронить дело в своем сознании, потратив минимум своих сил.


  1. Заказчик систематически мыслит категориями мелких целей, не демонстрируя понимание места результата кейса в организации.
  2. Результатом деятельности будет усложнение работы людей без пользы для них или эквивалентной компенсации, с исчезающим малым общим профитом.
  3. Деньги на задачу не выделяются их нужно выманивать под крупные закупки.
  4. Оплата исполнителям не предусмотрена даже в форме указания тратить свое рабочее время вместо должностных.
  5. На проект назначают руководителя который не в теме либо со стороны.
  6. Участие в проекте подразумевается, а не оговаривается.
  7. Заказчик настолько занят, что не готов на регулярные встречи.
  8. Заказчик не использует социальные практики, особенно в ситуации когда не обладает реальной властью над участниками работы.
  9. Не работать с му*ками!