Метод автоматизированной оценки достоверности альтернативных утверждений в коллекции научных статей на примере темы "окна Овертона"

Обложка

Цитировать

Полный текст

Аннотация

В работе предложен метод оценки достоверности противоположных утверждений/фактов по трендам на основе библиографических данных. Приведен пример его использования. Обсуждена возможность автоматизации метода и пополнения базы фактов. В качестве примера были проанализированы 1047 статей из научной библиотеки eLibrary, содержащие слова "окно" и "Овертона". С помощью предложенного метода показано, что “работающая технология” и “псевдонаучный концепт” – это альтернативные точки зрения на “окна Овертона”. Определено, что понятие “работающая технология” является более достоверной.

Полный текст

Доступ закрыт

Об авторах

Михаил Михайлович Шарнин

Федеральный исследовательский центр «Информатика и управление» РАН

Автор, ответственный за переписку.
Email: mc@keywen.com

Кандидат технических наук, старший научный сотрудник

Россия, Москва

Николай Владимирович Сомин

Федеральный исследовательский центр «Информатика и управление» РАН

Email: chri-soc@yandex.ru

Кандидат физико-математических наук, ведущий научный сотрудник

Россия, Москва

Список литературы

  1. Ануфриева Д.Ю., Гузенко А.Ю. Содержание понятия "критическое оценивание информации" // Проблемы современного педагогического образования. 2017. № 56-1. С. 3-9.
  2. Воронцов К.В. Технологии искусственного интеллекта против фейков, постправды и информационных войн // Заседание Экспертного совета по развитию цифровой экономики, технологий и инноваций Молодёжного парламента при Государственной думе Федерального Собрания РФ по теме «Противодействие деструктивной идеологии (нацизм, терроризм, криминал)». 17 февраля 2023. Электронный ресурс. URL: https://rutube.ru/video/8628f049a17ae40e95b8aa33cbfd5b 69/ (доступ 05.10.2023).
  3. Ефремов Ю.Н. Лженаука и гипотеза // Бюллетень «В защиту науки». Комиссия РАН по борьбе с лженаукой. 2010. № 7. С. 51-58.
  4. Мельников О.Н. Рецензирование как фактор повышения качества научной информации // Научная периодика: проблемы и решения. 2011. № 2 (2). С. 20-23.
  5. Arazy O., Kopak R. On the measurability of information quality //Journal of the American Society for Information Science and Technology. 2011. V. 62. №. 1. P. 89-99.
  6. Google. Search Quality Evaluator Guidelines // Google, Mountain View, CA, USA, 2018.
  7. Hanselowski A., Stab C., Schulz C., Li Z., Gurevych I. A richly annotated corpus for different tasks in automated fact-checking // arXiv preprint arXiv:1911.01214. October 2019. Electronic resource. URL: https://arxiv.org/pdf/1911.01214.pdf (accessed 05.10.2023).
  8. Sarabadani A., Halfaker A., Taraborelli D. "Building automated vandalism detection tools for Wikidata" // Proc. 26th Int. Conf. World Wide Web Companion (WWW Companion), P. 1647-1654, 2017.
  9. Sugandhika C., Ahangama S. Assessing Information Quality of Wikipedia Articles Through Google’s E-A-T Model // IEEE Access, V. 10, P. 52196-52209, 2022, doi: 10.1109/ACCESS.2022.3172962.
  10. Thorne J., Vlachos A., Christodoulopoulos C., Mittal A. FEVER: a large-scale dataset for fact extraction and VERification // arXiv preprint arXiv:1803.05355. December 2018. Electronic resource. URL: https://arxiv.org/pdf/1803.05355.pdf (accessed 05.10.2023).
  11. Wadden D., Lin S., Lo K., Wang L.L., van Zuylen M., Cohan A. Hajishirzi H. Fact or fiction: Verifying scientific claims // Proceedings of the 2020 Conference on Empirical Methods in Natural Language Processing (EMNLP). Association for Computational Linguistics. 2020. P. 7534–7550.
  12. Wadden D., Lo K., Kuehl B., Cohan A., Beltagy I., Wang L.L., Hajishirzi H. SciFact-open: Towards open-domain scientific claim verification // arXiv preprint arXiv:2210.13777. October 2022. Electronic resource. URL: https://arxiv.org/pdf/2210.13777.pdf (accessed 05.10.2023).
  13. Zhang A. X. et al. A structured response to misinformation: Defining and annotating credibility indicators in news articles //Companion Proceedings of the The Web Conference 2018. 2018. P. 603-612.

Дополнительные файлы

Доп. файлы
Действие
1. JATS XML
2. Рис. 1. Доля статей из групп “технология” и “псевдонаучно” в процентах по отношению к общему количеству статей группы “окна Овертона”

Скачать (27KB)
3. Рис. 2. Доля статей из групп “технология” и “псевдонаучно” (без обзорных статей) в процентах по отношению к общему количеству статей группы “окна Овертона”

Скачать (24KB)
4. Рис. 3. Скользящее среднее за 3 года от доли статей из групп “патент” и “лженаука” (без обзорных статей) в процентах по отношению к общему количеству статей группы “торсионные поля”

Скачать (22KB)

Согласие на обработку персональных данных с помощью сервиса «Яндекс.Метрика»

1. Я (далее – «Пользователь» или «Субъект персональных данных»), осуществляя использование сайта https://journals.rcsi.science/ (далее – «Сайт»), подтверждая свою полную дееспособность даю согласие на обработку персональных данных с использованием средств автоматизации Оператору - федеральному государственному бюджетному учреждению «Российский центр научной информации» (РЦНИ), далее – «Оператор», расположенному по адресу: 119991, г. Москва, Ленинский просп., д.32А, со следующими условиями.

2. Категории обрабатываемых данных: файлы «cookies» (куки-файлы). Файлы «cookie» – это небольшой текстовый файл, который веб-сервер может хранить в браузере Пользователя. Данные файлы веб-сервер загружает на устройство Пользователя при посещении им Сайта. При каждом следующем посещении Пользователем Сайта «cookie» файлы отправляются на Сайт Оператора. Данные файлы позволяют Сайту распознавать устройство Пользователя. Содержимое такого файла может как относиться, так и не относиться к персональным данным, в зависимости от того, содержит ли такой файл персональные данные или содержит обезличенные технические данные.

3. Цель обработки персональных данных: анализ пользовательской активности с помощью сервиса «Яндекс.Метрика».

4. Категории субъектов персональных данных: все Пользователи Сайта, которые дали согласие на обработку файлов «cookie».

5. Способы обработки: сбор, запись, систематизация, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передача (доступ, предоставление), блокирование, удаление, уничтожение персональных данных.

6. Срок обработки и хранения: до получения от Субъекта персональных данных требования о прекращении обработки/отзыва согласия.

7. Способ отзыва: заявление об отзыве в письменном виде путём его направления на адрес электронной почты Оператора: info@rcsi.science или путем письменного обращения по юридическому адресу: 119991, г. Москва, Ленинский просп., д.32А

8. Субъект персональных данных вправе запретить своему оборудованию прием этих данных или ограничить прием этих данных. При отказе от получения таких данных или при ограничении приема данных некоторые функции Сайта могут работать некорректно. Субъект персональных данных обязуется сам настроить свое оборудование таким способом, чтобы оно обеспечивало адекватный его желаниям режим работы и уровень защиты данных файлов «cookie», Оператор не предоставляет технологических и правовых консультаций на темы подобного характера.

9. Порядок уничтожения персональных данных при достижении цели их обработки или при наступлении иных законных оснований определяется Оператором в соответствии с законодательством Российской Федерации.

10. Я согласен/согласна квалифицировать в качестве своей простой электронной подписи под настоящим Согласием и под Политикой обработки персональных данных выполнение мною следующего действия на сайте: https://journals.rcsi.science/ нажатие мною на интерфейсе с текстом: «Сайт использует сервис «Яндекс.Метрика» (который использует файлы «cookie») на элемент с текстом «Принять и продолжить».