Моделирование исследований с открытым исходным кодом с помощью OpenAlex API
• Интеллектуальные данные с открытым исходным кодом (OSINT) полезны для анализа социальных сетей, веб-данных и глобальных исследований. • Тематическое моделирование используется для лучшего понимания больших объемов текстовых данных, например, для выявления негативных отзывов и ключевых проблем в опросах клиентов. • OpenAlex - бесплатная система каталогов глобальных исследований с бесплатным (ограниченным) API для быстрого просмотра десятков тысяч статей и применения фильтров. • Создание конвейера передачи данных включает импорт документов из API, применение критериев, таких как год выпуска и ключевые термины, и удаление дубликатов документов. • Предварительная обработка NLP включает стандартизацию, удаление стоп-слов, лемматизацию и другие этапы для подготовки данных к модели. • Дальнейшие шаги включают улучшение конвейера передачи данных, анализ стоп-слов и использование других методов NLP.
Этот пост подготовила нейросеть: сделала выжимку статьи и, возможно, даже перевела ее с английского. А бот опубликовал пост в Сетке.
