РАЗРАБОТКА АЛГОРИТМОВ ИНТЕЛЛЕКТУАЛЬНОГО СЕРВИСА ПОИСКА И МОНИТОРИНГА ИНФОРМАЦИИ
Аннотация
Описана проблема стратегического анализа и выбора направлений развития инноваци- онного предприятия в условиях перехода к 6 технологическому укладу и индустрии 4.0. В дан- ных условиях поисково-аналитическая обработка информации не может быть полноценно выполнена без применения автоматизированных информационно-аналитических систем, в том числе и на базе искусственного интеллекта. В ходе анализа были определены основные приоритетные функции, которые должны обеспечивать разрабатываемые сервисы. Обо- значены основные трудности при разработке данных сервисов, такие как: предварительная обработка данных и автоматизированная проверка актуальности баз данных. Для эффек- тивного решения поставленных задач сервис интеллектуального мониторинга и поиска ин- формации должен использовать комплексный подход с учетом эффективности применения методов для отдельных подзадач, обеспечивать высокую эффективность реализации всех этапов процедуры интеллектуального мониторинга. В связи с этим в данной работе описы- вается не только разработка общего интеллектуального поискового алгоритма, но и от- дельные блок-алгоритмы, необходимые для обеспечения приоритетных функций разрабаты- ваемого сервиса. В работе представлены следующие алгоритмы: алгоритм информационного поиска, необходимый для решения задачи полнотекстового поиска документов в пределах базы информационных ресурсов информационно-аналитического комплекса; алгоритм про- цедуры внесения новых документов; алгоритм предварительной обработки данных, выклю- чающий в себя стемминг и удаление знаков препинания для последующего анализа текста; алгоритм оценки ранжирования и релевантности информации, включающий в себя вектори- зацию документов; алгоритм кластеризации результатов поиска информации на основе ней- ронной сети Кохонена; алгоритм проверки актуальности информации -проверка соответст- вия локальной копии документа актуальной версии на веб-ресурсе источника. Предложен и обоснован язык программирования Python для реализации представленного алгоритма. Сис- тема обеспечивает автоматизированный непрерывный мониторинг с высокой периодично- стью отправки запроса без участия оператора, что повысит качество и эффективность информационного поиска в условиях большого объёма неструктурированной информации
