RUS  ENG    ЖУРНАЛЫ   ПЕРСОНАЛИИ   ОРГАНИЗАЦИИ   КОНФЕРЕНЦИИ   СЕМИНАРЫ   ВИДЕОТЕКА   ПАКЕТ AMSBIB
Общая информация
Последний выпуск
Архив

Поиск публикаций
Поиск ссылок

RSS
Последний выпуск
Текущие выпуски
Архивные выпуски
Что такое RSS



Препринты ИПМ им. М. В. Келдыша:
Год:
Том:
Выпуск:
Страница:
Найти






Персональный вход:
Логин:
Пароль:
Запомнить пароль
Войти
Забыли пароль?
Регистрация


Препринты ИПМ им. М. В. Келдыша, 2019, 020, 31 стр. (Mi ipmp2658)  

Скрейпинг «на лету» внешних веб ресурсов, управляемый разметкой HTML страницы

Е. Л. Китаев, Р. Ю. Скорнякова


Аннотация: В работе изложен подход к отображению на веб страницах данных из кросс доменных ресурсов с использованием REST API и описан созданный на основе этого подхода инструмент, позволяющий извлекать и показывать на веб странице метаданные размещенных в интернете html документов, pdf файлов и документов Word, а также микроданные и данные в формате JSON LD. Инструмент включает в себя REST API на веб сервере IIS и скрипты на языке JavaScript. Приведены примеры использования этого инструмента для создания списка организаций, веб страницы с ценами на один и тот же товар в разных интернет магазинах, списка научных статей. Созданный REST API допускает кросс доменный доступ (CORS) и может быть использован при запросах из веб страниц любых доменов.

Ключевые слова: веб-скрейпинг, микроразметка, семантическая разметка, микроданные, JSON-LD, REST API, CORS.

DOI: https://doi.org/10.20948/prepr-2019-20

Полный текст: PDF файл (1941 kB)
Полный текст: http:/.../preprint.asp?id=2019-20&lg=r
Список литературы: PDF файл   HTML файл

Реферативные базы данных:

Тип публикации: Препринт

Образец цитирования: Е. Л. Китаев, Р. Ю. Скорнякова, “Скрейпинг «на лету» внешних веб ресурсов, управляемый разметкой HTML страницы”, Препринты ИПМ им. М. В. Келдыша, 2019, 020, 31 с.

Цитирование в формате AMSBIB
\RBibitem{KitSko19}
\by Е.~Л.~Китаев, Р.~Ю.~Скорнякова
\paper Скрейпинг «на лету» внешних веб ресурсов, управляемый разметкой HTML страницы
\jour Препринты ИПМ им.~М.~В.~Келдыша
\yr 2019
\papernumber 020
\totalpages 31
\mathnet{http://mi.mathnet.ru/ipmp2658}
\crossref{https://doi.org/10.20948/prepr-2019-20}
\elib{https://elibrary.ru/item.asp?id=37035652}


Образцы ссылок на эту страницу:
  • http://mi.mathnet.ru/ipmp2658
  • http://mi.mathnet.ru/rus/ipmp/y2019/p20

    ОТПРАВИТЬ: VKontakte.ru FaceBook Twitter Mail.ru Livejournal Memori.ru


    Citing articles on Google Scholar: Russian citations, English citations
    Related articles on Google Scholar: Russian articles, English articles
  • Препринты Института прикладной математики им. М. В. Келдыша РАН
    Просмотров:
    Эта страница:233
    Полный текст:119
    Литература:9
     
    Обратная связь:
     Пользовательское соглашение  Регистрация  Логотипы © Математический институт им. В. А. Стеклова РАН, 2021