Архив выступлений: 2016-2017 учебный год, осенний семестр

М. Дзабраев (Мех.-мат. МГУ).
«Извлечение данных с веб-сайтов средствами Mozilla Firefox».

Аннотация доклада.

Практически все современные веб-сайты наделены динамической составляющей, которая реализуется посредством исполнения javascript во время работы пользователя с веб-сайтом. Как следствие, чтобы получить какие-либо данные с веб-сайта в автоматическом режиме необходимо использовать динамическую составляющую, исполняя javascript код, и, тем самым, эмулируя работу пользователя.

В докладе будет рассмотрен алгоритм, при помощи которого эмулируется работа пользователя. Алгоритм позволяет обходить произвольный веб-сайт без какой-либо начальной информации о сайте. Будет также показано, что данный алгоритм можно реализовать, используя веб-броузер Mozilla Firefox.