05.10.2020, 09:27 | #1 |
Member
Аспирант
Регистрация: 08.07.2020
Адрес: Санкт-Петербург
Сообщений: 73
Сказал(а) спасибо: 111
Получил(а) "Спасибо": 100
Нарушения: 0/0 (0)
Репутация: 2162
|
Парсинг сайта из Linux на perl
Посоветуйте, как можно спарсить сайт из linux на perl.
Но парсинг трудный для perl-а. Для перехода на следующую страницу надо программно нажать кнопку. При клике отрабатывает событие Click, через JavaScript генерится закодированный SID, сохраняемый в cookie. Переход идет на ту же страницу, параменты поиска и текущая страница поиска через cookie тащится. Или бесплатную или недорогую программу (или расщирение) под windows посоветуйте, в которой можно запрограммировать щелчек по кнопке и скачивание страниц в файлы. Задача разовая, $100 за софт не готов платить. |
05.10.2020, 09:31 | #2 | |
ОПТимизирую оптом.
Академик
Регистрация: 26.06.2020
Сообщений: 1,162
Сказал(а) спасибо: 1,384
Получил(а) "Спасибо": 3,065
Нарушения: 0/0 (0)
Репутация: 762908
|
Re: Парсинг сайта из Linux на perl
Цитата:
|
|
Сказали спасибо: |
05.10.2020, 10:04 | #3 |
Member
Аспирант
Регистрация: 08.07.2020
Адрес: Санкт-Петербург
Сообщений: 73
Сказал(а) спасибо: 111
Получил(а) "Спасибо": 100
Нарушения: 0/0 (0)
Репутация: 2162
|
Re: Парсинг сайта из Linux на perl
|
06.10.2020, 14:03 | #4 |
Слесарь-сайтосборщик
Доцент
Регистрация: 22.06.2020
Адрес: Замкадье
Сообщений: 403
Сказал(а) спасибо: 985
Получил(а) "Спасибо": 1,178
Нарушения: 0/0 (0)
Репутация: 180645
|
Re: Парсинг сайта из Linux на perl
Perl – это к *******у, он спец по перлу, даже поисковик на нём напрограммировал.
А что так именно перл впёрся? PHP на сервере нет? |
Сказали спасибо: |
06.10.2020, 21:38 | #5 | |
Member
Аспирант
Регистрация: 08.07.2020
Адрес: Санкт-Петербург
Сообщений: 73
Сказал(а) спасибо: 111
Получил(а) "Спасибо": 100
Нарушения: 0/0 (0)
Репутация: 2162
|
Re: Парсинг сайта из Linux на perl
Цитата:
ЗЫ: Нашел приятный аддон webscraper.io для файерфокса под винду, скрипт наваял, но как назло он вылетает по ошибке именно на операции перехода по ссылкам пагинации. Баг наверно, разработчики пока молчат. |
|
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Системный администратор Linux. Настройка, оптимизация и сопровождение серверов | Evas | Биржа услуг | 26 | 13.12.2022 08:37 |
SerfStack.com - аренда VPS/VDS сервера от 260 руб. Windows/Linux Server. | Dmt Izmailov | Хостинг и домены | 6 | 19.01.2021 16:47 |
Есть вопрос. Парсинг базы товаров конкурента. E-comm. | zinovev.seo | Продвижение и оптимизация сайтов | 9 | 25.08.2020 10:35 |
Поиск для сайта | medexpert | Веб-строительство | 11 | 03.08.2020 02:24 |