Возможно ли спарсить сайт?
Модератор: Admin
Возможно ли спарсить сайт?
Может кто подскажет, можно ли этот сайт спарсить. А то бьюсь а не выходит. Мне просто нужно понять есть ли такие сайты которые нельзя спарсить?
- Вложения
-
- Screenshot_5.png (62.25 КБ) 11378 просмотров
Re: Возможно ли спарсить сайт?
Вы бы сначало попробовали сами, перед тем как писать. Источник правильно указан- это раздел сайта. Если убрать его и оставить только .../news/ то выведет ошибку страницы 404.
- Admin
- Администратор
- Сообщения: 578
- Зарегистрирован: 22 ноя 2015, 12:18
- Откуда: СССР
- Благодарил (а): 48 раз
- Поблагодарили: 20 раз
- Контактная информация:
Re: Возможно ли спарсить сайт?
Пишите ссылку сюда, чтобы можно было скопировать, народ не будет набирать вручную по картинке.....
Главная часть любого оружия, есть голова его владельца. Заказ лент WPGrabber
Re: Возможно ли спарсить сайт?
URL индексной страницы https://1istochnik.ru/news/covid19
Есть подозрение что так как ссылки обернуты в noindex, то граббер их не видет.
Есть подозрение что так как ссылки обернуты в noindex, то граббер их не видет.
- Admin
- Администратор
- Сообщения: 578
- Зарегистрирован: 22 ноя 2015, 12:18
- Откуда: СССР
- Благодарил (а): 48 раз
- Поблагодарили: 20 раз
- Контактная информация:
Re: Возможно ли спарсить сайт?
Вот такой ваариант работает:
/news/[^>]{5}
/news/[^>]{5}
Главная часть любого оружия, есть голова его владельца. Заказ лент WPGrabber
Re: Возможно ли спарсить сайт?
Спасибо! Но все же интересен вопрос, встречали ли вы такие сайты с которых нельзя спарсить граббером информацию?
И смешно и горестно. У меня с вашей регуляркой не работает Где то в настройках начудил может.
И смешно и горестно. У меня с вашей регуляркой не работает Где то в настройках начудил может.
- Admin
- Администратор
- Сообщения: 578
- Зарегистрирован: 22 ноя 2015, 12:18
- Откуда: СССР
- Благодарил (а): 48 раз
- Поблагодарили: 20 раз
- Контактная информация:
Re: Возможно ли спарсить сайт?
Поэкперементируйте с настройками на вкладке "Дополнительно".
Да, сайты с защитой от парсинга встречаются, но очень редко, это очень дорогое удовольствие.
Да, сайты с защитой от парсинга встречаются, но очень редко, это очень дорогое удовольствие.
Главная часть любого оружия, есть голова его владельца. Заказ лент WPGrabber
Re: Возможно ли спарсить сайт?
Приветствую,
А как спарсить такой сайт: https://www.tatar-inform.ru/news/incident
Долго с ним бился, пока безрезультатно(
А как спарсить такой сайт: https://www.tatar-inform.ru/news/incident
Долго с ним бился, пока безрезультатно(
- Admin
- Администратор
- Сообщения: 578
- Зарегистрирован: 22 ноя 2015, 12:18
- Откуда: СССР
- Благодарил (а): 48 раз
- Поблагодарили: 20 раз
- Контактная информация:
Re: Возможно ли спарсить сайт?
Можете заказать настройку ленты:
Пишите в Telegram: @WPGrabber
Пишите в Telegram: @WPGrabber
Главная часть любого оружия, есть голова его владельца. Заказ лент WPGrabber