WPGrabber

Может кто подскажет, можно ли этот сайт спарсить. А то бьюсь а не выходит. Мне просто нужно понять есть ли такие сайты которые нельзя спарсить?

так источник не верно указан.... уберите covid19

GetRicH1 писал(а): ↑

11 июн 2020, 00:24

так источник не верно указан.... уберите covid19

Вы бы сначало попробовали сами, перед тем как писать. Источник правильно указан- это раздел сайта. Если убрать его и оставить только .../news/ то выведет ошибку страницы 404.

Пишите ссылку сюда, чтобы можно было скопировать, народ не будет набирать вручную по картинке.....

URL индексной страницы https://1istochnik.ru/news/covid19
Есть подозрение что так как ссылки обернуты в noindex, то граббер их не видет.

Вот такой ваариант работает:
/news/[^>]{5}

Спасибо! Но все же интересен вопрос, встречали ли вы такие сайты с которых нельзя спарсить граббером информацию?
И смешно и горестно. У меня с вашей регуляркой не работает Где то в настройках начудил может.

Поэкперементируйте с настройками на вкладке "Дополнительно".
Да, сайты с защитой от парсинга встречаются, но очень редко, это очень дорогое удовольствие.

Admin писал(а): ↑

12 июн 2020, 13:51

Поэкперементируйте с настройками на вкладке "Дополнительно".

Помогло, исправил на "CURL" и заработал.

Приветствую,

А как спарсить такой сайт: https://www.tatar-inform.ru/news/incident
Долго с ним бился, пока безрезультатно(

Можете заказать настройку ленты:
Пишите в Telegram: @WPGrabber