Страница 1 из 1
Возможно ли спарсить сайт?
Добавлено: 08 июн 2020, 23:13
A1ex
Может кто подскажет, можно ли этот сайт спарсить. А то бьюсь а не выходит. Мне просто нужно понять есть ли такие сайты которые нельзя спарсить?
Re: Возможно ли спарсить сайт?
Добавлено: 11 июн 2020, 00:24
GetRicH1
так источник не верно указан.... уберите covid19
Re: Возможно ли спарсить сайт?
Добавлено: 11 июн 2020, 10:30
A1ex
GetRicH1 писал(а): ↑11 июн 2020, 00:24
так источник не верно указан.... уберите covid19
Вы бы сначало попробовали сами, перед тем как писать. Источник правильно указан- это раздел сайта. Если убрать его и оставить только .../news/ то выведет ошибку страницы 404.
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 11:09
Admin
Пишите ссылку сюда, чтобы можно было скопировать, народ не будет набирать вручную по картинке.....
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 11:34
A1ex
URL индексной страницы
https://1istochnik.ru/news/covid19
Есть подозрение что так как ссылки обернуты в noindex, то граббер их не видет.
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 11:54
Admin
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 12:18
A1ex
Спасибо! Но все же интересен вопрос, встречали ли вы такие сайты с которых нельзя спарсить граббером информацию?
И смешно и горестно. У меня с вашей регуляркой не работает
Где то в настройках начудил может.
- Screenshot_1.png (43.92 КБ) 11365 просмотров
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 13:51
Admin
Поэкперементируйте с настройками на вкладке "Дополнительно".
Да, сайты с защитой от парсинга встречаются, но очень редко, это очень дорогое удовольствие.
Re: Возможно ли спарсить сайт?
Добавлено: 12 июн 2020, 15:05
A1ex
Admin писал(а): ↑12 июн 2020, 13:51
Поэкперементируйте с настройками на вкладке "Дополнительно".
Помогло, исправил на "CURL" и заработал.
- Screenshot_2.png (24.88 КБ) 11360 просмотров
Re: Возможно ли спарсить сайт?
Добавлено: 05 сен 2020, 21:58
Tempuc
Приветствую,
А как спарсить такой сайт:
https://www.tatar-inform.ru/news/incident
Долго с ним бился, пока безрезультатно(
Re: Возможно ли спарсить сайт?
Добавлено: 15 окт 2020, 18:10
Admin
Можете заказать настройку ленты:
Пишите в Telegram: @WPGrabber