CURL не парзит https сайт

некоторые страницы могут требовать POST, если формы парсить.

CURLOPT_SSL_VERIFYHOST не обязательно, PEER достаточно.

---------- Добавлено 06.03.2020 в 20:17 ----------

не, гоголь-капча никак не обходится.

всякие там токены crf - да.

vandamme, reCAPTCHA давно успешно распознается сервисами, но не об этом вопрос.

Если сайт не отдается с CURLOPT_SSL_VERIFYPEER, false то значит вас приблочили. Какой ответ, заголовок и содержимое. Включите CURLOPT_HEADER, true для возврата заголовка.

Думаю простая задача, что автор лезет на какой-ниб авито и залетает под блок. Ну или под cloudflare.

Ну просто block поставить и делов :D И новую гуглокапчу проходит софт?

ок спасибо посмотрю, мне вообще один раз в сутки инфу брать, не гружу сервер, а то тут люди беспокоятся )

Ну так бери информацию по api, если нечего беспокоиться :)

$url = '/;

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, $url);

curl_setopt($ch, CURLOPT_USERAGENT,'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36');

curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);

curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);

curl_setopt($ch, CURLOPT_HEADER, false);

$results = curl_exec ($ch);

curl_close($ch);



$doc = new DOMDocument();

@$doc->loadHTML($results);

$xpath = new DomXPath($doc);

$elements = $xpath->query('.//tr/td');

foreach ($elements as $i=>$element) {

	echo $xpath->query($element->getNodePath().'/div')->item(0)->nodeValue.'<br />';

}

Не работает )

Даже в симуляторе работает http://phpfiddle.org/

onep, это ты верно подметил))))

SocFishing, какими сервисами? в которых сидят люди и клацают?)

Ну вот напр, вроде официально можно брать инфу о коронавирусе

http://github.com/CSSEGISandData/COVID-19/blob/master/csse_covid_19_data/csse_covid_19_daily_reports/03-08-2020.csv

У меня код ничего не выдает