有的網站不能通過捲曲PHP被抓取，而它的捲曲

Question

工作我試着捲曲http://marinas.com，捲曲的PHP：

$url = 'http://marinas.com'; 

$ch = curl_init($url); 
curl_setopt($ch, CURLOPT_HEADER, 0); 
curl_exec($ch); 
curl_close($ch); 

不返回任何東西。儘管它適用於其他網站，例如google.com。

而且，捲曲http://marinas.com直接進入CLI工程...

這對我來說

Answer 1

一個謎提出請求時設置的用戶代理：

curl_setopt($ch, CURLOPT_USERAGENT, $_SERVER['HTTP_USER_AGENT']); 

本網站不迴應沒有用戶代理的請求。上述設置抓取瀏覽器的用戶代理並將其發送到目標網站。