php采集时被封ip的解决方法

当使用PHP进行网站数据采集时，很可能会遇到被网站封禁IP的情况。这个问题可以通过以下几种方式来解决：

方法一：设置伪造头信息

许多网站通过IP地址来检测数据爬取的个数并限制IP访问。我们可以通过设置伪造头信息来避免被封禁。例如，可以设置浏览器标识、来源信息、请求地址等信息：

$context_options = array(
    'http' => array(
        'method' => 'GET',
        'header' => "User-Agent: Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36\r\n" .
                    "Referer: http://www.example.com/\r\n" .
                    "Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3\r\n" .
                    "Accept-Encoding: gzip, deflate\r\n" .
                    "Connection: keep-alive\r\n" .
                    "Cookie: PHPSESSID=123456abc; path=/; domain=.example.com\r\n"
    )
);
$context = stream_context_create($context_options);
$html = file_get_contents('http://www.example.com/path/to/data.html', false, $context);

方法二：使用IP代理

使用IP代理是绕开被封IP限制的常用方法之一。我们可以使用代理服务器来伪装IP地址，从而避免被目标网站封禁。

$proxy_ip = '192.168.1.1';  // 代理服务器IP地址
$proxy_port = '8080';  // 代理服务器端口号
$username = '';  // 代理服务器用户名，如果需要验证，则填写
$password = '';  // 代理服务器密码，如果需要验证，则填写
$proxy = "tcp://{$proxy_ip}:{$proxy_port}";
$context_options = array(
    'http' => array(
        'method' => 'GET',
        'proxy' => $proxy,
        'header' => "User-Agent: Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36\r\n",
        'request_fulluri' => true
    )
);
if ($username && $password) {
    $context_options['http']['header'] .= "Proxy-Authorization: Basic " . base64_encode("{$username}:{$password}") . "\r\n";
}
$context = stream_context_create($context_options);
$html = file_get_contents('http://www.example.com/path/to/data.html', false, $context);

需要注意的是，使用IP代理时不可滥用，否则可能会引起代理服务器的反制。

以上两种方法是解决被封IP问题的常用方式，具体选择哪一种取决于实际情况。但无论哪种方法，我们都需要遵循网站的规则，不要滥用，以免造成不必要的麻烦。