file_get_contents获得一个网址的时候提示failed to open stream: HTTP request failed! HTTP/1.1 400 Bad

Posted 2023-05-11

已经开启了allow_url_fopen = On
user_agent="Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1)"
也设置了，但还是报错

　　400是一种是HTTP状态码，400 Bad Request。是在打开网页时浏览器返回到客户端的一种状态码。显示在客户端的也就是400页面。
　　400页面是当用户在打开网页时，返回给用户界面带有400提示符的页面。其含义是你访问的页面域名不存在或者请求错误。
　　主要有两种形式：
　　1、bad request意思是“错误的请求"；
　　2、invalid hostname意思是"不存在的域名”。

　　既然返回了这个信息，说明你的file_get_contents的函数正确执行了，只是你请求的地址可能不正确，注意如果是请求网址的话，一定前边要加上HTTP冒号双斜线然后再加3W的形式才行。

　　Good Luck~追问

加了。http://www了 但是不正确

追答

这个错误一般还可能是你请求的资源不存在或者你本地不支持file_get_contents函数，你尝试去获取一个本地服务器的文件试一下~ 如果是LAMP的话，CentOS上默认是封禁这个函数的~

参考技术A HTTP/1.1 400错误，Bad Request，这种错误通常的定义是：客户客户端发送的请求出现语法错误。 参考技术B 确认下你的地址是否正确

使用 file_get_contents 将 html 表解析为 php 数组

【中文标题】使用 file_get_contents 将 html 表解析为 php 数组

【英文标题】：Parse html table using file_get_contents to php array

【发布时间】：2012-01-07 09:34:43

【问题描述】：

我正在尝试将 here 显示的表解析为多维 php 数组。我正在使用以下代码，但由于某种原因它返回一个空数组。在网上搜索后，我找到了this site，这是我从中获得 parseTable() 函数的地方。通过阅读该网站上的 cmets，我发现该功能运行良好。所以我假设我从 file_get_contents() 获取 HTML 代码的方式有问题。对我做错了什么有什么想法吗？

<?php

$data = file_get_contents('http://flow935.com/playlist/flowhis.HTM');

function parseTable($html)

  // Find the table
  preg_match("/<table.*?>.*?<\/[\s]*table>/s", $html, $table_html);

  // Get title for each row
  preg_match_all("/<th.*?>(.*?)<\/[\s]*th>/", $table_html[0], $matches);
  $row_headers = $matches[1];

  // Iterate each row
  preg_match_all("/<tr.*?>(.*?)<\/[\s]*tr>/s", $table_html[0], $matches);

  $table = array();

  foreach($matches[1] as $row_html)
  
    preg_match_all("/<td.*?>(.*?)<\/[\s]*td>/", $row_html, $td_matches);
    $row = array();
    for($i=0; $i<count($td_matches[1]); $i++)
    
      $td = strip_tags(html_entity_decode($td_matches[1][$i]));
      $row[$row_headers[$i]] = $td;
    

    if(count($row) > 0)
      $table[] = $row;
  
  return $table;


$output = parseTable($data);

print_r($output);

?>

我希望我的输出数组看起来像这样：

1 --> 上午 11:33 --> 开发 --> 在黑暗中 2 --> 上午 11:29 --> 律韦恩 --> 她会的 3 --> 上午 11:26 --> 卡迪纳尔OFFISHALL --> NUMBA 1（潮位高）

【问题讨论】：

-1 表示缺乏努力。隔离您的问题，而不是基本上发布一大段代码并要求人们找出问题所在并进行修复。

【参考方案1】：

不要用正则表达式解析 HTML！ 相反，让 HTML 解析器库为您担心标记的结构。

我建议您查看 Simple HTML DOM (http://simplehtmldom.sourceforge.net/)。它是一个专门为帮助解决 PHP 中的此类 Web 抓取问题而编写的库。通过使用这样的库，您可以用更少的代码行编写您的抓取，而不必担心创建有效的正则表达式。

原则上，使用 Simple HTML DOM，您只需编写如下内容：

$html = file_get_html('http://flow935.com/playlist/flowhis.HTM');
foreach($html->find('tr') as $row) 
   // Parse table row here

这可以扩展为以某种格式捕获您的数据，例如创建一组艺术家和相应的标题：

<?php
require('simple_html_dom.php');

$table = array();

$html = file_get_html('http://flow935.com/playlist/flowhis.HTM');
foreach($html->find('tr') as $row) 
    $time = $row->find('td',0)->plaintext;
    $artist = $row->find('td',1)->plaintext;
    $title = $row->find('td',2)->plaintext;

    $table[$artist][$title] = true;


echo '<pre>';
print_r($table);
echo '</pre>';

?>

我们可以看到，这段代码也可以（简单地）更改为以任何其他方式重新格式化数据。

【讨论】：

效果很好。但我需要制作一个多维数组，如原始问题底部所示。

您是否查看了示例“Scraping Slashdot！”从 simplehtmldom 网站？据我了解，它回答了这个问题。

好的，我又添加了一个例子，但我就到此为止了。剩下的留给你自己解决。

是的，我想通了。感谢您提供更多示例。

使用 simplehtmldom 代替 rexexps 很有趣，不是吗？ :)

【参考方案2】：

我尝试了 simple_html_dom，但在较大的文件和重复调用函数时，我在 php 5.3 (GAH) 上得到了 zend_mm_heap_corrupted。我也尝试过 preg_match_all （但这在较大的 html 文件 (5000) 行上失败了，而我的 HTML 表只有大约 400 行。

我正在使用它，它的工作速度很快，不会出现错误。

$dom = new DOMDocument();  

//load the html  
$html = $dom->loadHTMLFile("htmltable.html");  

  //discard white space   
$dom->preserveWhiteSpace = false;   

  //the table by its tag name  
$tables = $dom->getElementsByTagName('table');   


    //get all rows from the table  
$rows = $tables->item(0)->getElementsByTagName('tr');   
  // get each column by tag name  
$cols = $rows->item(0)->getElementsByTagName('th');   
$row_headers = NULL;
foreach ($cols as $node) 
    //print $node->nodeValue."\n";   
    $row_headers[] = $node->nodeValue;
   

$table = array();
  //get all rows from the table  
$rows = $tables->item(0)->getElementsByTagName('tr');   
foreach ($rows as $row)   
   
   // get each column by tag name  
    $cols = $row->getElementsByTagName('td');   
    $row = array();
    $i=0;
    foreach ($cols as $node) 
        # code...
        //print $node->nodeValue."\n";   
        if($row_headers==NULL)
            $row[] = $node->nodeValue;
        else
            $row[$row_headers[$i]] = $node->nodeValue;
        $i++;
       
    $table[] = $row;
   

var_dump($table);

这段代码对我很有效。 原始代码示例在这里。

http://techgossipz.blogspot.co.nz/2010/02/how-to-parse-html-using-dom-with-php.html

【讨论】：

你应该做 array_shift($table) 因为第一个元素将是 [0] => array(0) 为空。这是因为您在 $rows 中获得了所有 tr 标签，包括带有 th 标签的标签。我会建议编辑。

我在 PHP 5.6.31 中使用 DOM，但发现 $rows = $tables->item(0)->getElementsByTagName('tr') 的结果不包含任何后续 $cols = $row->getElementsByTagName('td') 的 <td> 标签。知道为什么我第一次调用 getElementsByTagName() 似乎是在剥离 HTML 标签吗？