Skip to content
久久日记本
曾经年少爱追梦,一心只想往前飞
  • 首页
  • 博客
    • 博客历史
    • 主题
    • 个人文集
  • 关于
    • 正在读的书
    • 作品归档
    • 2018作品归档
    • 联系我
  • 友情链接
  • 留言板
❄
❅
❆
❄
❅
❆
❄
❅
❆
❄
.NET

Post或者Get出现协议冲突提示的解决方法

Posted on 2013年9月16日 by 九九 / 1587 Views

以前一直用正则抓取网页,今天用HtmlAgilityPack.dll 向某网站抓取页面信息,但是总是提示:

“服务器提交了协议冲突. Section=ResponseHeader Detail=CR 后面必须是 LF”

代码如下:

“`C#
HtmlWeb htmlweb = new HtmlWeb();
HtmlAgilityPack.HtmlDocument htmldoc = htmlweb.Load(“http://xxxxx”);
HtmlNode rootNode = htmldoc.DocumentNode;
string catpath = “//html/body/table/center[1]/tr[1]/td[2]”;
//关于这里的层次:如果有其它标签,只要不是双标签(),就可以忽略,例如Form

HtmlNodeCollection node = rootNode.SelectNodes(catpath);
string txt = “”;
foreach (var item in node)
{
txt = item.InnerText;//txt就是提取的文字
}

开始以为是dll的方法有问题,然后我用老方法:

```C#
WebClient myWebClient = new WebClient();
byte[] myDataBuffer = myWebClient.DownloadData("http://xxxx");
return Encoding.Default.GetString(myDataBuffer);

依然这个提示,我试试抓取百度页面,果然正常,估计是网站的页面有问题。

查找了相关资料,修改了配置文件解决了:

通过修改配置文件解决:在app.config(WinForm)或web.config(Web)文件里修改。

WinForm下的app.config如果不存在,手动在Debug文件夹所在的同级目录下新建一个XML配置文件,内容为:

<?xml version="1.0" encoding="utf-8" ?> 
 <configuration> 

   <system.net>  
      <settings>   
        <httpWebRequest useUnsafeHeaderParsing= "true " />  
      </settings>  
   </system.net> 
</configuration>

搞定了。

看到网上还有另一种方法,没试过,记下吧:

方法2:

在DEBUG目录下,新建 项目名.exe.config,比如说QQFarm.exe.config,然后里面输入以上内容:

<?xml version="1.0" encoding="utf-8" ?> 
  <configuration> 

    <system.net>  
      <settings>   
        <httpWebRequest useUnsafeHeaderParsing= "true " />  
      </settings>  
    </system.net> 
</configuration>

然后编译,出自动在DEBUG目录下生成”项目名.vshost.exe.config”文件。

C#
九九
过去的我们,现在的自己,往事,终会随风而逝。 View all posts by 九九 →

Post navigation

Older post
MiniSource一个开源的数据抓取工具
Newer post
MonoAndroid打包成apk实机无法运行

标签云

2019ncov Android ASP.NET Baby C# C/C++ CSS Div DX11 flask front-end GAE Git Java JJProject JS Life MSSQL MVC OpenSource Oracle Python React React-Native Software Tools Vue Webpack Website Window WP7 乱记 十年旧梦 天气 宝宝成长日记 小说 工作 情感 故障 散文 日记 网新实训笔记 花落梧桐 诗间集 转载

时光机

  • 2023年3月
  • 2023年2月
  • 2022年12月
  • 2022年4月
  • 2022年3月
  • 2022年1月
  • 2021年12月
  • 2021年11月
  • 2021年10月
  • 2021年9月
  • 2021年8月
  • 2021年6月
  • 2021年5月
  • 2021年4月
  • 2021年3月
  • 2021年2月
  • 2021年1月
  • 2020年5月
  • 2019年12月
  • 2019年10月
  • 2019年9月
  • 2019年6月
  • 2019年5月
  • 2019年2月
  • 2019年1月
  • 2018年12月
  • 2018年9月
  • 2018年8月
  • 2018年7月
  • 2018年6月
  • 2018年3月
  • 2018年2月
  • 2018年1月
  • 2017年11月
  • 2017年10月
  • 2017年9月
  • 2017年7月
  • 2017年3月
  • 2017年1月
  • 2016年12月
  • 2016年11月
  • 2016年10月
  • 2016年7月
  • 2016年3月
  • 2016年2月
  • 2016年1月
  • 2015年12月
  • 2015年11月
  • 2015年10月
  • 2015年9月
  • 2015年8月
  • 2015年7月
  • 2015年4月
  • 2015年3月
  • 2015年2月
  • 2015年1月
  • 2014年12月
  • 2014年11月
  • 2014年10月
  • 2014年9月
  • 2014年8月
  • 2014年7月
  • 2014年6月
  • 2014年5月
  • 2014年4月
  • 2014年3月
  • 2014年2月
  • 2014年1月
  • 2013年12月
  • 2013年11月
  • 2013年10月
  • 2013年9月
  • 2013年8月
  • 2013年7月
  • 2013年6月
  • 2013年5月
  • 2013年4月
  • 2013年3月
  • 2013年1月
  • 2012年11月
  • 2012年10月
  • 2012年9月
  • 2012年8月
  • 2012年7月
  • 2012年6月
  • 2012年5月
  • 2012年4月
  • 2012年3月
  • 2012年2月
  • 2012年1月
  • 2011年12月
  • 2011年11月
  • 2011年10月
  • 2011年9月
  • 2011年8月
  • 2011年6月
  • 2011年5月
  • 2011年4月
  • 2011年3月
  • 2011年2月
  • 2010年12月
  • 2010年11月
  • 2010年10月
  • 2010年9月
  • 2010年8月
  • 2010年6月
  • 2010年5月
  • 2010年2月
  • 2010年1月
  • 2009年12月
  • 2009年11月
  • 2009年10月
  • 2009年9月
  • 2009年8月
  • 2009年7月
  • 2009年6月
  • 2009年5月
  • 2009年4月
  • 2009年3月
  • 2009年2月
  • 2009年1月
  • 2008年8月
  • 2008年6月
  • 2008年5月
  • 2008年4月
  • 2008年2月
  • 2007年11月
  • 2007年8月
  • 2007年6月
  • 2007年5月
  • 2007年4月
  • 2007年3月
  • 2007年2月
  • 2007年1月
  • 2006年10月
  • 2006年8月
© 2006 - 2023 久久日记本
Powered by WordPress | Theme: Graphy for 99diary