胖虎 发表于 2018-3-15 16:39:53

爬虫 测试中

private void LoadData()
      {
            string BoardStream=null;//下载内容存入此变量

            Uri url = new Uri("http://www.163.com");//将下载地址转换为Uri类型

            HttpWebRequest requestPage = (HttpWebRequest)WebRequest.Create(url);

            WebResponse response = requestPage.GetResponse();

            Stream stream = response.GetResponseStream();//获取页面流

            if (response.ContentType.ToLower().StartsWith("text/"))//如果获得成功（即为文本格式）
            {

                StreamReader reader = new StreamReader(stream, System.Text.Encoding.UTF8);//读取获得内容流

                BoardStream = reader.ReadToEnd();//将内容流转换为文本并存入变量BoardStream，即为所需要的数据流

            }
         //   string path=Server.MapPath ();
            StreamWriter saveAPage = new StreamWriter("a.html", false, System.Text.Encoding.GetEncoding("gb2312"));//实例化写入类，保存路径假设为C:/a.html

            saveAPage.Write(BoardStream);//创建写入任务

            saveAPage.Flush();//写入文件（即清理缓存流）

            saveAPage.Close();//关闭写入类的对象
      }

海海豚 发表于 2018-3-15 17:36:52

谢谢分享~

libingyu135 发表于 2018-3-16 09:28:22

666

深海小龙虾 发表于 2018-3-20 14:57:23

有什么问题可以加入我的测试交流群：338750406 大家一起学习交流
页: [1]
查看完整版本: 爬虫 测试中