c#抓取网页数据( c#入门经典路上如何去抓取html网页数据？坐标整理)

　　c#抓取网页数据(

c#入门经典路上如何去抓取html网页数据？坐标整理)

　　c#入门经典：如何抓取html网页数据？

　　

　　小标2018-05-18 来源：阅读858条评论0

　　总结：在学习c#入门经典的路上，今天教大家如何抓取html网页数据，让大家更好的学习。希望你能在c#入门经典的旅程中走得更远。

　　在你学习c#入门经典的路上，今天教你如何抓取html网页数据，让你更好的学习。希望你能在c#入门经典的旅程中走得更远。

　　//方法一

using System.Text.RegularExpressions;

 

public static void webClientMethod1()

        {

            WebClient wc = new WebClient();

            wc.Encoding = Encoding.UTF8;

            //以字符串的形式返回数据

            string html = wc.DownloadString("https://www.baidu.com/");

 

            //以正则表达式的形式匹配到字符串网页中想要的数据

            MatchCollection matches = Regex.Matches(html, "(.*)");

            //依次取得匹配到的数据

            foreach (Match item in matches)

            {

                Console.WriteLine(item.Groups[1].Value);

            }

            Console.ReadKey();

        }

 

 

//方法二

 public static string SendRequest()

        {

            string url = "https://www.baidu.com/";

            Uri httpURL = new Uri(url);

 

            ///HttpWebRequest类继承于WebRequest，并没有自己的构造函数，需通过WebRequest的Creat方法 建立，并进行强制的类型转换  

            HttpWebRequest httpReq = (HttpWebRequest)WebRequest.Create(httpURL);

            //httpReq.Headers.Add("cityen", "tj");

 

            ///通过HttpWebRequest的GetResponse()方法建立HttpWebResponse,强制类型转换  

            HttpWebResponse httpResp = (HttpWebResponse)httpReq.GetResponse();

 

            ///GetResponseStream()方法获取HTTP响应的数据流,并尝试取得URL中所指定的网页内容  

            ///若成功取得网页的内容，则以System.IO.Stream形式返回，若失败则产生ProtoclViolationException错 误。

            System.IO.Stream respStream = httpResp.GetResponseStream();

 

            ///返回的内容是Stream形式的，所以可以利用StreamReader类获取GetResponseStream的内容

            System.IO.StreamReader respStreamReader = new System.IO.StreamReader(respStream, Encoding.UTF8);

            //从流的当前位置读取到结尾

            string  strBuff = respStreamReader.ReadToEnd();

 

            //简单写法，跟上面的结果一样

            //using (var sr = new System.IO.StreamReader(httpReq.GetResponse().GetResponseStream()))

            //{

            //    var result = sr.ReadToEnd();

            //    Console.WriteLine("微信--" + DateTime.Now.ToString() + "--" + result);

            //}

            respStreamReader.Close();

            respStream.Close();

            return strBuff;

        }

　　本文由詹总整理出版。更多资讯请关注展总编程语言C#.NET频道！

　　本文由@小标发表于工作坐标。未经许可禁止转载。

　　

　　喜欢 | 0

　　

　　不喜欢 | 0

　　看完这篇文章，你感觉如何？已有0人发表意见，0%喜欢分享给朋友~