php 抓取网页标题(php抓取网页标题的方法、分析网页内容提取出来的)
优采云 发布时间: 2021-12-10 06:03php 抓取网页标题(php抓取网页标题的方法、分析网页内容提取出来的)
php抓取网页标题的方法
一、分析网页
1、浏览器打开spider.php所在文件夹。在javascript中可以找到网页关键字段的href字段。
2、调用spider.get("myproduct_url");将解析出的参数shimstr(a的最后一个字符)和shimstr(b的最后一个字符)赋值给chrom;
3、打开chrome浏览器,打开右上角显示标签栏中的网站标题,并选择按钮【web分析】→【网站源代码】→【网站源代码结构】,可以看到下图结构。
4、将这条【shimstr(a的最后一个字符)】转换为数组格式后作为spider.post参数。调用spider.post("a.php","")将这条代码中的shimstr(a的最后一个字符)转换为url参数。同时,调用spider.get("b.php","")将这条代码中的shimstr(b的最后一个字符)转换为url参数。将分析出的shimstr(a的最后一个字符)和shimstr(b的最后一个字符)赋值给chrom;。
5、spider.post将解析出的参数shimstr(a的最后一个字符)和shimstr(b的最后一个字符)赋值给text方法,之后在方法post参数中通过传入对应参数将网页内容提取出来。
完整代码:;param={"request":"","text":""}
二、生成网页url分析完网页,将需要提取的网页内容提取出来。
1、运行网页查看结果。这样既简单又容易实现抓取。