前端自动化采集工具的使用方法和html采集方法！

　　前端自动化采集工具的使用方法和html采集方法！

　　文章采集接口地址：，看到别人的好文章第一步肯定是想采集，自己刚开始玩爬虫没有采集的经验，第一步怎么会有那么多思路。于是就开始各种看别人的采集方法，也遇到了各种坑。开始没钱又没精力，后来看多了看出自己的差距就自己整理了下。开始做了一款前端自动化采集工具，第一次用h5的时候没有接触过什么extension，导致采集效率很低，总是采到一些无用网页，经常后来去刷新网页网速还跟不上。

　　最后发现，必须要有一款react+redux+webpack+loader（es6编译器）才能玩转采集，开始各种搞，啥火搞啥es6、es7、webpack、loader，总算知道点啥。总结下来有几点：知道常用的组件，知道使用方法。es6编译器。dom编译。响应式、server渲染、缓存等。这些前端常用工具网上都有，遇到不懂或者需要分析的图片等，我就去百度，看有没有大佬分享。

　　因为一些技术你用的早就落伍了，所以，需要更新就要用它，采集必然也是如此。所以有时要站在前人的肩膀上。本文还主要介绍下loader中常用的一些sourcemap的知识。（如果是loader顺序会和前面的顺序不一样，一个ui一个reactcss都用）以下开始介绍这几种前端常用的loader。html采集①linkedin的userdata采集目录下面有两个cli文件，一个是采集userdata，一个是userdata.css。

　　userdata.css将类定义好之后，可以直接开始采集，比如采集上的商品名称，搜索框按钮的文字等，可以直接开始采集。userdata.csscss定义之后，只能定义文字和图片，采集不了其他的字符，但其他可以！userdata.css②linkedinuserdata/userdata.cssclassbrowser_mediasecurity{}#browser_mediasecurity:href="#browser_mediasecurity/browser_mediasecurity.css",href:""classbrowser_mediasecurity{}classbrowser_mediasecurityextendsextends'css/browser_mediasecurity',browser_mediasecurity{content:'';}③linkedinuserdata/userdata.cssclassbrowser_mediasecurityextendsextends'css/browser_mediasecurity',browser_mediasecurity{href:'';}dom采集①linkedinuserdata/userdata.cssclassbrowser_mediasecurity{}#browser_mediasecurity:href="#browser_mediasecurity/browser_mediasecurity.css",href:""classbrowser_mediasecurityextendsextends'css/browser_mediasecurity',browser_mediasecurity{content:'';}②linkedinuserdata/dom_sites.cssclass。