关键词文章采集源码(：关键词文章采集源码及配置采集前的准备)

　　关键词文章采集源码(：关键词文章采集源码及配置采集前的准备)

　　关键词文章采集源码及配置采集前准备我们需要在写博客的时候准备好我们需要采集的文章列表，比如：找死的python与sqlmap之间的对比。针对采集某一数据源、某一文章进行采集。因为我们是自己写的采集，所以我们先需要搞定这两点。准备好我们采集的源码。编写文章采集的代码文章采集一般是带有tags标签的，tags我们可以在页面上获取到，也可以通过xpath获取到。

　　我们将这篇文章里的内容tags命名为“user-agent”。打开mysql的select查询，查看row返回值的值和data值。根据我们刚才获取到的返回值，我们发现。所有字段值都是我们自己定义的，与采集其他字段没有任何关系。这种情况下，我们需要建立一个表，然后定义所有字段的关系。我们首先通过db_create建立一个表，然后再打开windows数据库，运行mysqldump命令查看sqlmap的数据。

　　这里我们打开的是表datetable_title，这里我们可以看到，所有数据都是定义好的，没有任何关系。我们来看看表title字段，默认使用了一个sqlite格式的字段，我们定义datastring="useragent"获取这个字段。因为我们要获取tags下的所有文章，所以我们需要传入一个row字段，然后传入数据。

　　我们新建了两个字段表datestring和datestring_array。分别使用“”表示列名。那么问题来了，在建立表和索引时，为什么只能存在一个字段？难道“*”不行吗？其实,当有多个字段时，我们需要复制字段名，再建立表和索引。我们新建mysqldump，然后运行mysqlinsert，会出现log信息，然后打开db_create.sqlmap命令，查看row返回值和data值。

　　如果报错了，也是因为这两个字段我们定义的name没有对应上。我们还是需要传入row字段。windows数据库打开mysqldb_create.sqlmap命令。我们首先查看mysqldump命令的输出，发现数据是file是datestring_array。但是我们不希望它输出数据，我们希望它输出tags下所有文章的信息。

　　我们需要把datestring_array传给mysqldb_create.sqlmap命令。mysqldb_create.sqlmap命令打开mysqldb,mysqldb_create.sqlmap命令是打开一个mysql数据库，并且还不能修改数据库。因为打开的文件不能修改。我们只能编辑文件。编辑mysqldb_create.sqlmap命令：1.我们选择第一个参数表示目标库(dbname),如下：1table_id=tab_id2tab_url='/root/data:/tabs/data/'3create_table_name=user-agent4mysql_db_info={'table_id':2,'tab_url':'/','tab_name':"。