织梦DedeCMS采集节点设置教程:从零开始创建采集规则
首先打开织梦后台,依次点击“采集” — “采集节点管理” — “增加新节点”。

这里以采集普通文章为例,选择“普通文章”,然后点击确定。

进入采集设置页面后,首先填写节点名称,即给这个新节点取一个名字,可以任意填写。
然后打开你想要采集的文章列表页,这里以织梦官网为例:http://www.dedecms.com/web-manage/jianzhanxinde/。打开页面后,右键选择“查看源文件”,找到目标页面编码,就在charset后面。

页面基本信息其他选项一般不用管,填写完成后如图所示。

接下来填写列表网址获取规则。查看文章列表第一页的地址:http://www.dedecms.com/web-manage/jianzhanxinde/list_49_1.html,对比第二页地址:http://www.dedecms.com/web-manage/jianzhanxinde/list_49_2.html。可以发现除了49_后面的数字不同,其他部分完全一致,因此可以这样写:http://www.dedecms.com/web-manage/jianzhanxinde/list_49_(*).html。将数字1替换为(*),因为这里只有2页,所以填写从1到2,每页递增为1。

如果采集的列表没有规则,只能手工指定列表网址,如图所示,每行写一个页面地址。

列表规则写完后,开始写文章网址匹配规则。回到文章列表页,右键查看源文件,找到区域开始的HTML,即文章列表开始的标志。

很容易找到如图中的“新闻列表”,从这里开始就是文章列表区域。再找文章列表结束的HTML。

这是一个很容易找到的标志。

如果链接中含有图片,可以选择“不处理”或“采集为缩略图”,根据自己需要选择。对区域网址进行再次筛选时,可以使用正则表达式。在“必须包含”后面填写.html,因为文章链接都是以.html结尾的。如果遇到复杂的列表,还可以填写“不能包含”的内容。

点击“保存设置”进入下一步,可以看到获得的文章网址。确认无误后保存信息,进入下一步设置内容字段获取规则。
查看文章是否有分页,随便进入一篇文章查看。如果文章没有分页,则保持默认设置。

现在来找文章标题等内容。随便进入一篇文章,右键查看源文件。

依照源码填写相应字段。

接下来填写文章内容的开始和结束标志。和上面一样,找到开始和结束标志。
开始标志:

结束标志:

如果想过滤文章中的某些内容,可以在过滤规则中设置。例如要过滤文章中的图片。

选择“常用规则”。

勾选IMG,然后确定,这样正文中的图片就被过滤掉了。
设置完毕后,点击“保存设置并预览”。

这样一个采集规则就写好了。有些网站规则比较复杂,需要多下功夫。点击“保存并开始采集” — “开始采集网页”,稍等片刻即可采集完成。

查看采集到的文章。

采集成功后,导出数据。首先选择要导入到的栏目,点击“请选择”在弹出的窗口中选择需要导入的栏目。发布选项一般保持默认,除非不想马上发布。每批导入默认30条,可以修改。附带选项建议勾选“排除重复标题”,自动生成HTML选项建议先不生成,因为后续还需要批量提取摘要和关键字。
