- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
织梦dedecms采集规则教程
[标签:标题]
篇一:DEDECMS完整采集教程(共三篇)
DEDECMS完整采集教程(列表设置篇)-marco608原创
以的html教程中的数据库为例,地址是
/web-art/htmlbase/HTML/index.html
一,打开dedecms,进入【采集节点管理】,新建一个节点,模型我们就选择
/4410828
二,填写节点的基本信息:
名称就自己定义吧。
编码就比较重要,大家可以在页面点击右键来看该页面的编码。
来源就自己定义吧。
防盗链就看目标站点的有无刷新限制,有就设置一下超时时间。
/4410828
三,设置采集列表:
我们要采集的列表是这样的:
而我们要设置的列表是这样的:
下面我们来说明一下这个设置是怎么填的。
来源网址很重要的。列表的获取就是从这里得到的。
自己打开:/web-art/htmlbase/HTML/list_33_2.html 看看分页的规律。不难看出吧?
然后我们在设置列表分页时,就转换为变量值的形式:
/web-art/htmlbase/HTML/list_33_[var:分页] .html
而变量起始值是1,结束值是3,就代表1至3的列表页了。
正则配置网址就看本身是否有比较特定的文章网址字符。例如page1.html之类的。
下面的html范围就比较重要。
我们看原dede的列表。我们在浏览器里查看源文件。
查找以下代码:
看到这里,你一定要认识常用的html代码。
这里要复制代码起始就是那个文章列表的表格的开始部分吧。
下面就是文章列表的表格的结束部分的代码:
篇二:DeDeCMS5.7详细采集教程
DeDeCMS织梦的采集教程,超级详细
超级详尽的织梦采集教程
看到很多网友都为织梦(DEDE CMS)的采集教程头疼,的确,官方出的教程太笼统了,什么都没说,换个网站你什么都做不了,这个教程是最详尽的教程,让你一看即会 首先我们打开织梦后台点击 采集——采集节点管理——增加新节点
这里我们以采集普通文章为例,我们选择普通文章,然后确定
我们进入了采集的设置页面,填写节点名称,就是给这个新节点取个名字,这里你可以任意填写。
一、设置文章列表页面
然后打开你想要采集的文章列表页,这里我们以织梦官网为例
/web-manage/jianzhanxinde/ 打开这个页面,右键——查看源文件
找到目标页面编码,就在charset后面
页面基本信息其他的一般就不用管了,填完了如图
现在我们来填写列表网址获取规则 看看文章列表第一页的地址
/web-manage/jianzhanxinde/list_49_1.html
对比第二页的地址/web-manage/jianzhanxinde/list_49_2.html 我们发现了他们除了49_后面的数字不一样,其他的都一样,所以我们可以这样写 /web-manage/jianzhanxinde/list_49_(*).html 就是把1换成了(*) 因为这里只有2页,所以我们就填从1到2 每页递增当然是1了,2-1...是等于1吧
这里我们就填写完了
没有规则的路径,需要手动设定
可能大家采集的有些列表没有规则,那就只有手工指定列表网址了,如图
每行写一个页面地址
列表规则写完了,我们就开始写文章网址匹配规则了,回到文章列表页 右键查看源文件 找到区域开始的HTML,就是找文章列表开始的标志。
我们很容易的找到了如图中的“新闻列表” 。从这里开始,后面就是文章列表里 我们再找文章列表结束的HTML
就是这个了,一个很容易找到的标志
如果链接中含有图片:
不处理 采集为缩略图 这里根据自己的需要选择
对区域网址进行再次筛选: (使用正则表达式)
必须包含: (优先级高于后者)
不能包含:
打开源文件,我们可以很清楚的看到,文章链接都是以.html结束的
所以,我们在必须包含后面填.html 如果遇到有些列表很麻烦,还可以填写后面的不能包含
实例如图
二、设置文章内容采集
我们点击保存设置进入下一步,可以看到我们获得的文章网址
看到这些就是对的了,我们保存信息进入下一步设置内容字段获取规则
我们看看文章有没有分页,随便进入一篇文章看看。。我们看到这里的文章没有分页 所以这里的我们就默认了
我们现在来找文章标题等等 随便进入一篇文章,右键查看源文件 看看这些
依照源码填写
我们再来填写文章内容的开始,结束 和上面的一样,找到开始和结束标志
篇三:dedecms采集规则
dedecms采集规则 dedeCMS采集规则,过滤,替换文章内的部分内容
1.采集去除链接
[Cop
文档评论(0)