`
gzycnet
  • 浏览: 32460 次
  • 性别: Icon_minigender_1
  • 来自: 贵阳
社区版块
存档分类
最新评论

DedeCMS采集过滤正则表达式大全

阅读更多

下面是在综合论坛上网友的各种正则的一个全集:

{dede:trim}
{/dede:trim}
{dede:trim}<param([^>]*)>{/dede:trim}
{dede:trim}<embed([^>]*)>([^>]*)</embed>{/dede:trim}
{dede:trim}<embed([^>]*)>{/dede:trim}
{dede:trim}</embed>{/dede:trim}
{dede:trim}<object([^>]*)>([^>]*)</object>{/dede:trim}
{dede:trim}<object([^>]*)>{/dede:trim}
{dede:trim}</object>{/dede:trim}
{dede:trim}<OBJECT([^>]*)>([^>]*)</OBJECT>{/dede:trim}
{dede:trim}<OBJECT([^>]*)>{/dede:trim}
{dede:trim}</OBJECT>{/dede:trim}
{dede:trim}<iframe([^>]*)>([^>]*)</iframe>{/dede:trim}
{dede:trim}<iframe([^>]*)>{/dede:trim}
{dede:trim}</iframe>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>([^>]*)</IFRAME>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>{/dede:trim}
{dede:trim}</IFRAME>{/dede:trim}
{dede:trim}<font([^>]*)>([^<]*)</font>{/dede:trim}
{dede:trim}<font([^>]*)>{/dede:trim}
{dede:trim}</font>{/dede:trim}
{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}
{dede:trim}<a([^>]*)>{/dede:trim}
{dede:trim}</a>{/dede:trim}
{dede:trim}<td([^>]*)>([^>]*)</td>{/dede:trim}
{dede:trim}<td([^>]*)>{/dede:trim}
{dede:trim}</td>{/dede:trim}
{dede:trim}<tr([^>]*)>([^>]*)</tr>{/dede:trim}
{dede:trim}<tr([^>]*)>{/dede:trim}
{dede:trim}</tr>{/dede:trim}
{dede:trim}<tbody([^>]*)>([^>]*)</tbody>{/dede:trim}
{dede:trim}<tbody>{/dede:trim}
{dede:trim}</tbody>{/dede:trim}
{dede:trim}<table([^>]*)>([^>]*)</table>{/dede:trim}
{dede:trim}<table([^>]*)>{/dede:trim}
{dede:trim}</table>{/dede:trim}
{dede:trim}<img([^>]*)>{/dede:trim}
{dede:trim}<span([^>]*)>{/dede:trim}
{dede:trim}</span>{/dede:trim}
{dede:trim} {/dede:trim}
{dede:trim}<stong>{/dede:trim}
{dede:trim}</stong>{/dede:trim}


应用示例一:标题中空格的过滤
经常在采集文章的时候,标题文字里面有空格,采回来后应用很是麻烦,所以需要在过滤处添加下面正则过滤

{dede:trim} {/dede:trim}


应用示例二:来源作者中连接的过滤
采集文章的时候,有的系统里面作者或者来源处都有连接,直接采集的话将连接采集回来了,然后由于这两个字段有限制,通常会造成需要采集的内容没有采集回来,所以需要在过滤处添加下面正则过滤

{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}


应用示例三:文章内容中连接以及其他广告代码的过滤
这个就不用说了,当需要对所有东西过滤的时候,直接用上面所有的代码过滤就可以,但是实际应用中,我们只需要对连接、动画、调用等进行过滤。(这个需要按照对方内容里面具体含有什么代码来具体操作)
一般的只有链接,使用二中的代码进行过滤就可以了,但是实际上一般的网站现在都在内容里面加有广告等,所以采取下面的过滤正则就可以完成过滤:

{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>([^>]*)</IFRAME>{/dede:trim}
{dede:trim}<object([^>]*)>([^>]*)</object>{/dede:trim}
{dede:trim}<s cript([^>]*)>([^>]*)</s cript>{/dede:trim}


应用示例四:过滤GG广告代码
其实这个就是在上面的内容过滤,但是很多论坛里的网友经常问这个,所以单独作为一个应用列出来:

{dede:trim}<s cript([^>]*)>([^>]*)</s cript>{/dede:trim}

{dede:trim}<SCRIPT([^>]*)>{/dede:trim}
{dede:trim}</SCRIPT>{/dede:trim}
{dede:trim}google_ad_client = "([^>]*)";{/dede:trim}
{dede:trim}google([^>]*);{/dede:trim}
{dede:trim}<!--{/dede:trim}
{dede:trim}//-->{/dede:trim}

分享到:
评论

相关推荐

    dede3.1分页文字采集过滤规则详说(图文教程)续四

    分页文字采集过滤规则是内容采集过程中不可或缺的一环,它涉及到正则表达式和dedeCMS系统的特定标签。 首先,文章提到了在进行分页内容匹配之后,接下来的任务就是“过滤”。过滤分为分页区域过滤和文章内容过滤。...

    dede采集规则

    1. **规则编写**:采集规则通常由一系列正则表达式和特定语法组成,用于识别目标网站上的数据结构。比如,要采集文章标题,可以设定匹配网页HTML中的标题标签`&lt;h1&gt;`或`&lt;title&gt;`的规则。 2. **URL匹配**:首先,你...

    dede采集插件

    2. **内容过滤与处理**:通过正则表达式或其他方法,对抓取的数据进行清洗和格式化,去除广告、多余标签等。 3. **自动定时任务**:设置定时采集,确保网站内容始终保持最新。 4. **伪原创功能**:通过对内容进行...

    dede织梦常用采集规则设置的方法步骤

    织梦(DedeCMS)是一款广泛使用的开源内容管理系统,它的强大之处在于其灵活的数据采集功能,能够帮助用户从互联网上自动获取并整理所需信息。下面,我们将详细讲解如何设置和运用织梦的采集规则。 一、采集规则的...

    dede CMS最新采集规则

    2. **数据提取规则**:使用XPath或正则表达式来定位网页中需要提取的数据元素。 3. **内容过滤**:去除无关的HTML标签,或者根据关键词、格式等进行内容筛选。 4. **时间调度**:设置采集任务的执行频率,如每天、...

    织梦dede采集教程

    织梦DEDECMS采集教程是一个面向初学者的指导,旨在帮助用户理解如何在DEDECMS内容管理系统中设置和执行数据采集任务。DEDECMS提供了采集功能,允许用户自动抓取外部网站的数据,如文章,然后将其导入到自己的网站中...

    dede3.1分页文字采集过滤规则详说(图文教程)续二

    ### dede3.1分页文字采集过滤规则详解(图文教程续二) #### 一、引言 在上一篇文章中,我们已经介绍了dedeCMS3.1版本中基础的文字采集与过滤规则设置方法。本文将继续深入探讨如何针对具有分页功能的目标网站进行...

Global site tag (gtag.js) - Google Analytics