`
gzycnet
  • 浏览: 32097 次
  • 性别: Icon_minigender_1
  • 来自: 贵阳
社区版块
存档分类
最新评论

DedeCMS采集过滤正则表达式大全

阅读更多

下面是在综合论坛上网友的各种正则的一个全集:

{dede:trim}
{/dede:trim}
{dede:trim}<param([^>]*)>{/dede:trim}
{dede:trim}<embed([^>]*)>([^>]*)</embed>{/dede:trim}
{dede:trim}<embed([^>]*)>{/dede:trim}
{dede:trim}</embed>{/dede:trim}
{dede:trim}<object([^>]*)>([^>]*)</object>{/dede:trim}
{dede:trim}<object([^>]*)>{/dede:trim}
{dede:trim}</object>{/dede:trim}
{dede:trim}<OBJECT([^>]*)>([^>]*)</OBJECT>{/dede:trim}
{dede:trim}<OBJECT([^>]*)>{/dede:trim}
{dede:trim}</OBJECT>{/dede:trim}
{dede:trim}<iframe([^>]*)>([^>]*)</iframe>{/dede:trim}
{dede:trim}<iframe([^>]*)>{/dede:trim}
{dede:trim}</iframe>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>([^>]*)</IFRAME>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>{/dede:trim}
{dede:trim}</IFRAME>{/dede:trim}
{dede:trim}<font([^>]*)>([^<]*)</font>{/dede:trim}
{dede:trim}<font([^>]*)>{/dede:trim}
{dede:trim}</font>{/dede:trim}
{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}
{dede:trim}<a([^>]*)>{/dede:trim}
{dede:trim}</a>{/dede:trim}
{dede:trim}<td([^>]*)>([^>]*)</td>{/dede:trim}
{dede:trim}<td([^>]*)>{/dede:trim}
{dede:trim}</td>{/dede:trim}
{dede:trim}<tr([^>]*)>([^>]*)</tr>{/dede:trim}
{dede:trim}<tr([^>]*)>{/dede:trim}
{dede:trim}</tr>{/dede:trim}
{dede:trim}<tbody([^>]*)>([^>]*)</tbody>{/dede:trim}
{dede:trim}<tbody>{/dede:trim}
{dede:trim}</tbody>{/dede:trim}
{dede:trim}<table([^>]*)>([^>]*)</table>{/dede:trim}
{dede:trim}<table([^>]*)>{/dede:trim}
{dede:trim}</table>{/dede:trim}
{dede:trim}<img([^>]*)>{/dede:trim}
{dede:trim}<span([^>]*)>{/dede:trim}
{dede:trim}</span>{/dede:trim}
{dede:trim} {/dede:trim}
{dede:trim}<stong>{/dede:trim}
{dede:trim}</stong>{/dede:trim}


应用示例一:标题中空格的过滤
经常在采集文章的时候,标题文字里面有空格,采回来后应用很是麻烦,所以需要在过滤处添加下面正则过滤

{dede:trim} {/dede:trim}


应用示例二:来源作者中连接的过滤
采集文章的时候,有的系统里面作者或者来源处都有连接,直接采集的话将连接采集回来了,然后由于这两个字段有限制,通常会造成需要采集的内容没有采集回来,所以需要在过滤处添加下面正则过滤

{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}


应用示例三:文章内容中连接以及其他广告代码的过滤
这个就不用说了,当需要对所有东西过滤的时候,直接用上面所有的代码过滤就可以,但是实际应用中,我们只需要对连接、动画、调用等进行过滤。(这个需要按照对方内容里面具体含有什么代码来具体操作)
一般的只有链接,使用二中的代码进行过滤就可以了,但是实际上一般的网站现在都在内容里面加有广告等,所以采取下面的过滤正则就可以完成过滤:

{dede:trim}<a([^>]*)>([^<]*)</a>{/dede:trim}
{dede:trim}<IFRAME([^>]*)>([^>]*)</IFRAME>{/dede:trim}
{dede:trim}<object([^>]*)>([^>]*)</object>{/dede:trim}
{dede:trim}<s cript([^>]*)>([^>]*)</s cript>{/dede:trim}


应用示例四:过滤GG广告代码
其实这个就是在上面的内容过滤,但是很多论坛里的网友经常问这个,所以单独作为一个应用列出来:

{dede:trim}<s cript([^>]*)>([^>]*)</s cript>{/dede:trim}

{dede:trim}<SCRIPT([^>]*)>{/dede:trim}
{dede:trim}</SCRIPT>{/dede:trim}
{dede:trim}google_ad_client = "([^>]*)";{/dede:trim}
{dede:trim}google([^>]*);{/dede:trim}
{dede:trim}<!--{/dede:trim}
{dede:trim}//-->{/dede:trim}

分享到:
评论

相关推荐

    织梦《正则表达式》.rar

    《正则表达式》是IT领域中不可或缺的一部分,尤其在织梦(DedeCMS)这样的内容管理系统中,正则表达式被广泛应用于数据处理、文本匹配和内容替换等场景。这个压缩包“织梦《正则表达式》.rar”包含了一个.chm格式的...

    邮箱地址正则表达式验证代码合集脚本之家特别版

    例如,isemail函数中使用了正则表达式来匹配邮箱地址,并通过执行该正则表达式来返回验证结果。需要注意的是,在JavaScript中定义正则表达式必须以斜杠(/)开头,不能使用双引号。 最后,由于文章部分文字可能由于...

    dede3.1分页文字采集过滤规则详说(图文教程)续四

    分页文字采集过滤规则是内容采集过程中不可或缺的一环,它涉及到正则表达式和dedeCMS系统的特定标签。 首先,文章提到了在进行分页内容匹配之后,接下来的任务就是“过滤”。过滤分为分页区域过滤和文章内容过滤。...

    dede采集规则

    1. **规则编写**:采集规则通常由一系列正则表达式和特定语法组成,用于识别目标网站上的数据结构。比如,要采集文章标题,可以设定匹配网页HTML中的标题标签`&lt;h1&gt;`或`&lt;title&gt;`的规则。 2. **URL匹配**:首先,你...

    dedeCMS采集免费下载自动采集发布

    dedeCMS采集,免费dedeCMS采集,免费下载,全自动采集伪原创发布推送插件

    dedeCMS插件-免费采集伪原创发布推送插件

    **dedeCMS插件-免费采集伪原创发布推送插件** **一、dedeCMS插件介绍** dedeCMS插件是一种专为dedeCMS(织梦内容管理系统)设计的扩展工具,它提供了丰富的功能来增强网站的运营效率和SEO优化。这个免费的插件包含...

    dede采集插件

    2. **内容过滤与处理**:通过正则表达式或其他方法,对抓取的数据进行清洗和格式化,去除广告、多余标签等。 3. **自动定时任务**:设置定时采集,确保网站内容始终保持最新。 4. **伪原创功能**:通过对内容进行...

    dede织梦常用采集规则设置的方法步骤

    织梦(DedeCMS)是一款广泛使用的开源内容管理系统,它的强大之处在于其灵活的数据采集功能,能够帮助用户从互联网上自动获取并整理所需信息。下面,我们将详细讲解如何设置和运用织梦的采集规则。 一、采集规则的...

    dede CMS最新采集规则

    2. **数据提取规则**:使用XPath或正则表达式来定位网页中需要提取的数据元素。 3. **内容过滤**:去除无关的HTML标签,或者根据关键词、格式等进行内容筛选。 4. **时间调度**:设置采集任务的执行频率,如每天、...

    织梦采集规则

    织梦采集规则是一种在互联网数据抓取领域中广泛使用的工具,尤其对于基于织梦(DedeCMS)内容管理系统构建的网站来说,它的重要性不言而喻。织梦采集规则允许用户自动化地从不同来源获取数据,如新闻、文章、图片等...

    dedecms神箭手云采集插件 v1.0.0-源码.zip

    5. Web爬虫技术:作为云采集插件,源码可能包含HTTP请求、网页解析(如使用DOM或正则表达式)、数据处理等爬虫相关知识。 6. 错误处理与日志记录:源码可能会有错误处理机制和日志记录,这对于提升软件的稳定性和可...

    DEDECMS5.7后台getshell1

    首先,需要使用更严格的正则表达式来检查上传文件的扩展名。其次,需要对上传文件的文件名进行更严格的检查,防止攻击者使用特殊字符来 bypass 安全检查。最后,需要对getimagesize函数的检查结果进行更严格的校验,...

    DedeCMSV5.6版自动采集功能规则使用基本知识详细讲解教程借鉴.pdf

    通过CSS选择器或正则表达式,我们可以精确地指定要采集的HTML片段。 此外,对于更复杂的采集需求,例如处理动态加载的内容或者JavaScript生成的元素,可能需要更深入的Web抓取技术,如模拟登录、处理Cookies、使用...

    杰灵、WordPress、dedecms、discuz、帝国等主流采集插件,自带采集规则

    本资源包集合了“杰灵”、“WordPress”、“dedecms”、“discuz”以及“帝国”等主流的采集插件,它们都带有预设的采集规则,能够帮助用户快速地获取和整理网络上的信息,以满足不同网站的需求。 首先,我们来详细...

    php使用ereg验证文件上传的方法

    正则表达式`. (htm|html)$`解释如下: - `.`:匹配任何单个字符。 - `(htm|html)`:匹配`htm`或`html`。 - `$`:表示字符串的结尾。 2. **验证文件名的合法性**: 检查文件名中是否包含斜线(`/`)字符,因为...

    dede织梦采集侠2.8版本

    1. **智能化采集**:该版本具备智能识别和过滤功能,能够自动识别网页结构,精准定位目标内容,避免无效数据的采集。 2. **高效稳定**:优化了采集引擎,提升了数据抓取速度,同时保证了运行稳定性,降低了服务器...

    dede自动采集更新伪原创插件高级版

    2. **网页爬虫技术**:采集功能涉及到爬虫的编写,需要理解HTTP协议、CSS选择器、正则表达式等,以便精准地抓取目标内容。 3. **伪原创算法**:插件可能运用了一些文本处理技术,如关键词替换、句子重组、同义词替换...

    dede文字批量替换工具

    - **正则表达式**:对于复杂的文本匹配和替换,支持正则表达式将大大增强工具的灵活性和实用性。 - **多语言支持**:对于多语言站点,工具可能需要有针对不同语言版本进行替换的能力。 【dede文字替换工具】的...

    DedeCms织梦调用文章第一张图片(非缩略图)的实现方法.docx

    这个函数通过SQL语句获取指定文章ID($arcid)对应的文章正文,然后使用正则表达式匹配出文章内容中第一个`&lt;img&gt;`标签的`src`属性,即第一张图片的URL。 接下来,我们需要修改织梦的内容调用标签库文件`include/...

Global site tag (gtag.js) - Google Analytics