`
qindongliang1922
  • 浏览: 2183895 次
  • 性别: Icon_minigender_1
  • 来自: 北京
博客专栏
7265517b-f87e-3137-b62c-5c6e30e26109
证道Lucene4
浏览量:117534
097be4a0-491e-39c0-89ff-3456fadf8262
证道Hadoop
浏览量:125921
41c37529-f6d8-32e4-8563-3b42b2712a50
证道shell编程
浏览量:59907
43832365-bc15-3f5d-b3cd-c9161722a70c
ELK修真
浏览量:71301
社区版块
存档分类
最新评论

在Scala里面如何使用正则处理数据

阅读更多

正则在任何一门编程语言中,都是必不可少的一个模块,使用它来处理文本是非常方便的,尤其在处理在使用spark处理大数据的时候,做ETL需要各种清洗,判断,会了正则之后,我们可以非常轻松的面对各种复杂的处理,Scala里面的正则也比Java简化了许多,使用起来也必要简单,下面通过几个例子来展示下其用法:

/**
  * Created by QinDongLiang on 2017/1/5.
  */
object ScalaRegex {

  def main(args: Array[String]): Unit = {

    //例子一整个字符串匹配模式
    println("51".matches("""\d+"""))//true

    //例子二查询是否包含复合正则的模式
    println("""\d+""".r.findAllIn("foo456bar").length!=0)//true

    //例子三返回第一个匹配正则的字符串
    var numbers="""\d+""".r
    var str="foo 123 bar 456"
    println(numbers.findFirstIn(str))//Some(123)

    //例子四迭代所有匹配到的复合模式的字符串
    numbers.findAllMatchIn(str).foreach(println)// 123  456

    //例子五返回所有正则匹配作为一个List
    println(numbers.findAllMatchIn(str).toList)//List(123, 456)

    //例子六使用正则查询和替换
    var letters="""[a-zA-Z]+""".r
    var str2="foo123bar"
    println(letters.replaceAllIn(str2,"spark"))//spark123spark

    //例子七使用正则查询和替换使用一个函数
    println(letters.replaceAllIn(str,m=>m.toString().toUpperCase()))//FOO 123 BAR 456

    //例子八使用正则查询替换字符
    var exp="""##(\d+)##""".r
    var str8="foo##123##bar"
    //group 0 返回所有捕获,其他1...n分别返回第一个捕获,或第二个捕获,至第n个捕获
    println(exp.replaceAllIn(str8,m=>(m.group(0)).toString))//foo##123##bar
    println(exp.replaceAllIn(str8,m=>(m.group(1).toInt *2).toString))//foo246bar

    //例子九使用正则提取值进入一个变量里面
    val pattern="""(\d{4})-([0-9]{2})""".r

    val myString="2016-02"

    val pattern(year,month)=myString

    println(year)//2016
    println(month)//02

    //例子十在case match匹配中使用 正则
    val dataNoDay="2016-08"
    val dateWithDay="2016-08-20"

    val yearAndMonth = """(\d{4})-([01][0-9])""".r
    val yearMonthAndDay = """(\d{4})-([01][0-9])-([012][0-9])""".r

    dateWithDay match{
      case yearAndMonth(year,month) => println("no day provided")
      case yearMonthAndDay(year,month,day) => println(s"day provided: it is $day")
    }
    //day provided: it is 20

    //例子十一正则匹配忽略大小写

    val caseSensitivePattern = """foo\d+"""
    println("Foo123".matches(caseSensitivePattern))//false
    val caseInsensitivePattern = """(?i)foo\d+"""
    println("Foo123".matches(caseInsensitivePattern))//true

    //注意使用正则字符串三个双引号,不需要转义

  }

}




有什么问题可以扫码关注微信公众号:我是攻城师(woshigcs),在后台留言咨询。
技术债不能欠,健康债更不能欠, 求道之路,与君同行。


0
0
分享到:
评论

相关推荐

    scala正则表达式与模式匹配.doc

    Scala 正则表达式与模式匹配 Scala 正则表达式是 Scala 语言中的一种强大工具,用于模式匹配...在 Scala 中,我们可以使用正则表达式来实现复杂的字符串处理任务,并与模式匹配结合使用,以实现更加灵活的字符串处理。

    Scala和Spark大数据分析函数式编程、数据流和机器学习

    Scala和Spark是大数据分析领域中的两个重要工具,它们在处理大规模数据时表现出强大的性能和灵活性。Scala是一种静态类型的函数式编程语言,而Spark是一个分布式计算框架,尤其适合于大数据处理和分析。本教程将深入...

    详解Java中的scala正则表达式

    在Java中使用Scala进行正则表达式操作时,主要依赖于`scala.util.matching`包中的`Regex`类。这个类提供了丰富的功能,允许我们进行复杂的文本匹配和处理。下面我们将详细探讨Scala正则表达式的相关知识。 首先,...

    基于Scala的Spark数据处理练习设计源码

    本设计源码提供了一个基于Scala的Spark数据处理练习。项目包含99个文件,主要使用...该项目旨在熟悉Spark算子并练习处理数据,适合用于学习和实践Scala、Java技术,以及开发基于Scala的Spark数据处理练习相关的系统。

    基于Scala的Apache Spark大数据处理框架设计源码

    本源码提供了一个基于Scala的Apache Spark大数据处理框架设计。项目包含12914个文件,其中包括3697个Scala文件、1559个Q文件、1150个Java文件、388个SQL文件、372个TXT文件、362个Python文件、200个Markdown文档、...

    reb4s:Scala 的正则表达式生成器

    如果 Scala 代码编译,正则表达式将在运行时编译。 换句话说,没有必要处理 s。 如果正则表达式中存在语法错误,您将立即知道,而不必等到运行时才发现。 reb4s API 支持子表达式的组合。 复杂的表达式可以分解成可...

    基于Scala的Apache Spark大数据处理引擎设计源码

    本源码提供了一个基于Scala的Apache Spark大数据处理引擎设计。项目包含13628个文件,其中包括3835个Scala文件、1559个Q文件、999个TXT文件、933个Java源文件、395个SQL文件、369个Python文件、206个Markdown文档、...

    基于Scala的Apache Spark大数据处理设计源码

    这是一个基于Scala的Apache Spark大数据处理设计,使用Scala、Java、Python、Shell、JavaScript、CSS、HTML、Ruby和C语言开发,包含14108个文件。主要文件类型包括3966个Scala文件、1559个Q文件、1004个TXT文件、961...

    scala + mybatis 数据库查询

    - 在Scala中,我们可以使用try-catch块来处理MyBatis可能抛出的异常,确保程序的健壮性。 - 事务管理可以通过`SqlSession`的begin、commit和rollback方法实现。在执行一系列数据库操作时,确保事务的一致性非常...

    Scala的文件读写操作与正则表达式

    在Scala中,可以使用scala.io.Source对象来读取文件,该对象提供了多种方法来读取文件,例如getLines()方法可以读取文件的所有行,mkString()方法可以将文件的内容作为字符串输出。 读取文本文件 在Scala中,可以...

    Scala数据结构和算法.docx

    4. **Pattern Matching**:Scala的模式匹配允许开发者对数据进行解构,并根据不同的结构执行不同的代码块,这在处理数据结构和算法时非常有用。 5. **高阶函数**:Scala中的函数可以作为一等公民,可以赋值给变量、...

    Scala中正则表达式以及与模式匹配结合(多种方式)

    在处理正则表达式时,当潜在的匹配项重叠时,`findAllIn`方法会返回第一个可能的匹配项,随后是第一个匹配项消耗输入后跟随的下一个匹配项。如果想要返回重叠的匹配项,可以使用带有正向预查(`?=`)的正则表达式,该...

    基于Java、Scala和Spark的数据处理与分析设计源码

    本资源提供了一套基于Java、Scala和Spark的数据处理与分析设计源码,包含1381个文件,其中包括634个CRC...这些文件详细展示了如何使用Java、Scala和Spark进行数据处理与分析,非常适合用于学习和参考Java项目的开发。

    大数据课程-Scala编程基础-4.Scala数据结构_lk_edit.ppt

    学习Scala的数据结构,特别是数组和集合,有助于理解和实现各种算法,比如在大数据处理中常见的WordCount案例。在WordCount中,通常会用到集合的`flatMap`、`groupByKey`和`reduceByKey`等函数来统计文本中单词出现...

Global site tag (gtag.js) - Google Analytics