博客首页 → 文本处理

最新文章列表

NLPIR深度机器学习的文本分类

近年来，随着Intemet的迅猛发展，网络信息和数据信息不断扩张，如何有效利用这一丰富的数据信息，已成为广大信息技术工作者所关注的焦点之一。为 ...
大数据挖掘语义分词中文分词文本处理 
ljrj12345 评论(0) 有44人浏览 2017-12-12 15:53

Spring batch自定义LineMapper实现特殊文本的处理

spring-batch是Java Spring的的批处理框架，而且提供了简单的文本处理功能。 下面的的例子，实现了对文本的下载和处理的流程。   <!-- Tasks分多个Task，Task启动job，job分为step --> <batch:job id="wxJob" job-repository="jobRepository&qu ...
DefaultLineMaperSpringBatch空行文本处理 
feir8510 评论(0) 有1922人浏览 2016-11-05 20:31

自动抽取新闻网页中的主要内容

  抽取网页中的主要内容，是文本挖掘预处理中一个很头疼的问题。但是现在一切都不是问题。             String  content = ArticleExtractor.INSTANCE.getText(new URL("https://www.google.com.hk/#newwindow=1&q=restlet+java.net.socketexception ...
文本处理搜索引擎 
thd52java 评论(0) 有6676人浏览 2013-11-29 22:26

Linux系统下如何删除文本中的重复行

      在Linux系统中,如果要删除文本中的重复行,可以如何做?       平时比较常用的方式是采用sort和uniq结合来处理.但如果要更进一步,根据文本中的某一列,而不是整行 来进行是否重复的判断,并对重复行进行删除,要如何做呢?       Google了一些资料,如下:       1. 枪声依旧 Linux下利用awk进行文本统计       2. sed与awk去除重 ...
文本处理删除重复行Linux 
xwv 评论(0) 有2077人浏览 2013-08-21 16:01

程序员的修养

    在做IE正方面的东西，用的是GATE框架，处理中文文本，中文处理不同于英文，因为中文最大的特点就是每个字之间没有间隔，而英文每个词之间都 ...
文本处理 
单眼皮大娘 评论(0) 有1044人浏览 2011-11-01 22:28

构建自己的DSL之三 抓取文件管理

转载请标明出处：http://fuliang.iteye.com/blog/1127437 我们抓取的网页抽取的结果是带有日期的文件，经常需要操作某个日期范围的文件，来进行统计，抽样，入库，所有需要一个方便的DSL来处理这件事情。 我们希望制定几个条件就可以得到符合条件的文件，比如： data_set = CrawlerDataSet.with_cond do |cond| con ...
RubyText Processing文本处理 
fuliang 评论(0) 有1759人浏览 2011-07-18 23:26

构建自己的DSL之二 抓取文本处理

转载请标明出处：http://fuliang.iteye.com/blog/1122051 公司的蜘蛛抓取的内容一个记录是以TAB分割的各个字段的值，并且随着各种分类得分、正文静态得分策略的添加，版本不断的演变。每次做抽样、分析、分类语料等文本处理都需要写一些样板式的代码，并且得到wiki查找指定版本每个字段的位置。构建一个好的DSL来自动处理这件事情能够省去很多重复的操作，只需要关注要处理的事情 ...
RubyDSLText Processing文本处理文本记录 
fuliang 评论(0) 有2309人浏览 2011-07-11 23:18

最近博客热门TAG

Java(141746) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics