rank是一个seo工具,用于分析网站的搜索引擎收录排名。
比如我写了一篇文章:“使用Java8实现自己的个性化搜索引擎”,我想知道有哪些网站转载了我的文章,我该怎么办呢?请看这里,ITEYE博文抄袭检查的代码:https://github.com/ysc/rank/blob/master/src/main/java/org/seo/rank/impl/BaiduCopyChecker.java ,该代码来自本人的rank项目。
值得注意的是,这里我们只是比较了原文和其他文章的标题,如果其他文章标题包含了原文,我们就认为其他文章抄袭原文。这个简单的规则之所以生效,是因为我写的博文的标题基本上都是独一无二的,当然也有少许例外。更近一步,我们应该比较原文和其他文章的内容的相似度,以便精准判断是不是抄袭。本文仅仅利用了标题的包含这个简单的规则就取得了几乎是完美的结果。
下面我们分析ITEYE博客:http://yangshangchuan.iteye.com 被抄袭的情况。
检查博文数目:101
1、Nutch相关框架安装使用最佳指南 抄袭链接有(26)个
原文链接:http://yangshangchuan.iteye.com/blog/1832091
抄袭链接:
2、Apache Nutch v1.8发布,Java实现的网络爬虫 抄袭链接有(12)个
原文链接:http://yangshangchuan.iteye.com/blog/2032672
抄袭链接:
-
http://www.oschina.net/news/59287/apache-nutch-2-3?&from=androidqq
-
http://www.oschina.net/news/59287/apache-nutch-2-3?from=20150201
-
http://www.oschina.net/news/59287/apache-nutch-2-3?from=20150201&_wv=5
-
http://www.oschina.net/news/59287/apache-nutch-2-3?utm_source=tuicool
3、基于Nutch+Hadoop+Hbase+ElasticSearch的网络爬虫及搜索引擎 抄袭链接有(12)个
原文链接:http://yangshangchuan.iteye.com/blog/2103664
抄袭链接:
4、APDPlat的系统启动和关闭流程剖析 抄袭链接有(8)个
原文链接:http://yangshangchuan.iteye.com/blog/2010808
抄袭链接:
-
http://www.07net01.com/linux/APDPlatdexitongqidongheguanbiliuchengpouxi_705847_1391368623.html
-
http://www.fanli7.net/a/JAVAbiancheng/Spring/20140203/424600.html
5、给JAVA源代码文件统一地添加licence信息头 抄袭链接有(7)个
原文链接:http://yangshangchuan.iteye.com/blog/1841150
抄袭链接:
6、Hadoop分布式文件系统HDFS和OpenStack对象存储系统Swift有何不同? 抄袭链接有(6)个
原文链接:http://yangshangchuan.iteye.com/blog/1969491
抄袭链接:
-
http://itindex.net/detail/46319-hadoop-%E6%96%87%E4%BB%B6%E7%B3%BB%E7%BB%9F-hdfs
-
http://www.68idc.cn/help/buildlang/python/20150302242330.html
-
http://www.68idc.cn/help/buildlang/python/20150304246294.html
7、动态索引结构和索引更新机制 抄袭链接有(6)个
原文链接:http://yangshangchuan.iteye.com/blog/2103647
抄袭链接:
8、new一个Object对象占用多少内存? 抄袭链接有(6)个
原文链接:http://yangshangchuan.iteye.com/blog/2021423
抄袭链接:
9、英语单词音近形似转化规律研究 抄袭链接有(6)个
原文链接:http://yangshangchuan.iteye.com/blog/2186300
抄袭链接:
10、Java开源项目cws_evaluation:中文分词器分词效果评估 抄袭链接有(5)个
原文链接:http://yangshangchuan.iteye.com/blog/2059040
抄袭链接:
11、Java实现的基于模板的网页结构化信息精准抽取组件:HtmlExtractor 抄袭链接有(5)个
原文链接:http://yangshangchuan.iteye.com/blog/2110604
抄袭链接:
12、APDPlat的日志国际化实现方式 抄袭链接有(5)个
原文链接:http://yangshangchuan.iteye.com/blog/1974027
抄袭链接:
13、配置Nutch模拟浏览器以绕过反爬虫限制 抄袭链接有(4)个
原文链接:http://yangshangchuan.iteye.com/blog/2030741
抄袭链接:
14、Java8全新打造,英语学习supertool 抄袭链接有(4)个
原文链接:http://yangshangchuan.iteye.com/blog/2196853
抄袭链接:
15、中文分词算法 之 基于词典的正向最大匹配算法 抄袭链接有(4)个
原文链接:http://yangshangchuan.iteye.com/blog/2031813
抄袭链接:
16、中文分词算法 之 基于词典的逆向最小匹配算法 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2040431
抄袭链接:
-
http://my.oschina.net/apdplat/blog/217589?p={{currentPage+1}}
-
http://my.oschina.net/apdplat/blog/217589?p={{currentPage-1}}
17、APDPlat中数据库备份恢复的设计与实现 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2010680
抄袭链接:
18、Nutch的发展历程 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/1949212
抄袭链接:
19、使用JSoup+CSSPath采集和讯网人物信息 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/1966497
抄袭链接:
20、使用CountDownLatch来模拟马拉松比赛 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2198572
抄袭链接:
21、Java中文分词组件 - word分词 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2056959
抄袭链接:
22、自动更改IP地址反爬虫封锁,支持多线程 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2195287
抄袭链接:
23、APDPlat中的用户密码安全策略 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2029367
抄袭链接:
24、软件熵:软件开发中推倒重来的过程就是软件熵不断增加的过程 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2113923
抄袭链接:
25、网络爬虫面临的挑战 之 链接构造 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2031642
抄袭链接:
26、Nutch抓取需要登录的网站 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2031742
抄袭链接:
27、如何在你的应用中集成人机问答系统QuestionAnsweringSystem? 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2108250
抄袭链接:
28、中文分词算法 之 基于词典的逆向最大匹配算法 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2033843
抄袭链接:
29、QuestionAnsweringSystem v1.1 发布,人机问答系统 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2101533
抄袭链接:
30、APDPlat如何自动建库建表并初始化数据? 抄袭链接有(3)个
原文链接:http://yangshangchuan.iteye.com/blog/2012220
抄袭链接:
-
http://www.bihuman.com/bbs/forum.php?mod=viewthread&tid=9770
-
http://www.csdn123.com/html/mycsdn20140110/26/2693fc2530f0e77efae315d9942626cf.html
31、Java应用系统中自动实时检测资源文件内容变化 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/2115461
抄袭链接:
32、Cygwin运行nutch报错:Failed to set permissions of path 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/1839784
抄袭链接:
33、nutch2.1+mysql报错及解决 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/1839782
抄袭链接:
34、配置Cygwin支持无密码SSH登陆 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/1839812
抄袭链接:
35、APDPlat拓展搜索之集成Solr 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/2010760
抄袭链接:
36、Hadoop发行版的比较与选择 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/1972846
抄袭链接:
37、使用Java8实现自己的个性化搜索引擎 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/2199420
抄袭链接:
38、APDPlat中业务日志和监控日志的设计与实现 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/2010571
抄袭链接:
39、对Nutch2.1抽象存储层的一些看法 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/1835074
抄袭链接:
40、APDPlat拓展搜索之集成ElasticSearch 抄袭链接有(2)个
原文链接:http://yangshangchuan.iteye.com/blog/2010755
抄袭链接:
41、大数据系列7:Storm – 流计算 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1950165
抄袭链接:
42、The Design of HDFS 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2002898
抄袭链接:
43、英语单词后缀规则总结 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2186326
抄袭链接:
44、30个JDK类库源代码中最频繁出现的词的深度分析 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2194885
抄袭链接:
45、NUTCH公开课:从搜索引擎到网络爬虫 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1941498
抄袭链接:
46、大数据系列11:Gora – 大数据持久化 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1953733
抄袭链接:
47、使用Java调用百度搜索 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1961058
抄袭链接:
48、Ubuntu上安装HADOOP多机完全分布式集群 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1840481
抄袭链接:
49、运行nutch提示:0 records selected for fetching, exiting 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2033009
抄袭链接:
50、中文分词算法 之 基于词典的正向最小匹配算法 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2040423
抄袭链接:
51、大数据系列6:HBase – 基于Hadoop的分布式数据库 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1954018
抄袭链接:
52、APDPlat中的机器码生成机制 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2012401
抄袭链接:
53、英语单词前缀规则总结 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2186327
抄袭链接:
54、ITEYE博文抄袭检查 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2199536
抄袭链接:
55、192本软件著作用词分析(五)用词最复杂99级 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2194214
抄袭链接:
56、运行nutch报错:unzipBestEffort returned null 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2030096
抄袭链接:
57、搜索引擎的分片(shard)和副本(replica)机制 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2103650
抄袭链接:
58、Windows上安装HADOOP单机伪分布式集群 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1839814
抄袭链接:
59、技术框架太多,多的眼花缭乱,如何在众多选择中找到自己的方向? 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2197217
抄袭链接:
60、模拟浏览器的神器 - HtmlUnit 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2036809
抄袭链接:
61、APDPlat中领域模型的自描述机制与事件通知机制 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2010734
抄袭链接:
62、APDPlat v2.5正式发布,开源的Java应用级产品开发平台 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/1972625
抄袭链接:
63、SOLR4.2+NUTCH1.6 抄袭链接有(1)个
原文链接:http://yangshangchuan.iteye.com/blog/2200131
抄袭链接:
64、大数据系列12:Hadoop2 – 全新的Hadoop
原文链接:http://yangshangchuan.iteye.com/blog/1967994 无抄袭链接
65、大数据系列4:Hive – 基于HADOOP的数据仓库
原文链接:http://yangshangchuan.iteye.com/blog/1950178 无抄袭链接
66、使用Java调用谷歌搜索
原文链接:http://yangshangchuan.iteye.com/blog/1961059 无抄袭链接
67、大数据系列3:用Python编写MapReduce
原文链接:http://yangshangchuan.iteye.com/blog/1950157 无抄袭链接
68、word分词器、ansj分词器、mmseg4j分词器、ik-analyzer分词器分词效果评估
原文链接:http://yangshangchuan.iteye.com/blog/2056537 无抄袭链接
69、Java中的null引用,超乎你想象
原文链接:http://yangshangchuan.iteye.com/blog/2038163 无抄袭链接
70、2000个软件开发领域的高频特殊词及精选例句(一)
原文链接:http://yangshangchuan.iteye.com/blog/2195665 无抄袭链接
71、分析在各大考纲词汇中同时拥有前缀后缀和词根的词(一)
原文链接:http://yangshangchuan.iteye.com/blog/2198571 无抄袭链接
72、HBase on CAP
原文链接:http://yangshangchuan.iteye.com/blog/2002544 无抄袭链接
73、分析996个词根在各大考纲词汇中的作用(五)总结精选篇
原文链接:http://yangshangchuan.iteye.com/blog/2195991 无抄袭链接
74、分析113个前缀在各大考纲词汇中的作用(二)总结精选篇
原文链接:http://yangshangchuan.iteye.com/blog/2195996 无抄袭链接
75、大数据系列2:建立开发环境编写HDFS和Map Reduce程序
原文链接:http://yangshangchuan.iteye.com/blog/1950158 无抄袭链接
76、APDPlat旗下10大开源项目,欢迎大家一起来参与
原文链接:http://yangshangchuan.iteye.com/blog/2200130 无抄袭链接
77、中文分词算法 之 词典机制性能优化与测试
原文链接:http://yangshangchuan.iteye.com/blog/2035007 无抄袭链接
78、中文分词效果对比
原文链接:http://yangshangchuan.iteye.com/blog/2043184 无抄袭链接
79、二百多部软件著作中最重要的9224个英语单词
原文链接:http://yangshangchuan.iteye.com/blog/2195559 无抄袭链接
80、给LUKE增加word分词器
原文链接:http://yangshangchuan.iteye.com/blog/2200077 无抄袭链接
81、分析151个后缀在各大考纲词汇中的作用(三)总结精选篇
原文链接:http://yangshangchuan.iteye.com/blog/2196690 无抄袭链接
82、大数据系列5:Pig – 大数据分析平台
原文链接:http://yangshangchuan.iteye.com/blog/1950274 无抄袭链接
83、计算ITEYE博文在百度的收录与排名情况
原文链接:http://yangshangchuan.iteye.com/blog/2199419 无抄袭链接
84、大数据系列10:Spark – 内存计算
原文链接:http://yangshangchuan.iteye.com/blog/1950276 无抄袭链接
85、JAVA调用CSDN接口发博文
原文链接:http://yangshangchuan.iteye.com/blog/2017751 无抄袭链接
86、JDK源代码中最重要的4646个英语单词
原文链接:http://yangshangchuan.iteye.com/blog/2195664 无抄袭链接
87、一个月的时间让你的词汇量翻一翻
原文链接:http://yangshangchuan.iteye.com/blog/2186301 无抄袭链接
88、APDPlat中备份文件异地容灾机制之FTP上传
原文链接:http://yangshangchuan.iteye.com/blog/2010750 无抄袭链接
89、OSCHINA博文抄袭检查
原文链接:http://yangshangchuan.iteye.com/blog/2200451 无抄袭链接
90、JDK源代码以及200多部软件著作中出现的以连字符构造的1011个合成词
原文链接:http://yangshangchuan.iteye.com/blog/2199283 无抄袭链接
91、大数据系列9:Mahout – 机器学习
原文链接:http://yangshangchuan.iteye.com/blog/1950172 无抄袭链接
92、根据76大细分词性对单词进行归组(二)
原文链接:http://yangshangchuan.iteye.com/blog/2197877 无抄袭链接
93、大数据系列1:在win7上安装配置Hadoop伪分布式集群
原文链接:http://yangshangchuan.iteye.com/blog/1953929 无抄袭链接
94、分析在各大考纲词汇中既没有词根也没有前缀和后缀的独立单词
原文链接:http://yangshangchuan.iteye.com/blog/2196691 无抄袭链接
95、Ubuntu上安装HADOOP单机伪分布式集群
原文链接:http://yangshangchuan.iteye.com/blog/1839809 无抄袭链接
96、软件业的奥斯卡奖:JOLT奖 之 最好的书
原文链接:http://yangshangchuan.iteye.com/blog/1837328 无抄袭链接
97、根据76大细分词性对单词进行归组(一)
原文链接:http://yangshangchuan.iteye.com/blog/2197874 无抄袭链接
98、Amazon Dynamo的NWR模型
原文链接:http://yangshangchuan.iteye.com/blog/2010574 无抄袭链接
99、词组习语3054组
原文链接:http://yangshangchuan.iteye.com/blog/2197555 无抄袭链接
100、利用1189个精选句子彻底掌握2190个单词
原文链接:http://yangshangchuan.iteye.com/blog/2199287 无抄袭链接
101、大数据系列8:Sqoop – HADOOP和RDBMS数据交换
原文链接:http://yangshangchuan.iteye.com/blog/1950171 无抄袭链接
相关推荐
博文链接:https://jackzhangyunjie.iteye.com/blog/202349
NULL 博文链接:https://zhengkaifl.iteye.com/blog/1190201
测试用的HelloWorld工程源文件 博文链接:https://anweixiao.iteye.com/blog/126252
NULL 博文链接:https://wandejun1012.iteye.com/blog/2319980
NULL 博文链接:https://java-flex.iteye.com/blog/866211
2013Myeclipse破解文件 博文链接:https://geertu.iteye.com/blog/2296448
NULL 博文链接:https://zhaoxuewei2012.iteye.com/blog/1562254
Hibernate参考文档3.1.2 博文链接:https://tenn.iteye.com/blog/134826
NULL 博文链接:https://uule.iteye.com/blog/2115834
NULL 博文链接:https://zw7534313.iteye.com/blog/426799
NULL 博文链接:https://timewalker.iteye.com/blog/1065615
NULL 博文链接:https://676744379-qq-com.iteye.com/blog/790414
NULL 博文链接:https://qiusenvs.iteye.com/blog/412763
博文链接:https://flare.iteye.com/blog/151376
博文链接:https://knight.iteye.com/blog/75888
博文链接:https://antgreen.iteye.com/blog/245704
博文链接:https://hkme.iteye.com/blog/142511
NULL 博文链接:https://wy649898543.iteye.com/blog/1423655
NULL 博文链接:https://yizhilong28.iteye.com/blog/1161027
NULL 博文链接:https://ownraul.iteye.com/blog/1277047