参考：
http://dongxicheng.org/data-mining/naive-bayes-in-hadoop/
san_yun
- 浏览: 2652057 次
- 来自: 杭州
-
文章分类
- 全部博客 (1188)
- webwork (4)
- 网摘 (18)
- java (103)
- hibernate (1)
- Linux (85)
- 职业发展 (1)
- activeMQ (2)
- netty (14)
- svn (1)
- webx3 (12)
- mysql (81)
- css (1)
- HTML (6)
- apache (3)
- 测试 (2)
- javascript (1)
- 储存 (1)
- jvm (5)
- code (13)
- 多线程 (12)
- Spring (18)
- webxs (2)
- python (119)
- duitang (0)
- mongo (3)
- nosql (4)
- tomcat (4)
- memcached (20)
- 算法 (28)
- django (28)
- shell (1)
- 工作总结 (5)
- solr (42)
- beansdb (6)
- nginx (3)
- 性能 (30)
- 数据推荐 (1)
- maven (8)
- tonado (1)
- uwsgi (5)
- hessian (4)
- ibatis (3)
- Security (2)
- HTPP (1)
- gevent (6)
- 读书笔记 (1)
- Maxent (2)
- mogo (0)
- thread (3)
- 架构 (5)
- NIO (5)
- 正则 (1)
- lucene (5)
- feed (4)
- redis (17)
- TCP (6)
- test (0)
- python，code (1)
- PIL (3)
- guava (2)
- jython (4)
- httpclient (2)
- cache (3)
- signal (1)
- dubbo (7)
- HTTP (4)
- json (3)
- java socket (1)
- io (2)
- socket (22)
- hash (2)
- Cassandra (1)
- 分布式文件系统 (5)
- Dynamo (2)
- gc (8)
- scp (1)
- rsync (1)
- mecached (0)
- mongoDB (29)
- Thrift (1)
- scribe (2)
- 服务化 (3)
- 问题 (83)
- mat (1)
- classloader (2)
- javaBean (1)
- 文档集合 (27)
- 消息队列 (3)
- nginx，文档集合 (1)
- dboss (12)
- libevent (1)
- 读书 (0)
- 数学 (3)
- 流程 (0)
- HBase (34)
- 自动化测试 (1)
- ubuntu (2)
- 并发 (1)
- sping (1)
- 图形 (1)
- freemarker (1)
- jdbc (3)
- dbcp (0)
- sharding (1)
- 性能测试 (1)
- 设计模式 (2)
- unicode (1)
- OceanBase (3)
- jmagick (1)
- gunicorn (1)
- url (1)
- form (1)
- 安全 (2)
- nlp (8)
- libmemcached (1)
- 规则引擎 (1)
- awk (2)
- 服务器 (1)
- snmpd (1)
- btrace (1)
- 代码 (1)
- cygwin (1)
- mahout (3)
- 电子书 (1)
- 机器学习 (5)
- 数据挖掘 (1)
- nltk (6)
- pool (1)
- log4j (2)
- 总结 (11)
- c++ (1)
- java源代码 (1)
- ocr (1)
- 基础算法 (3)
- SA (1)
- 笔记 (1)
- ml (4)
- zokeeper (0)
- jms (1)
- zookeeper (5)
- zkclient (1)
- hadoop (13)
- mq (2)
- git (9)
- 问题，io (1)
- storm (11)
- zk (1)
- 性能优化 (2)
- example (1)
- tmux (1)
- 环境 (2)
- kyro (1)
- 日志系统 (3)
- hdfs (2)
- python_socket (2)
- date (2)
- elasticsearch (1)
- jetty (1)
- 树 (1)
- 汽车 (1)
- mdrill (1)
- 车 (1)
- 日志 (1)
- web (1)
- 编译原理 (1)
- 信息检索 (1)
- 性能，linux (1)
- spam (1)
- 序列化 (1)
- fabric (2)
- guice (1)
- disruptor (1)
- executor (1)
- logback (2)
- 开源 (1)
- 设计 (1)
- 监控 (3)
- english (1)
- 问题记录 (1)
- Bitmap (1)
- 云计算 (1)
- 问题排查 (1)
- highchat (1)
- mac (3)
- docker (1)
- jdk (1)
- 表达式 (1)
- 网络 (1)
- 时间管理 (1)
- 时间序列 (1)
- OLAP (1)
- Big Table (0)
- sql (1)
- kafka (1)
- md5 (1)
- springboot (1)
- spring security (1)
- Spring Boot (3)
- mybatis (1)
- java8 (1)
- 分布式事务 (1)
- 限流 (1)
- Shadowsocks (0)
- 2018 (1)
- 服务治理 (1)
- 设计原则 (1)
- log (0)
- perftools (1)
最新评论
-
siphlina：
课程——基于Python数据分析与机器学习案例实战教程分享网盘 ...
Python机器学习库 -
san_yun：
leibnitz 写道hi,我想知道,无论在92还是94版本, ...
hbase的行锁与多版本并发控制(MVCC) -
leibnitz：
hi,我想知道,无论在92还是94版本,更新时(如Puts)都 ...
hbase的行锁与多版本并发控制(MVCC) -
107x：
不错，谢谢！
Latent Semantic Analysis(LSA/ LSI)算法简介 -
107x：
不错，谢谢！
Python机器学习库
分享到：
发表评论
相关推荐
为了解决这一问题，本文提出了KNN算法在Hadoop平台上的MapReduce并行化实现，旨在提高处理大数据集的能力。 MapReduce是一种分布式计算框架，由Google提出，适用于大规模数据集的并行处理。其核心思想是将复杂的...
在Hadoop上实现分类算法，通常需要将传统的单机算法转化为适合分布式环境的版本。这通常涉及将数据集划分为多个小块（blocks），并分发到不同的节点上，然后在各个节点上并行执行Map任务。Map任务对每个节点的数据...
本篇文章将详细讲解如何利用Hadoop MapReduce实现TF-IDF（Term Frequency-Inverse Document Frequency）算法，这是一种在信息检索和文本挖掘中用于评估一个词在文档中的重要性的统计方法。 首先，我们要理解TF-IDF...
数据算法：Hadoop／Spark大数据处理技巧
【作品名称】：机器学习算法 hadoop相关实现【hadoop】 【适用人群】：适用于希望学习不同技术领域的小白或进阶学习者。可作为毕设项目、课程设计、大作业、工程实训或初期项目立项。 【项目介绍】：机器学习算法 ...
在实现上，基于物品的协同过滤算法的关键在于用户行为偏好的量化，这通常包括用户对内容的转发、投票、评论等行为的分析，以及用户的购买行为。每个行为都需要赋予权值来进行量化，并根据用户的这些偏好值进行物品...
总结来说，基于Hadoop的Kmeans算法实现充分利用了分布式计算的优势，解决了传统单机算法在处理大规模数据时面临的计算资源限制，实现了高效的数据聚类。同时，通过优化的初始化、数据分配和聚类中心更新策略，能够在...
基于Hadoop的K近邻分类算法的研究 Hadoop K近邻 分类 算法 MapReduce
### 基于Hadoop的Apriori算法设计与实现 #### 一、背景与问题概述 随着信息技术的发展，海量数据的处理与分析变得日益重要。传统的数据挖掘算法和技术已经难以满足当前的需求，尤其是在处理多维度、含有大量噪声的...
该项目实现了KNN算法在Hadoop平台基于欧拉距离，加权欧拉距离，高斯函数的MapReduce实现。 特色或创意：实例上添加了基于欧拉距离，加权欧拉距离，高斯函数的实现。 使用的是著名的鸢尾花数据集。据集内包含 3 类...
基于Hadoop的文本分类算法系统，本系统实现了分词处理，停用词处理（IK）；使用朴素贝叶斯分类算法来对文本进行训练和分类，在测试过程中使用词频特征选择作为特征词选择算法，分类准确率达到了78%，包含卡方特征...
Naive Bayes是一种基于概率的分类算法，以其简单高效的特点被广泛应用在文本分类、垃圾邮件检测、情感分析等领域。在大数据处理中，结合Hadoop的MapReduce框架，Naive Bayes可以有效地处理大规模数据集。 MapReduce...
书中可能还会涵盖一些高级主题，比如YARN（Hadoop的资源管理系统）和HBase（Hadoop上的NoSQL数据库），以及如何将Hadoop和Spark集成，以实现更高效的数据处理流程。此外，可能会讨论数据清洗、预处理、ETL（提取、...
本文将探讨如何利用Hadoop的MapReduce框架实现聚类算法，并重点讨论K-Means聚类算法及其在MapReduce框架中的实现。 #### 二、Hadoop概述 **2.1 Apache Hadoop** Apache Hadoop是一个开源软件框架，它为大型数据集...
本项目聚焦于利用协同过滤算法在Hadoop分布式文件系统上构建商品推荐系统，以实现个性化推荐，提高用户购物体验。 一、协同过滤算法简介 协同过滤是一种基于用户行为的推荐方法，它假设如果两个用户在过去对某些...
在Hadoop上实现大矩阵乘法，可以充分利用其并行计算的优势，提高计算效率。 大矩阵乘法的基本概念是两个矩阵A(m×n)和B(n×p)相乘得到一个新的矩阵C(m×p)，其中C的每个元素ci,j是通过将A的第i行与B的第j列对应元素...
在实现过程中，需要注意以下几点： 1. 数据稀疏性：大规模数据集往往具有高维度和稀疏性，处理这类数据时，可以采用特征选择或降维技术，如PCA（主成分分析），以减少计算复杂度。 2. 平行化计算：为了提高效率，...