weishiym
- 浏览: 34458 次
- 性别:
- 来自: 广西
-
最新评论
文章列表
如果出现以下错误
2018-01-25 08:11:11.384 UTC [msp] GetDefaultSigningIdentity -> DEBU 002 Obtaining default signing identity
Error: Error getting endorser client channel: PER:404 - Error trying to connect to local peer
/opt/gopath/src/github.com/hyperledger/fabric/peer/common/common.go:116 githu ...
1.solr w3cschool文档：
https://www.w3cschool.cn/solr_doc/solr_doc-t3642fkr.html
2.区块链
fabric中文文档：https://hyperledgercn.github.io/hyperledgerDocs/
Merkle Tree概念 http://blog.csdn.net/wo541075754/article/details/54632929
特征工程（sklearn）
- 博客分类：
- 机器学习
一、特征工程是什么
有这么一句话在业界广泛流传：数据和特征决定了机器学习的上限，而模型和算法只是逼近这个上限而已。那特征工程到底是什么呢？顾名思义，其本质是一项工程活动，目的是最大限度地从原始数据中提取特征以供算法和模型使用。通过总结和归纳，人们认为特征工程包括以下方面：
特征处理是特征工程的核心部分，sklearn提供了较为完整的特征处理方法，包括数据预处理，特征选择，降维等。首次接触到sklearn，通常会被其丰富且方便的算法模型
Java性能监控的工具非常多，像JDK自带的JConsole、VisualVM以及各种Analyzer分析工具等，这些工具大部分只能分析CPU、内存、线程、堆栈。JavaMelody 不仅可以能够分析CPU、内存，还可以对Java EE应用程序进行：用户Session数量、JDBC连接数、HTTP请求、SQL请求、JSP页面与业务接口方法（EJB3、Spring、 Guice）的执行数量，平均执行时间、错误百分比等分析，并以图表的方式显示，图表支持按天，周，月，年或自定义时间段查看。开发者分析性能的利器！
JavaMelody使用也非常的简单，使用方法如下：
1、下载地址，http: ...
最近在使用solr时，配置会有一些问题，log里面打印出日志了，但是还是不知道发生这样错误的原因。于是想学习一下相关的solr源码，以下是如何搭建solr调试环境步骤。
solr调试环境搭建，首先下载源码。
可以通过 http://archive.apache.org/dist/lucene/solr/ 下载各个版本的源码。还可以在github下载最新的solr代码，地址是：https://github.com/jeniss/lucene-solr。
源码导入Intellij idea
在下载后的solr项目，可以发现是用ant管理的。所以需要确保已安装ant。an ...
1. 目录结构说明
我们下载的Solr包中，进入Solr所在的目录，我们可以看到以下几个目录：build、client、dist、example、lib、site、src。下面分别对其进行介绍。
1.1. build
该目录是在ant build过程中生成的，其中包含了未被打包成jar或是 ...
维基的简介：Paxos算法是莱斯利·兰伯特（Leslie Lamport，就是 LaTeX 中的"La"，此人现在在微软研究院）于1990年提出的一种基于消息传递且具有高度容错特性的一致性算法。
Paxos算法目前在Google的Chubby、MegaStore、Spanner等系统中得到了应用，Hadoop中的ZooKeeper也使用了Paxos算法，在上面的各个系统中，使用的算法与Lamport提出的原始Paxos并不完全一样，这个以后再慢慢分析。本博文的目的是，如何让一个小白在半个小时之内理解Paxos算法的思想。小白可能对数学不感兴趣，对分布式的复杂理论不熟悉，只是 ...
在上一篇文章中我们大致浏览了zookeeper的启动过程，并且提到在 Zookeeper的启动过程中leader选举是非常重要而且最复杂的一个环节。那么什么是leader选举呢？zookeeper为什么需要 leader选举呢？zookeeper的leader选举的过程又是什么样子 ...
zookeeper原理(转)
- 博客分类：
- hadoop
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等。Zookeeper是hadoop的一个子项目，其发展历程无需赘述。在分布式应用中，由于工程师不能很好地使用锁机制，以及基于消息的协调机制不适合在某些应用中使用，因此需要有一种可靠的、可扩展的、分布式的、可配置的协调机制来统一系统的状态。Zookeeper的目的就在于此。本文简单分析zookeeper的工作原理，对于如何使用zookeeper不是本文讨论的重点。
1 Zookeeper的基本概念
1.1 角色
Zookeeper中的 ...
关键字：druid、druid.io、实时olap、大数据实时分析
导读：
一、Druid简介二、Druid架构组成及相关依赖三、Druid集群配置四、Druid集群启动五、Druid查询六、后记
一、Druid简介
Druid是一个为大型冷数据集上实时探索查询而设计的开源数据分析和存储系统，提供极具成本效益并且永远在线的实时数据摄取和任意数据处理。
主要特性：
为分析而设计——Druid是为OLAP工作流的探索性分析而构建。它支持各种filter、aggregator和查询类型，并为添加新功能提供了一个框架。用户已经利用Druid的基础设施开发了高级K查询和直方图功能。
...
作者：韦仕，京东商城交易平台评价社区负责人，2010年加入京东，先后参与了用户、商品、评论等系统的架构升级工作。
京东的商品评论目前已达到数十亿条，每天提供的服务调用也有数十亿次，而这些数据每年还在成倍 ...
类的生命周期
综述
1. 只有当一个类被切实使用到的时候才会被加载到虚拟机中（例如：new, 方法调用, A a = null;不算）
2. 若在加载一个类的过程中，有其他类被切实使用到，则会被一同级联加载到JVM中。
3. 当一个类中的某个符号被第一次使用到时，该类才会被初始化；当类被加载时，它并未被初始化。
4. 初始化顺序：
静态函数/变量初始化（Textual Order）
实例成员变量初始化
构造函数
加载（Loading）
1）类加载器通过类的全限定名来获取定义此类的二进制字节流
2）字节流-> 方法 ...
SolrCloud介绍
在我们应用还很渺小的时候，一台Solr服务器能完全胜任这份工作，随着我们应用慢慢长大，访问也越来越多，一台Solr服务器的弊病也逐渐显现如查询变慢了，机器宕机就无法继续提供服务，于是乎我们引入了Solr集群，通过前端负载均衡和索引Replication来分担一台机器的压力，这样既能提高查询速度，也能避免单机故障问题而且是可伸缩的解决方案，一切看起来很OK，问题也暂时解决了，但是好景不长，随着应用的发展，数据也在与日俱增，需要索引的数据也越来越多，索引文件变得越来越庞大，Replication索引变得越来越低效高成本，每个Solr实例都保存全量大索引数据的方式显然又成了系统 ...
你的项目是否该升级ES版本啦？Elasticsearch 5.0新版本的特性与改进
2016-07-28 02:09
你的项目是否该升级ES版本啦？Elasticsearch 5.0新版本的特性与改进
本文是7月26日大数据杂谈群分享的内容。
关注“大数据杂谈”公众号，点击“加群 ...