- 浏览: 354958 次
- 性别:
- 来自: 深圳
最新评论
-
sunbin:
不好意思,这个用于个人记录。http://sunbin.ite ...
Spring boot+Spring Security 4配置整合实例 -
v韧竹v:
大神,你这个有demo源码吗?我安装您这边操作的,好像有问题, ...
Spring boot+Spring Security 4配置整合实例 -
sunbin:
西蜀石兰 写道关键的是controller建立了一个中转吧,这 ...
Spring Boot 添加JSP支持【转】 -
czwanglei:
这篇文章写的真不错。。
Spring Boot 添加JSP支持【转】 -
西蜀石兰:
关键的是controller建立了一个中转吧,这样所有的jsp ...
Spring Boot 添加JSP支持【转】
文章列表
flume实时监控日志文件到hdfs
- 博客分类:
- 日志工具
1、复制jar包到flume/lib下
commons-configuration-1.6.jar
commons-io-2.4.jar
hadoop-annotations-2.7.6.jar
hadoop-auth-2.7.6.jar
hadoop-common-2.7.6.jar
hadoop-hdfs-2.7.6.jar
htrace-core-3.1.0-incubation.jar
2、创建flume-hdfs.conf文件 vim flume-hdfs.conf
#name the components on thi ...
Flume + Kafka系统搭建
- 博客分类:
- hadoop
1、搭建kafka,参考 Kafka集群部署
2、flume版本apache-flume-1.6.0-bin.tar.gz
3、Flume安装流程:
首先解压apache-flume-1.6.0-bin.tar.gz
修改配置文件
cp conf/flume-env.sh.template flume-env.sh
vi flume-env.sh
修改配置项目
export JAVA_HOME=/usr/java/jdk1.7.0_67
3、连接kafka,新建配置文件xxx.conf (文件名随便,但启动时需要)
a1 ...
集群规划:
Zookeeper集群共三台服务器,分别为:sto1、sto2、sto3。
Kafka集群共三台服务器,分别为:sto1、sto2、sto3。
1、Zookeeper集群准备
kafka是一个分布式消息队列,需要依赖ZooKeeper,请先安装好zk集群。
Zookeeper集群安装步骤略。
2、安装Kafka
下载压缩包(官网地址:http://kafka.apache.org/downloads.html)
解压:
tar zxvf kafka_2.10-0.9.0.1.tgz -C /opt/sgb ...
strom远程drpc函数接口
- 博客分类:
- hadoop
drpc是storm的远程函数接口,实现方式有两种
此处代码仅适用集群运行,本地调试请自行修改local启动方式
1、服务器端代码,服务器代码打jar包后在服务器端运行,请注意“统一写法”
方法1
package bhz.drcp;
import backtype.storm.Config;
import backtype.storm.StormSubmitter;
import backtype.storm.drpc.DRPCSpout;
import backtype.storm.drpc.ReturnResults;
import backtype.storm.top ...
环境要求
centos 6.8/JDK 1.6+/java -version/Python 2.6.6+/python -V/ZooKeeper3.4.5+/apache-storm-0.9.4
环境变量
export STORM_HOME=/opt/sgb/apache-storm-0.9.4
export ZOOKEEPER_HOME=/opt/sgb/zookeeper-3.4.6
export JAVA_HOME=/usr/java/jdk1.7.0_67
export PATH=$PATH:$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin ...
hbase运行在hadoop基础上。
我的环境变量
export JAVA_HOME=/usr/local/runtime/jdk
export HADOOP_PREFIX=/usr/local/runtime/hadoop
export HIVE_HOME=/usr/local/runtime/hive
export HBASE_HOME=/usr/local/runtime/hbase
export ZOOKEEPER_HOME=/usr/local/runtime/zookeeper
export JRE_HOME=/usr/local/runtime/jdk/jre ...
export JAVA_HOME=/usr/local/runtime/jdk
export HADOOP_PREFIX=/usr/local/runtime/hadoop
export HIVE_HOME=/usr/local/runtime/hive
export HBASE_HOME=/usr/local/runtime/hbase
export ZOOKEEPER_HOME=/usr/local/runtime/zookeeper
export JRE_HOME=/usr/local/runtime/jdk/jre
export CLASSPATH=$CLASSPATH: ...
hadoop高可用集群搭建-1
- 博客分类:
- hadoop
一、服务器访问环境
hadoop服务器4台主机,均使用ubuntu18-live-server版本,
本地localhost免密登录
ssh localhost步骤
1、ssh-keygen -t rsa
免密码登录
使用下面的命令即可免密码登录localhost
2、ssh-copy-id localhost
但是到了这里执行ssh localhost的时候依然提示我输入密码。我仔细分析了原因,一般来讲失败的原因有两个。
服务器之间免密登录
1、根据路径复制公钥到免密登录的主机
scp id_rsa.pub 账号@hostip:/rootpath/.s ...
这几天在学习K8S的安装和使用,在此记录一下
此文参考了视频教程:
两小时Kubernetes(K8S)从懵圈到熟练——大型分布式集群环境捷径部署搭建_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili镜像+讲义+安装包,链接:https://pan.baidu.com/s/1qO697oBuR7TwQ2J8boI3EA 提取码:4mvs
1 天入门 Kubernetes/K8S_哔哩哔哩 (゜-゜)つロ 干杯~-bilibilidocker+k8s+jenkins 视频与课件 https://pan.baidu.com/s/1ZUpqnkwp4B4fDExcVLADrg
报 ...
Browsersync网页服务器搭建
- 博客分类:
- javascript
1. 安装 Node.js
BrowserSync是基于Node.js的, 是一个Node模块, 如果您想要快速使用它,也许您需要先安装一下Node.js 安装适用于Mac OS,Windows和Linux。
2. 安装 BrowserSync
您可以选择从Node.js的包管理(NPM)库中 安装BrowserSync。打开一个终端窗口,运行以下命令:
npm install -g browser-sync
您告诉包管理器下载BrowserSync文件,并在全局下安装它们,您可以在所有项目(任何目录)中使用。
当然您也可以结合gulpjs或gruntjs构建工具来使用 ...
1、pom.xml
<!-- https://mvnrepository.com/artifact/com.github.binarywang/weixin-java-pay -->
<dependency>
<groupId>com.github.binarywang</groupId>
<artifactId>weixin-java-pay</artifactId>
<version>3.3.0</version>
</depe ...
Ubuntu下Nginx+PHP7-fpm的配置
- 博客分类:
- 工作相关
本文选择的是在ubuntu 与nginx 允许php 的例子。系统配置为:
Ubuntu 16.04
PHP7.2 PHP7.2-fpm
nginx
1. 为了快速部署,使用了最快捷的方法安装nginx和php: apt-get
$ sudo apt-get install nginx
$ sudo apt-get install mysql
$ sudo apt-get install php7.2 php7.2-fpm php7.2-mysql
2. 安装完毕后,需要对Nginx的配置文件进行修改:
1、下载
https://dev.mysql.com/downloads/mysql/
2、解压到固定位置,如D:\MySQL\mysql-5.7.24
3、添加my.ini文件
跟bin同级
[mysql]
# 设置mysql客户端默认字符集
default-character-set=utf8
[mysqld]
#设置3306端口
安装单机版Solr服务
- 博客分类:
- docker
1、拉取 Solr 镜像;
docker pull solr:7.4.0
2、启动 Solr 容器,即可访问 http://ip:8983/ ;
docker run --name taotao-solr -d -p 8983:8983 -t solr:7.4.0
3、新建 SolrCore,名称为 collection1;
docker exec -it --user=solr taotao-solr bin/solr create_core -c collection1
4、为了方便后续修改配置,将容器 solr 文件拷贝本地 /usr/local/ ...
Docker安装Solr和IK,以及数据导入。
- 博客分类:
- dubbo
https://blog.csdn.net/bskfnvjtlyzmv867/article/details/81623416 此链接较本文更简单
一:在docker 中安装Solr
docker下载solr镜像
docker pull solr
2.启动solr镜像
docker run --name mysolr -d -p 18983:8983 -t solr
1. run 运行容器
2. -d 代表后台运行
3. -p 容器端口和宿机端口映射
4. --name 容 ...