- 浏览: 10202 次
最新评论
文章列表
在openstack官方看了部署手册:http://docs.openstack.org/juno/install-guide/install/yum/content/
花了三天时间在公司的刀片上搭了个环境,系统是centos7,部署了controller、compute、network、block storage4个节点,顺利导入windows、linux虚机镜像,这里就把部署中的一些重要步骤罗列供下次使用参考(详细命令参考官网非常详细)
一、Identity service -------Keystone
1. basic environment
(1)3 node ...
转自:http://wentao365.iteye.com/blog/1740691
1数据切分 "Shard" 这个词英文的意思是"碎片",而作为数据库相关的技术用语,似乎最早见于大型多人在线角色扮演游戏中。"Sharding" 姑且称之为"分片"。Sharding 不是一门新技术,而是一个相对简朴的软件理念。众所周知,MySQL 5 之后才有了数据表分区功能,那么在此之前,很多 MySQL 的潜在用户都对 MySQL 的扩展性有所顾虑,而是否具备分区功能就成了衡量一个数据库可扩展性与否的一个关键指标(当然不是 ...
服务端: 客户端
socket_fd = socket( PF_ ,SOCK_ , ) :定义文件描述符 s ...
看了马士兵讲的spring实现原理视频,代码部分就不列出来了,只是表达下看完视频后的想法,对一些模糊的概念进行总结
一、概念
1.Dependency Injection:依赖注入 完成bean与bean之间的依赖关系,通过配置文件中bean id定义的容器,依赖容器中的指定对象完成创建实例
2.Inverse of Control:控制反转 和DI是一个概念 当某个角色(java实例)需要另一个角色的协助,传统程序中由调用者创建被调用者的实例,但通过spring,创建被调用者的工作可以由容器(spring)来完成,直接通过配置XML完成 ...
SQL基础语法: http://www.w3school.com.cn/sql
建立索引提高查询效率的原则,一般是给在where中经常查询的关键字段加
关键字:select、distinct(不重复出现的值)、where、order by(排序DESC降序)、insert、update、delete
union(多个表联合、作用类似合并):联合表的操作字段必须类型匹配。
limit(偏移量,取出条目数量); 放在结尾处
exits:跨表连接词,可以连接内表和外表的字段进行条件表达式
MySql:连接数据库 mysql -h ip(localhost) - ...
类的初始化和对象实例化
反射机制的目的就是通过类加载获取到字节码文件(运行中的类)的内部数据结构,再对这些获取的信息进行操作,如获取类对象、创建对象实例、获取方法名、调用方法、获取方法参数类型和方 ...
引言:我们维护hadoop系统的时候,必不可少需要对HDFS分布式文件系统做操作,例如拷贝一个文件/目录,查看HDFS文件系统目录下的内容,删除 HDFS文件系统中的内容(文件/目录),还有HDFS管理信息,单独启动停止 namenode datanode jobtracker tasktracker等等一系列的操作。大家跟着做一遍呢!就会对HDFS的体系架 构有更加深入的理解,不多说我们开始吧。环境操作系统:centos 6.0hadoop版本:0.20.2部署目录:/home/grid/hadoop-0.20.2名称节点元数据位置:/home/grid/hadoop-0.20.2/ ...
Using a Mesos Master URL
The Master URLs for Mesos are in the form mesos://host:5050 for a single-master Mesos cluster, ormesos://zk://host:2181 for a multi-master Mesos cluster using ZooKeeper.
The driver also needs some configuration in spark-env.sh to interact properly with Mesos:
In spark. ...
备份namenode上的元数据持久状态文件,将写入元数据的写入操作备份到一台远程挂在的NFS文件上。为了确保完全恢复,平时需要通过一台物理机对namenode定期镜像,所有nodename的操作都在辅助机上重复,但由于重复仍是滞后于主机,所以需要配合NFS的元数据来完成完全备份。
./hadoop distcp hdfs://192.168.0.51:9000/hbase hdfs://120.27.44.69:9000/hbasehdfs dfsadmin -safemode gethadoop distcp -overwrite hdfs://xd-gw:9005/hbase hdf ...
#安装mesosphere repo
sudo rpm -Uvh http://repos.mesosphere.io/el/7/noarch/RPMS/mesosphere-el-repo-7-1.noarch.rpm #下载apache mesos
wget http://downloads.mesosphere.io/master/centos/7/mesos-0.21.1-1.1.centos701406.x86_64.rpm
sudo rpm -Uvh mesos-0.21.1-1.1.centos701406.x86_64.rpm
#安装marathon
...
大数据这两年也是大热,自己虽然在工作方面没什么交集,但也通过公司的一些资源对这方面进行了了解,包括hadoop、spark的部署及简单用例,以下部分内容都是通过公司服务器实现了操作,部署hadoop的大致流程有下面几个步骤:
1.安装系统(centos 7.0)
2.安装ssh无密钥登录服务,实现master控制其他slave无需口令
3.安装jdk
4.安装配置hadoop
5.设置防火墙端口
需要注意centos 7.0的命令变化比较大,主要用到下面几个命令变化
如服务的开始停止:
systemctl start firewalld.service 关闭防 ...
Red hat 6.5安装oracle10g、11g文档
第一步、软件准备1. oracle准备软件压缩包:database_forLiunx.zip2. 操作系统安装的组件如下:X窗口系统、GNOME桌面环境、编辑器、开发工具、老的软件开发。其余都不需要安装第二步、环境准备1、安装以下三个RPMs补丁包,安装顺序如下:(这三个包在“补丁包”文件夹中)rpm -ivh compat-libcwait-2.1-1.i386.rpm rpm -ivh libaio-devel-0.3.103-3.i386.rpm rpm -ivh compat-oracle-rhel4-1.0-5.i38 ...
公司需求要在内网的两台windows服务器做公网nat映射,并且定制端口,由于本人还是对linux熟悉点,就还是以一台linux服务器做转发完成。参考网站:http://www.cnblogs.com/JemBai/archive/2009/03/19/1416364.htmlhttp://wqmsl.blog.51cto.com/847418/404283http://www.chinaitlab.com/www/special/linux11.asp
环境如下: 1. 在局域网的客户机上配置路由指向,要对应到dnat服务器的网关。 2. 提供服务的机器上,默认 ...
把之前遇到的linux配置问题做了个简单汇总,方便自己以后快速搭环境使用
1.redhat/centos基本网络配置
# vi /etc/resolv.conf 修改以下内容 nameserver 8.8.8.8
#google域名服务器 nameserver 8.8.4.4
#google域名服务器
2、CentOS 修改网关 修 ...
本人分享下在京的国有铁路企业工作感悟,招聘进来时是担任C/C++研发工程师一职,工作半年后感觉这种体系内企业对研发要求不高,在公司内部转型做项目管理和产品售前。
国有企业的高层都是主要负责完成行政任务,即领导说了话不管正确与否都要去做,而且是不计成本的做。中层是工作实际推动者,负责把工作落实到各个底层员工。其实整个公司管理都是脱节的,所谓的领导甚至不知道哪些项目赚钱,哪些项目赔钱,也许在他们看来就只要自己能圈钱就好。记得刚进公司的时候部门经理面试就说了“国企资历第一、学历第二、能力第三”,事实确实也就这样。
混了将近3年感觉这类企业就是靠着国营垄断维持着,本身既没技术实力,也没市场潜力。也许刚毕 ...