`
hlsps
  • 浏览: 32665 次
社区版块
存档分类
最新评论
文章列表
最近在工作中用到了hive,因数据量大,需要将hive的文件进行分割:   hive的分割方式一,用tasks进行分割: execute immediate 'set mapred.reduce.tasks=5' 这种分割方式有时会失效,可用下面的分割方式,   hive的分割方式二:  execute immediate 'set hive.merge.size.per.task=1283457024';  execute immediate 'set hive.merge.smallfiles.avgsize=1283457024';    
从mysql官网下载mysql文件版本的数据库,安装至win 10环境,需要三个步骤:   1. 配置mysql 的path路径 将mysql的安装目录配置到系统的path中; D:\SoftWare\mysql-8.0.26-winx64\bin;   2,安装mysql 服务,cmd命令行管理员模式运行: 运行mysqld --initialize --insecure 进行初始化操作,数据库没有密码; 安装 MySQL 服务: mysqld --install 运行net start mysql 启动mysql 服务; 如启动服务报错: 修改注册表 \HKEY_ ...
pagehelper分页工具,实现了分页功能,使用起来也很方便   1,在pom.xml文件中增加pagehelper引入,代码如下: <!-- pagehelper --> <dependency>     <groupId>com.github.pagehelper</groupId>     <artifactId>pagehelper-spring-boot-starter</artifactId>     <version>1.2.5</version> </dep ...
Linux系统服务器越来越普及了,就需要我们在工作中掌握一些常用的Linux系统监控的命令,来检查我们开发的代码或编写的shell在处理大文件时对机器资源有没有造成瓶颈。   一、Linux的设备管理相关命令   1,CPU相关,linux的 ...
今天,用STS4.11.1(springboot tools suite 4)开发了一个基于Springboot的测试工程,项目使用了mysql, mybatis,maven技术。首先看工程目录结构,(不能上传图片),直接上代码吧 要新建一个工程,数据库是基础, 使用mysql数据库,在mysql库上建表做数据处理,数据库建库脚本: DROP TABLE emp_info; CREATE TABLE emp_info( emp_id VARCHAR(20) NOT NULL , emp_name VARCHAR(20) NOT NULL , emp_pas ...
Linux或Unix下查看DB2端口号   #查找TCP/IP Service name db2 get dbm cfg | grep -i service #通过上一句命令的输出(如db2c_db2inst1)在/etc/services文件中找对应的端口号 grep db2c_db2inst1 /etc/services #这是你将会看到这么一行从上一句的输出 db2c_db2inst1   50000/tcp #其中50000 就是db2数据库所占用的端口号
SQLState '57011' and errorCode '-964' 查找原因db2 "?sql=0964"   原因:数据库的日志文件已满   解决方法:修改日志文件大小(加大),增加日志文件个数,增加辅助日志文件个数(三个修改参数可以任意选择)   查看数据库的配置参数:db2 "get db cfg for <dbname>  |grep LOG"          日志文件大小(4KB)  (LOGFILSIZ) = 1024 (每个日志文件大小为1024*4KB=4MB)          主日志文件的数目    ...
数据量今后会很大/你无法预测 数据量会多大,建议换postgresql. mysql 在一定量数据后(一般观点是 mysql 单表 200-300万 时性能最好,数据再多性能就开始下降),性能下降很快,且大数据量情况下,mysql 稳定性/数据可靠性是问题。 postgresql 8.2 的官方说明如下: http://www.postgresql.org/about/ QUOTE: Limit Value Maximum Database Size Unlimited Maximum Table Size 32 TB Maximum Row Size 1.6 TB Maximu ...
当我们在java中要调用C/C++程序的函数时,就需要用到jni技术。 开发环境:aix 本人写了一个测试,步骤如下: 1。新建HelloWorld.java类 public class HelloWorld {   static   {     try     {       //此处即为本地方法所在链接库名       System.loadLibrary("HelloWorld");     }catch(UnsatisfiedLinkError e){       System.err.println( "不能加载dll文件:\n " +e.toS ...
前些天, 在网上看到ubuntu的linux操作系统,下了一人,安装后觉得还不错.还可以运行QQ,及MSN等聊天工具 现将自己的操作步骤在这里做一个简单的介绍,便于大家分享. ubuntu linux的下载: http://www.ubuntu.com/download 安装后的设置:(这个过程可能比较慢.中间的操作系统的升级可以跳过) http://wiki.ubuntu.org.cn/%E5%BF%AB%E9%80%9F%E8%AE%BE%E7%BD%AE%E6%8C%87%E5%8D%97/EdgyEft jdk的安装及环境变量的设置: 下载Java SDK sudo apt ...
试写了一个spring+hibernate+struts的例子,在开发中做了前后台的划分,在运行中遇到了一些问题,现将问题总结一下。希望能给其它朋友有所帮助(后附例程) 开发工具easyeclipse, struts 1.2.9,my sql 5.0,tomcat5.0.28 struct-cofig.xml的action部分修改如下:   <action-mappings>   <action path="/userAction"   name = "userForm"   scope = "reques ...
Global site tag (gtag.js) - Google Analytics