- 浏览: 24973 次
文章分类
- 全部博客 (35)
- linux (0)
- basedaoimpl 1 (0)
- basedao (1)
- basedaoimpl 2 (0)
- basedaoimpl 3 (0)
- basedaoimpl 4 (0)
- basedaoimpl 5 (0)
- basedaoimpl 6 (0)
- basedaoimpl 7 (0)
- htmlservlet1 (0)
- htmlservlet2 (0)
- htmlservlet3 (0)
- htmlservlet4 (0)
- excle1 (0)
- excle2 (0)
- pdf1 (0)
- pdf2 (0)
- servletutil1 (0)
- servletutil2 (0)
- servletutil3 (0)
- ziputil1 (0)
- ziputil2 (0)
- 项目管理以及统计工具 (0)
- linux命令总结 (0)
- 经典回答 (0)
- TR点设置 (0)
- TR点设置2 (0)
- 枚举 (1)
- tomcat5.5.xx以上 (1)
- 标准的写法遍历Map (1)
- 线程安全 (1)
- sql (1)
- 转义字符 (1)
- 经典美文1 (1)
- 经典美文2 (1)
- 经典美文3 (1)
- webservice以及线程应用 (1)
- webservice以及线程应用2 (1)
- InitializingBean应用 (1)
- 线程应用 (1)
- sqlloader1 (1)
- sqlloader2 (1)
- sqlloader3 (1)
- sqlloader4 (1)
- sqlloader5 (1)
- sqlloader6 (1)
- sqlloader7 (1)
- sql上报数据1 (1)
- sql上报数据2 (1)
- sql上报数据3 (1)
- sql上报数据4 (1)
- sql上报数据5 (1)
- sql上报数据6 (1)
- iputil1 (1)
- iputil2 (1)
- iputil3 (1)
- oracle sql1 (1)
- oracle sql2 (1)
- 线程池1 (0)
- 线程池3 (0)
- 日期处理1 (0)
- 日期处理2 (0)
- 日期处理3 (0)
- 日期处理4 (0)
- iputil4 (0)
- iputil5 (0)
- iputil6 (0)
- 日期处理6 (0)
- 日期处理7 (0)
- 日期处理8 (0)
- protocolList (0)
- DATELONG2TEXT (0)
- Dateinfo5 (0)
- Dateinfo6 (0)
- Dateinfo7 (0)
- Dateinfo8 (0)
- Dateinfo9 (0)
- Dateinfo10 (0)
- Dateinfo11 (0)
- Dateinfo12 (0)
- 处理ifream滚动条 (0)
- 工具面试题 (0)
- oracle1 (0)
- 批量插入数据 (0)
- oracle2 (0)
- oracle3 (0)
- oracle4 (0)
- oracle5 (0)
- oracle6 (0)
- oracle7 (0)
- oracle8 (0)
- oracle9 (0)
- oracle11 (0)
- oracle12 (0)
- oracle13 (0)
- oracle14 (0)
- oracle15 (0)
- http://zhang-xzhi-xjtu.iteye.com/category/133743 (1)
- 绑定变量 (0)
- 绑定变量2 (0)
- 绑定变量3 (0)
- 合理使用排序 (0)
- Jconsole 内存1 (0)
- Jconsole 内存2 (0)
- Jconsole 内存3 (0)
- io nio (0)
- nio (0)
- Batch (0)
- fetchsize (0)
- fetchsize2 (0)
- 面试题 (0)
- ExecutorService线程池 (0)
- 阻塞队列 (0)
- 简单阻塞队列实现 (0)
- 简单阻塞队列实现2 (1)
- CountDownLatch 结合线程应用 (0)
- 线程池 (0)
- 阻塞队列2 (0)
- LockSupport park unpark interrupt notifyAll wait等关系区别 (0)
- LockSupport park unpark interrupt notifyAll wait等关系区别1 (0)
- LockSupport park unpark interrupt notifyAll wait等关系区别2 (0)
- nio FileChannel (1)
- Nio Charset (0)
- nio 学习 (0)
- 杨化龙 (0)
- 排序1 (0)
- 排序2 (0)
- tomcat内存配置 (0)
- 字符串转换16进制数表示的字符串 (0)
- Dpi.report.common.TopnEdit (0)
- Dpi.report.common.TopnEdit2 (0)
- Dpi.report.common.TopnEdit3 (0)
- Dpi.report.common.TopnEdit4 (0)
- webservice调用 (0)
最新评论
private boolean ociSqlldr(String path, AbstractSqlLoad sqlload)
{
// 定义处理状态
boolean result = false;
try
{
sqlload.setDirectoryFile(getSqlLoadDirectory(), fileName,
getColumn(path));
// 设置用户名、密码、主机IP等参数
sqlload.setUseId(uName, passwd, getOraNetServerName());
// SQLLOAD 加载
result = sqlload.preform();
}
catch (Throwable e)
{
logger.error("Sqlload datafile " + this.fileName + " failed", e);
}
return result;
}
/**
* 使用调用oracle sqlldr工具的方式把数据入库。
* @param tableName 对应的数据库表名
* @param sqlldrFilePath sqlldr数据文件路径。
* @return 入库成功返回true,否则false
*/
private boolean oracleSqlldr(String tableName, String sqlldrFilePath,
AbstractSqlLoad sqlload)
{
// 定义处理状态
boolean result = false;
// 设置用户名、密码、主机IP等参数
sqlload.setUseId(uName, passwd, getOraNetServerName());
// 生成控制文件
GenOraCtrlFile writeCtl = new GenOraCtrlFile();
try
{
ctlFileName = (writeCtl.writeCtl(new File(getSqlLoadDirectory(),
fileName).getPath(), tableName)).getPath();
sqlload.setHome(DASProperties.getOracle_home());
sqlload.setCtlFile(ctlFileName);
// 获取日志文件名
/** SqlLoad日志文件名 */
String logFileName = configOracleLogFile();
// 设置要生成的log日志文件
sqlload.setLogFile(logFileName);
// 设置要生成的bad文件
sqlload.setBadFile(configOracleBadFile());
if (db.equalsIgnoreCase(SCHEMA_DPI_RPT))
{
// 实时流量 设置Direct=false
sqlload.setDirect(false);
}
else
{
// 默认设置Direct=true
sqlload.setDirect(true);
}
// SQLLOAD 加载
result = sqlload.preform();
// 如果数据文件入库失败,把sqlLoad的日志文件写到DAS日志文件中
if (!result)
{
this.readSqlLoadErrLog(logFileName);
}
/** 删除SqlLoad日志文件 */
if (isNeedDelLogFile())
{
File logFile = new File(logFileName);
if (!FileUtil.delete(logFile))
{
logger.error("delete log file failed! the file name is "
+ logFile.getName());
}
}
// 判断load子进程是否挂死或超时
if (sqlload.isTimeOut())
{
throw new IllegalThreadStateException(
"The oracle sqlldr prcess is not determined!");
}
}
catch (Throwable e)
{
logger.error("Sqlload datafile " + this.fileName + " failed", e);
}
return result;
}
{
// 定义处理状态
boolean result = false;
try
{
sqlload.setDirectoryFile(getSqlLoadDirectory(), fileName,
getColumn(path));
// 设置用户名、密码、主机IP等参数
sqlload.setUseId(uName, passwd, getOraNetServerName());
// SQLLOAD 加载
result = sqlload.preform();
}
catch (Throwable e)
{
logger.error("Sqlload datafile " + this.fileName + " failed", e);
}
return result;
}
/**
* 使用调用oracle sqlldr工具的方式把数据入库。
* @param tableName 对应的数据库表名
* @param sqlldrFilePath sqlldr数据文件路径。
* @return 入库成功返回true,否则false
*/
private boolean oracleSqlldr(String tableName, String sqlldrFilePath,
AbstractSqlLoad sqlload)
{
// 定义处理状态
boolean result = false;
// 设置用户名、密码、主机IP等参数
sqlload.setUseId(uName, passwd, getOraNetServerName());
// 生成控制文件
GenOraCtrlFile writeCtl = new GenOraCtrlFile();
try
{
ctlFileName = (writeCtl.writeCtl(new File(getSqlLoadDirectory(),
fileName).getPath(), tableName)).getPath();
sqlload.setHome(DASProperties.getOracle_home());
sqlload.setCtlFile(ctlFileName);
// 获取日志文件名
/** SqlLoad日志文件名 */
String logFileName = configOracleLogFile();
// 设置要生成的log日志文件
sqlload.setLogFile(logFileName);
// 设置要生成的bad文件
sqlload.setBadFile(configOracleBadFile());
if (db.equalsIgnoreCase(SCHEMA_DPI_RPT))
{
// 实时流量 设置Direct=false
sqlload.setDirect(false);
}
else
{
// 默认设置Direct=true
sqlload.setDirect(true);
}
// SQLLOAD 加载
result = sqlload.preform();
// 如果数据文件入库失败,把sqlLoad的日志文件写到DAS日志文件中
if (!result)
{
this.readSqlLoadErrLog(logFileName);
}
/** 删除SqlLoad日志文件 */
if (isNeedDelLogFile())
{
File logFile = new File(logFileName);
if (!FileUtil.delete(logFile))
{
logger.error("delete log file failed! the file name is "
+ logFile.getName());
}
}
// 判断load子进程是否挂死或超时
if (sqlload.isTimeOut())
{
throw new IllegalThreadStateException(
"The oracle sqlldr prcess is not determined!");
}
}
catch (Throwable e)
{
logger.error("Sqlload datafile " + this.fileName + " failed", e);
}
return result;
}
相关推荐
SQL Server数据库远程数据上报策略及应用研究 本文主要介绍了SQL Server数据库远程数据上报策略及其应用研究,着重阐述了该技术的要点。该技术是基于《山西省养路费征收IC卡网络管理系统》的开发经验,旨在解决远程...
"SQL查询在高校就业签约数据上报中的应用" 本文旨在探讨 SQL 查询技术在高校毕业生就业签约数据上报工作中的应用。文章首先介绍了 SQL 查询技术的特点,即高效、易修改、简单易用,能够灵活地从繁重的数据维护和...
3. **数据库交互**:数据上报系统的核心功能之一就是存储和管理数据。ASP可以连接到各种数据库,如Access、SQL Server等,使用ADO(ActiveX Data Objects)来执行SQL查询,插入、更新或删除数据。例如,Connection...
IGT-SER系列智能网关模块,支持各种PLC、智能仪表、远程IO与数据库之间双向通讯,既可以读取设备的数据上报到SQL数据库,也可以从数据库查询数据后写入到设备;数据库软件支持MySQL、SQLServer、PostgreSQL。 IGT-...
2_甘肃数据上报初始化.sql
3. **数据库准备**:在SQL Server中创建数据库和表,用于存储来自PLC的数据。表结构应与PLC中的数据变量相对应,以便正确地映射和存储数据。 4. **选择通信方式**:有几种方法可以实现PLC与数据库之间的数据传输,...
### 数据分析插件FineReport上报模板设计 #### 模板设计概述 在现代企业运营过程中,数据成为支撑决策的关键因素之一。为了确保数据的有效性和准确性,FineReport提供了一种高效的数据上报机制,允许不同层级的...
标题“自动采集系统数据并上报数据中心.zip”暗示了一个利用Go编程语言实现的自动化数据采集和上传系统。这个系统设计用于从各个系统或设备中收集数据,并将这些数据发送到一个集中式的数据中心进行分析和存储。Go...
自定义数据上报接口顾名思义就是个人可以根据数据上报接口要求书写Sql语句或创建视图植入软件内并自动生成所需的文件进行上报。作者根据多年医疗数据上报接口的开发经验创作了此款以Oracle数据库为主的简单实用的...
标题中的“PLC变量配置工具软件-SQL数据库上报与查询的信息化智能网关”指的是一个专为自动化控制领域的专业人士设计的软件,它允许用户配置PLC(可编程逻辑控制器)的变量,使其能够与SQL数据库进行高效的数据交换...
该项目是一款基于Node.js平台的Java语言汇总数据上报存储过程设计源码,总计包含268个文件,涵盖129个SQL脚本、66个Markdown文档、27个文本文件、18个JSON文件、8个Java源代码文件、7个XML文件、5个SQL文件、3个PNG...
Apache Atlas的Hive Hook是在Hive执行器中插入的一个组件,它能够在Hive操作执行前后捕获元数据变更信息,并将这些信息上报给Atlas。通过这种方式,当Spark SQL通过Hive接口查询或修改数据时,Hive Hook可以记录下...
漏洞产生通常是由于程序员编写了不安全的代码,比如在SQL语句中直接拼接用户输入的数据,未能对输入数据进行严格的过滤和转义,或者未使用参数化查询等安全措施。 3. **漏洞影响范围** 根据文件中描述,CmsEasy V...
在标签中提到的“HIS”通常指的是医疗信息系统(Hospital Information System),这暗示了这种XML生成技术可能在医疗领域有实际应用,比如用于数据上报、电子病历交换等。 压缩包内的“sql生成xml”可能是包含具体...
C#动物疾病上报预警及防控地理信息... 3、数据统计:包括免疫样品数 免疫样品合格数 免疫样品合格率等统计,可扩展自己的数据。 4、控制面板:模块管理、单位信息、角色信息、用户信息。 5、个人管理:修改密码。
(3)MS SQL Server 2000安装/MSDE2000/MS SQL Server 2005 /MS SQL Server 2008 (4) IE需要升级到6.0以上。 (仅对Windows 2000的各个版本) 2.Windows server 2003/2008 (1)IIS安装 (2)MS SQL Server ...
数据可视化报表系统源码,一款数据可视化报表系统,含报表和大屏设计,像搭建积木一样在线设计报表!功能涵盖,数据报表、打印设计、图表报表、大屏设计等! Web 版报表设计器,类似于excel操作风格,通过拖拽完成...
数据产品经理需要了解数据上报的流程,包括数据如何从不同来源收集,如何通过ETL(抽取、转换、加载)处理,以及如何分析这些数据来发现用户行为模式和产品问题。 5. 数据报告的撰写 数据报告是将分析结果汇总并以...
7. **data.sql**:这是一个SQL数据文件,可能包含了初始的数据结构,如创建数据库表,或者预填充的测试数据。用户在安装系统时可能需要导入这个文件来设置数据库。 8. **jb51.net.txt**:这可能是一个记录开发过程...
- **全表扫描的执行计划应上报**:全表扫描效率低下,应寻求优化方案。 - **避免嵌套SELECT语句**:复杂的嵌套可能导致性能问题,尽量简化逻辑。 - **避免SELECT ***:指定具体列名可以提高效率,减少对数据字典...