之前都是直接读取xml文件的,可是这次做东西对方只提供一个URL返回xml,我需要定时读取。
解决方案:
1:通过URL和URLConnection来解析改URL,使其返回inputstream
2:用dom4j解析该inputstream,将解析的数据封装成需要的对象,来存入一个List或Map
3:定义一个Controller来执行该过程
4:用crontab来执行定时任务(linux下,执行crontab -e进行编辑)
@Get("/load")
public String loadDataFromXmlByDate(Invocation inv, @Param("begin") Date datebegin,
@Param("end") Date dateend) {
String begin = DateTimeUtil.getFormatDateTime(datebegin, "yyyyMMdd");
String end = DateTimeUtil.getFormatDateTime(dateend, "yyyyMMdd");
// String ip = inv.getRequest().getRemoteAddr();
String URL = WbConstant.URL + WbConstant.URL_DATE_BEGIN + begin
+ WbConstant.URL_DATE_END + end;
List<Statistic> stats = parseXML(URL);
for (int i = 0; i < stats.size(); i++) {
Statistic st = stats.get(i);
st.setTime(datebegin);
//通过service层来执行逻辑并存储到DB
IResult result = dataService.createStatistic(st);
if (result.isSuccess()) {
if (logger.isInfoEnabled()) {
logger.info("insert data into db from xml success");
}
} else {
if (logger.isInfoEnabled()) {
logger.info(result.getResult("error").toString());
}
}
}
return "ok";
}
/**
* 加载默认日期的xml
* @param inv
* @return
*/
@Get("/loadDefault")
public String defaultLoadDateFromXml(Invocation inv) {
Date today = new Date();
Calendar cal = Calendar.getInstance();
cal.add(Calendar.DATE, -1);
Date yesterday = cal.getTime();
return loadDataFromXmlByDate(inv, yesterday, today);
}
private List<Statistic> parseXML(String URL) {
long beginTime = System.currentTimeMillis();
List<Statistic> xmlList = new ArrayList<Statistic>();
SAXReader reader = new SAXReader();
URL url = null;
try {
url = new URL(URL);
} catch (MalformedURLException e) {
logger.error("给定的URL生成错误", e);
}
try {
URLConnection urlConnection = url.openConnection();
InputStream urlIn = urlConnection.getInputStream();
doc = reader.read(urlIn);
} catch (IOException e) {
logger.error("IOException:通过URL-openConnection-getInputStream时,错误",
e);
} catch (DocumentException e) {
logger.error("DocumentExcepion:SAXReader解析inputsream为Document时,错误",
e);
}
Element root = doc.getRootElement();
for (Iterator<Element> it = root.elementIterator(); it.hasNext();) {
Element e = (Element) it.next();
String date = e.elementText("date");
String pid = e.elementText("pid");
String data = e.elementText("data");
//封装数据为对象
Statistic stat = new Statistic();
stat.setHomeCount(Integer.parseInt(data));
stat.setPid(pid);
stat.setTime(DateTimeUtil.getFormatDate(date));
xmlList.add(stat);
}
long endTime = System.currentTimeMillis();
System.out.println("共花费时间为" + (endTime - beginTime) + "ms");
return xmlList;
}
上面的controller写完了,就可以用crontab来执行定时任务了,该controllerURL为,xxx.com/loadDefault则,定为每天下午2点钟执行一次如下
00 14 * * * wget -a /data/logs/wb/xml.log http://xxx.com/loadDefault
OK了,可以了
分享到:
相关推荐
本项目涉及的主题是“调用天气接口存入数据库—MySQL”,这是一套实现从网络获取天气预报数据并将其存储到MySQL数据库的流程。下面我们将详细探讨这个过程中的关键知识点。 首先,我们需要了解“天气接口”。这是一...
将XML数据解析后,如果需要存入数据库,那么你需要了解数据库操作,如SQL语句的编写,以及Java的JDBC API来与数据库交互。 【webService学习资料】 WebService是一种基于HTTP的、平台无关的、用于不同应用系统之间...
88.如何将图像存入到数据库中 89.如何从数据库中调用显示图像 90.如何用ASP读取Excel文件 91.怎样将数据从Excel导入到SQL Server中 92.怎样将数据从Access导入到SQL Server中 94.如何对Access数据库进行压缩 96.如何...
103 <br>0168 使用Message.Show输出用户信息 104 <br>5.3 图片数据处理技巧 104 <br>0169 如何将图片存入数据库 104 <br>0170 如何将图片从数据库中读取出来 104 <br>0171 如何只允许输入...
资源内项目源码是来自个人的毕业设计,代码都测试ok,包含源码、数据集、可视化页面和部署说明,可产生核心指标曲线图、混淆矩阵、F1分数曲线、精确率-召回率曲线、验证集预测结果、标签分布图。都是运行成功后才上传资源,毕设答辩评审绝对信服的保底85分以上,放心下载使用,拿来就能用。包含源码、数据集、可视化页面和部署说明一站式服务,拿来就能用的绝对好资源!!! 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、大作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.txt文件,仅供学习参考, 切勿用于商业用途。
wrf转mp4播放器1.1.1
内容概要:本文档详细介绍了如何在Simulink中设计一个满足特定规格的音频带ADC(模数转换器)。首先选择了三阶单环多位量化Σ-Δ调制器作为设计方案,因为这种结构能在音频带宽内提供高噪声整形效果,并且多位量化可以降低量化噪声。接着,文档展示了具体的Simulink建模步骤,包括创建模型、添加各个组件如积分器、量化器、DAC反馈以及连接它们。此外,还进行了参数设计与计算,特别是过采样率和信噪比的估算,并引入了动态元件匹配技术来减少DAC的非线性误差。性能验证部分则通过理想和非理想的仿真实验评估了系统的稳定性和各项指标,最终证明所设计的ADC能够达到预期的技术标准。 适用人群:电子工程专业学生、从事数据转换器研究或开发的技术人员。 使用场景及目标:适用于希望深入了解Σ-Δ调制器的工作原理及其在音频带ADC应用中的具体实现方法的人群。目标是掌握如何利用MATLAB/Simulink工具进行复杂电路的设计与仿真。 其他说明:文中提供了详细的Matlab代码片段用于指导读者完成整个设计流程,同时附带了一些辅助函数帮助分析仿真结果。
国网台区终端最新规范
《基于YOLOv8的智慧农业水肥一体化控制系统》(包含源码、可视化界面、完整数据集、部署教程)简单部署即可运行。功能完善、操作简单,适合毕设或课程设计
GSDML-V2.33-LEUZE-AMS3048i-20170622.xml
微信小程序项目课程设计,包含LW+ppt
微信小程序项目课程设计,包含LW+ppt
终端运行进度条脚本
幼儿园预防肺结核教育培训课件资料
python,python相关资源
《基于YOLOv8的智慧校园电动车充电桩状态监测系统》(包含源码、可视化界面、完整数据集、部署教程)简单部署即可运行。功能完善、操作简单,适合毕设或课程设计
deepseek 临床之理性软肋.pdf
SM2258XT量产工具(包含16种程序),固态硬盘量产工具使用
RecyclerView.zip
水务大脑让水务运营更智能(23页)