解析Txt文件的过程

jvincent

浏览: 186264 次
性别:
来自: 北京

最近访客更多访客>>

sd445419855

a5980038

sll1097892736

G_sirius

博主相关

博客

微博

相册

留言

关于我

文章分类

社区版块

存档分类

博客分类：

Java

Bean Spring XML 百度 JDK

解析Txt文件的过程

项目需要解析用逗号(,)分隔的文本文件,然后将其中的数据转换成xml文件进行导入到财务系统中....
考虑到以后可能文件格式会变化,因此使用了动态的创建方法,即通过格式文件来动态解析txt文件..本程序使用了apache的Digester来动态生成格式文件,使用CGLib动态生成目标类.步骤如下:
1、定义文件和字段的元数据格式,如果出现其他的文件格式只需要实现元数据接口即可..接口代码:

java 代码

public interface FileMeta {
public String getName();
public List<fieldmeta></fieldmeta> getFieldMeta();
}
public interface FieldMeta {
public String getName();
public String getType();
public int getLength();
public int getScale();
public String getComment();
public boolean isAllowNull();
}

通过两个接口描述文件的属性已经字段格式..

本例使用的是逗号分隔,如果出现其他分隔符怎么办?为此,定义了一个分隔符接口:LineSpliter

java 代码

public interface LineSpliter {
public String getSpliterRegx();
public String[] split(String lineData);
}

getSpliterRegx()同于返回当前的分隔符,split()用户处理各行文本数据.
此处缺省实现了此接口,用于逗号分隔DefaultLineSpliter,定义如下:

java 代码

public class DefaultLineSpliter implements {
public String defaultSpliterRegx = ",";
public String getSpliterRegx() {
return defaultSpliterRegx ;
}
public String[] split(String lineData) {
return StringUtils.splitPreserveAllTokens(lineData,defaultSpliterRegx );
}
}

这里使用apache的Lang包进行处理,没有使用JDK的String的split方法,因为jdk的实现会将末尾空的字段过滤掉,造成数据减少...
比如:如果行数据为aaa,bbb,,,,, 通过jdk的实现会返回aaa和bbb,而通过Lang包处理会返回包括后面空的字段.

2、接下来使用DigesterDigester包根据xml规则生成对象..
首先需要了解digester包的使用方法,这里简单的说一下:disgeter可以根据一定的规则将xml文件解析成一组对象...具体这里,我先定义
一个规则文件,

xml 代码

<digester-rules>
<pattern value='XXXFileMeta'>
<object-create-rule classname="com.xxx.file.DefaultFileMeta"/>
<set-properties-rule/>
<pattern value="field">
<object-create-rule classname="com.xxx.file.DefaultFieldMeta"/>
<set-properties-rule/>
<bean-property-setter-rule pattern="beanname1"/>
<bean-property-setter-rule pattern="beanname2"/>
<bean-property-setter-rule pattern="beanname3"/>
<bean-property-setter-rule pattern="beanname4"/>
pattern>
digester-rules>

这就是一个简单的规则定义,具体含义这里不详细讲了,想了解的可以给我回帖...
接着定义缺省的文件元数据文件,格式如下:

xml 代码

<DefaultFileMeta name="com.xxx.file.DefaultFileMeta">
<field>
<beanname1>Codebeanname1>
<beanname2>Namebeanname2>
<beanname3>Datebeanname3>
<beanname4>Remakebeanname4>
field>
DefaultFileMeta>

最后实例化digester对象,加载规则文件,解析文件元数据文件,则会动态生成根据元数据文件解析的格式定义.

代码如下:GeneratorObject.createObject(){}
初始化CGLib

java 代码

@SuppressWarnings("unchecked")
private void init(Class target, FileMeta fileMeta) {
List<fieldmeta></fieldmeta> fields = fileMeta.getFieldMeta();
String[] getters = new String[fields.size()];
String[] setters = new String[fields.size()];
Class[] types = new Class[fields.size()];
try {
for (int i=0; i < fields.size(); i++) {
FieldMeta fieldMeta = fields.get(i);
getters[i] = "get" + ConverterUtils.upperCaseFirstChar(fieldMeta.getName());
setters[i] = "set" + ConverterUtils.upperCaseFirstChar(fieldMeta.getName());
types[i] = Class.forName(fieldMeta.getType());
}
} catch(ClassNotFoundException e) {
logger.error("类没有找到.." + e.getMessage());
}
this.bulkBean = BulkBean.create(target, getters, setters, types);
}

根据指定的目标类动态生成对象

java 代码

@SuppressWarnings("unchecked")
private Object createObject(Class target, FileMeta fileMeta, Object[] values) {
Object targetObject = null;
try {
targetObject = target.newInstance();
} catch (Exception e){
logger.error("创建对象出错,目标类-->" + target.getName(), e);
}
bulkBean.setPropertyValues(targetObject, values);
return targetObject;
}

解析文本文件

java 代码

@SuppressWarnings("unchecked")
public List createObjects() {
//初始化BulkBean
init(targetClass, fileMeta);
List result = new ArrayList();
LineIterator iterator = null;
try {
iterator = FileUtils.lineIterator(this.dataFile, DEF_ENCODING);
while(iterator.hasNext()) {
String line = iterator.nextLine();
//过滤掉数据文件中的空行
if (StringUtils.isBlank(line)) {
continue;
}
Object[] values = this.parseLine(line, fileMeta);
Object object = createObject(this.targetClass, fileMeta, values);
result.add(object);
}
} catch (IOException e) {
logger.error("读取文件名出错!-->" + this.dataFile.getName(), e);
} finally {
LineIterator.closeQuietly(iterator);
}
return result;
}

最终返回解析好的文本文件对象列表..
本例综合使用了apache的代码包,灵活实现了文本文件的解析...

分享到：

IE中指定使用自定义的JRE?? | Derby常用操作

2007-11-05 17:24
浏览 5749
评论(13)
论坛回复 / 浏览 (12 / 12981)
分类:企业架构
查看更多

13 楼 godson_2003 2007-11-30

楼主能不能把.txt转xml的代码贴全了啊？

谢谢

12 楼 godson_2003 2007-11-18

好东西

对楼主的东西很感兴趣

楼主能不能发个demo上来啊

11 楼 kusix 2007-11-07

<pattern value="dicts">
			<object-create-rule classname="java.util.ArrayList" />
			<pattern value="dict">
				<object-create-rule classname="test.digester.Dict" />
				<bean-property-setter-rule pattern="dictName" />
				<set-next-rule methodname="add" />
			</pattern>
			<set-next-rule methodname="setDicts" />
		</pattern>

List很好搞啊，Map就很困难了，必须要用变通的办法才行

set-next-rule居然不支持多个参数，有点郁闷

10 楼 jvincent 2007-11-07

不一定非要是Map啊,List也可以.....

9 楼 kusix 2007-11-07

非的把对象搞成

public void addDict(Dict dict) {
		dictMap.put(dict.getDictName(),dict);
	}

这样的，才行，感觉很别扭。

8 楼 kusix 2007-11-07

试了一下digester，找了半天，没发现怎么调用Map的put方法，

也就是说，<set-next-rule methodname="add"/>

这个标签，只能调用参数数目是1的方法，怎么才能调用1个以上参数的方法呢？

call-method-rule 貌似只能调用自身的方法，无法调用父亲的方法

7 楼 jvincent 2007-11-06

kusix 写道

从LZ这学到一招了，Digester，不错，回去试试以前不想自己写配置文件的解析，都是拿spring来做的。现在也在做这方面的东西，感觉TXT如果只是分割符变化了，还比较好对付，但是如果是格式彻底变了呢，比如行列的位置都变换了，你抽象的这个构架该怎么对付呢？

如果行列的位置变了,只需要在xml配置文件里面调整一下顺序就可以了...这也是digester的主要作用,动态生成格式文件...

6 楼 Tom是只猫 2007-11-06

Digester解析XMl用的

5 楼 kusix 2007-11-06

从LZ这学到一招了，Digester，不错，回去试试

以前不想自己写配置文件的解析，都是拿spring来做的。

现在也在做这方面的东西，

感觉TXT如果只是分割符变化了，还比较好对付，

但是如果是格式彻底变了呢，比如行列的位置都变换了，

你抽象的这个构架该怎么对付呢？

4 楼 jvincent 2007-11-06

coolnight 写道

呃有没有搞错这么简单的任务写了这么多代码

主要是为了解决文件格式的变化给系统带来的麻烦...如果针对每种格式文本文件都实现一个解析方法，难道不怕麻烦吗??

3 楼 coolnight 2007-11-06

呃有没有搞错这么简单的任务写了这么多代码

2 楼 raindew 2007-11-05

楼主笔误,应该是Digester吧.呵呵.

1 楼 ldjsyl 2007-11-05

disgeter包，这个包是什么啊？百度和google都没搜到

发表评论

您还没有登录,请您登录后再发表评论

最近访客更多访客>>

博主相关

文章分类

社区版块

存档分类

最新评论