java解析大容量的xml，插入mysql数据库问题求解(真的不简单)

0 0

java解析大容量的xml，插入mysql数据库问题求解(真的不简单)25

各位你们好，小弟今年刚毕业，学习java不久，到一家小公司上班，boss给我的任务是从xml文件中解析出表名、字段名、以及字段的值，把他插入到mysql相同的表中去，他设计的表呢有个问题，（1）数据库表中字段比我解析的字段多，有些字段我这个xml没有，这好说，不插入就行了，（2）字段比我解析出来的字段少，这就麻烦了，我如何插入数据库呢？哦我用的是jdbc xml文件目前是40M ,过几天可能会有更大，mysql的表示200多个，介于问题二苦恼了好几天不会解决求大神帮忙。再次谢过，我积分不多希望别介意
xml部分信息

<?xml version="1.0" encoding = "gbk"?>
<rdf:RDF xml:base="nari" xmlns:rdf="http://www.w3.org/1999/02/22-rdf-syntax-ns#" xmlns:cim="http://iec.ch/TC57/2003/CIM-schema-cim10#" xmlns:cimNARI="http://www.naritech.cn/CIM/ext-schema#">
<cim:SubControlArea rdf:ID="209000001">
        <cim:Naming.name>乐平市供电公司</cim:Naming.name>
        <cimNARI:SubControlArea.areaNo>1</cimNARI:SubControlArea.areaNo>
        <cimNARI:SubControlArea.recordApp>2031647</cimNARI:SubControlArea.recordApp>
        <cimNARI:SubControlArea.MemberOf_ControlArea rdf:resource="#209000007"/>
</cim:SubControlArea>
<cim:BaseVoltage rdf:ID="200000003">
        <cimNARI:BaseVoltage.name>110</cimNARI:BaseVoltage.name>
        <cim:BaseVoltage.nominalVoltage>110.000000</cim:BaseVoltage.nominalVoltage>
        <cimNARI:BaseVoltage.nominalI>0.000000</cimNARI:BaseVoltage.nominalI>
        <cimNARI:BaseVoltage.v_exm>132.000000</cimNARI:BaseVoltage.v_exm>
        <cimNARI:BaseVoltage.mva_exm>305.000000</cimNARI:BaseVoltage.mva_exm>
</cim:BaseVoltage>
<cim:Substation rdf:ID="210000048">
        <cim:Naming.name>饶丰变</cim:Naming.name>
        <cim:Naming.aliasName>饶丰变</cim:Naming.aliasName>
        <cimNARI:Substation.substationType rdf:resource="http://www.naritech.cn/CIM/ext-schema#SubstationType.trans"/>
        <cimNARI:Substation.recordApp>2031647</cimNARI:Substation.recordApp>
        <cimNARI:Substation.MaxBaseVoltage rdf:resource="#200000004"/>
        <cim:Substation.MemberOf_SubControlArea rdf:resource="#209000003"/>
</cim:Substation>
<cim:Measurement rdf:ID="03060009610010">
        <cim:Naming.name>马302过流II段</cim:Naming.name>
        <cim:Measurement.MeasurementType rdf:resource="#372000022"/>
        <cimNARI:Measurement.RelaySignal rdf:resource="#306000961"/>
        <cim:Measurement.MemberOf_PSR rdf:resource="#210000065"/>
</cim:Measurement>
<cim:Measurement rdf:ID="03070020190010">
        <cim:Measurement.maxValue>0.000000</cim:Measurement.maxValue>
        <cim:Measurement.minValue>0.000000</cim:Measurement.minValue>
        <cim:Naming.name>茶山变_10kV天鹅一路线线电压BC相    </cim:Naming.name>
        <cim:Measurement.MeasurementType rdf:resource="#372000032"/>
        <cimNARI:Measurement.MeasValue rdf:resource="#307002019"/>
        <cim:Measurement.MemberOf_PSR rdf:resource="#210000083"/>
</cim:Measurement>
</rdf:RDF>

就以第一个节点为例吧，SubControlArea是表名，ID、name、areaNo、recordApp、resource是字段。

java代码（我现在能解析出表名，字段不会弄，会的话给我说下谢谢）

/*
* To change this template, choose Tools | Templates
* and open the template in the editor.
*/
package ly.pconline.com.cn.utils.xml.dom4j;

import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.io.InputStream;
import java.util.Iterator;
import java.util.List;
import org.dom4j.Document;
import org.dom4j.Element;
import org.dom4j.ElementHandler;
import org.dom4j.ElementPath;
import org.dom4j.io.SAXReader;

/**
*
* @author liyong
*/
public class XindexReader1 {

    public static int flag = 0;

    public static void main(String[] args) {
        XindexReader1 x = new XindexReader1();
//        x.parseXml();
        x.parseXml2();
    }

    public void parseXml() {
        SAXReader saxReader = new SAXReader();
        InputStream in = null;

        try {
            File file = new File("E:\\work123.xml");
            in = new FileInputStream(file);
            ElementHandler myHandler = new ElementHandler() {
                @Override
                public void onStart(ElementPath ep) {
//                    System.out.println("www");
                }

                @Override
                public void onEnd(ElementPath ep) {
                    Element element = ep.getCurrent(); // 获得当前节点
                    String en = element.getName();
                    System.out.println(en);
                }
            };
            saxReader.addHandler("/RDF", myHandler);
            saxReader.addHandler("/RDF/Substation", myHandler);
//            saxReader.resetHandlers();
            saxReader.read(in);
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            if (in != null) {
                try {
                    in.close();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        }
    }

    public void parseXml2() {
        SAXReader saxReader = new SAXReader();
        InputStream in = null;
        try {
            File file = new File("E:\\work123.xml");
            in = new FileInputStream(file);
            Document doc = saxReader.read(in);
            List modelList = doc.selectNodes("//RDF");//以每个model划分
            Iterator its = modelList.iterator();
            int i = 0;
            while (its.hasNext()) {
                Element element = (Element) its.next();
                Iterator it = element.elementIterator();
                while (it.hasNext()) {
                    Element et = (Element) it.next();
                    String key = et.getName();
                    i++;
                    System.out.println(key + ":" + i);
                }

            }
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            if (in != null) {
                try {
                    in.close();
                } catch (IOException e) {
                }
            }
        }

    }
}

哦，我大概说下我的苦恼吧，xml解析出来应该是一表为单位，然后从mysl中的表信息去核对，把我解析多的字段去除，然后插入进去。不知道我的思路可否正确

2013年8月24日 14:51

401554998
5
0 0 2

2个答案按时间排序按投票排序

0 0

解析带命名空间的xml可以参考：http://zxs19861202.iteye.com/blog/745032，既然是mysql数据库，可以去information_schema.columns表中获取表所有的字段，

select * from information_schema.`COLUMNS` where table_name='hrt_train_main';

，其余的就不用一一说明了吧？

2013年8月25日 13:29

zyn010101
2795
2 3 156

2条评论

0 0

有就插入，没有就把对应的字段设置为默认值。

2013年8月24日 16:50

freezingsky
159
1 1 16

1条评论

已解决问题

未解决问题

排行榜

查看全部排名>>