使用jaxp分割xml文件

前言:

将一个大的xml文件分割成若干个小的xml文件,同事使用python实现过,最近学习java,以此练手使用java的jaxp包实现该功能!

说明:

xml文件(如下)中datas节点的子节点data有若干个,当超出100个的时候,就需要以data节点分割成若干份小的xml文件

<?xml version="1.0" encoding="utf-8" ?>
<root>
    <head>....</head>
    <datas>
        <data>...</data>
        <data>...</data>
        <data>...</data>
        ...
        <!--若干个data节点-->
    </datas>
</root>
思路:

1.获取datas节点的子节点data集合;
2.复制该data节点集合(没有找到相关的复制方法,这里通过遍历data集合将data元素存储到ArrayLisrt中);
3.判断data集合长度,若超过了阈值,则进行分割;
4.每次分割前都需要清除datas节点,并重新创建创建,保证分割的数据准确性;
5.保存分割的xml文件

分割xml的代码(核心):
    //分割文件:当data大于100的时候,将其分割成data小于100的xml
    public static void splitXML(Document document, ArrayList<Node> copyNodeList) {


        // 添加data节点到datas节点下
        int nodesLen = copyNodeList.size();
        
        // 分割的组数:计算可以分成多少组
        int splitTimes = (int) Math.ceil((double) nodesLen / splitSize);

        if (nodesLen >= splitSize) {
            // 外层循环:控制文件分割的次数
            for (int i = 0; i < splitTimes; i++) {
                // 获取datas节点
                Node datasNode = document.getElementsByTagName("datas").item(0);

                // 获取datas节点的父节点
                Node parentDatasNode = datasNode.getParentNode();
                // 清空datas节点,这样就清空了datas节点的所有内容
                parentDatasNode.removeChild(datasNode);

                // 创建datas节点
                Element newDatasNode = document.createElement("datas");

                // 开始位置
                int fromIndex = i * splitSize;
                // 结束位置:通过三目运算符获取结束值
                int toIndex = (i + 1) * splitSize < nodesLen ? (i + 1) * splitSize : nodesLen;
                System.out.println("fromIndex:" + fromIndex + ":toIndex:" + toIndex);
                for (int j = fromIndex; j < toIndex; j++) {
                    newDatasNode.appendChild(copyNodeList.get(j));
                }

                
                // 添加datas节点到父节点上
                parentDatasNode.appendChild(newDatasNode);
                // 文件的回写
                writeXML(document, saveXmlFolder);

            }
        }
    }
完整代码:
/*
      使用jaxp操作xml文件

 */

import org.w3c.dom.Document;
import org.w3c.dom.Element;
import org.w3c.dom.Node;
import org.w3c.dom.NodeList;


import java.io.*;
import java.util.ArrayList;
import java.util.UUID;
import javax.xml.parsers.DocumentBuilder;
import javax.xml.parsers.DocumentBuilderFactory;
import javax.xml.transform.Transformer;
import javax.xml.transform.TransformerFactory;
import javax.xml.transform.dom.DOMSource;
import javax.xml.transform.stream.StreamResult;


public class SplitXMLFile {
    // 文件分割的大小
    private static int splitSize = 100;
    private static String xmlFolder = "src_xml_path.xml";
    private static String saveXmlFolder = "split.xml";

    public static void main(String[] args) throws Exception {
        // 获取根节点
        Document nodeRoot = getRootNode();
        //通过根节点,获取data节点集合,并复制
        ArrayList<Node> copyNodeList = getDataList(nodeRoot);

        // 分割文件:大文件分割为小文件
        splitXML(nodeRoot, copyNodeList);

    }

    //  复制datas节点,为了拿到data数据集合
    public static ArrayList<Node> copyDataList(NodeList nodeList) {
        ArrayList<Node> arrayList = new ArrayList<>();
        for (int i = 0; i < nodeList.getLength(); i++) {
            arrayList.add(nodeList.item(i));

        }
        return arrayList;
    }

    //分割文件:当data大于100的时候,将其分割成data小于100的xml
    public static void splitXML(Document document, ArrayList<Node> copyNodeList) {


        // 添加data节点到datas节点下
        int nodesLen = copyNodeList.size();
        
        // 分割的组数:计算可以分成多少组
        int splitTimes = (int) Math.ceil((double) nodesLen / splitSize);

        if (nodesLen >= splitSize) {
            // 外层循环:控制文件分割的次数
            for (int i = 0; i < splitTimes; i++) {
                // 获取datas节点
                Node datasNode = document.getElementsByTagName("datas").item(0);

                // 获取datas节点的父节点
                Node parentDatasNode = datasNode.getParentNode();
                // 清空datas节点,这样就清空了datas节点的所有内容
                parentDatasNode.removeChild(datasNode);

                // 创建datas节点
                Element newDatasNode = document.createElement("datas");

                // 开始位置
                int fromIndex = i * splitSize;
                // 结束位置:通过三目运算符获取结束值
                int toIndex = (i + 1) * splitSize < nodesLen ? (i + 1) * splitSize : nodesLen;
                System.out.println("fromIndex:" + fromIndex + ":toIndex:" + toIndex);
                for (int j = fromIndex; j < toIndex; j++) {
                    newDatasNode.appendChild(copyNodeList.get(j));
                }

                
                // 添加datas节点到父节点上
                parentDatasNode.appendChild(newDatasNode);
                // 文件的回写
                writeXML(document, saveXmlFolder);

            }
        }
    }

    //回写添加的节点文件
    public static void writeXML(Node document, String xmlPath) {
        String[] pathLst = xmlPath.split("\\.");
        StringBuffer sb = new StringBuffer();
        sb.append(pathLst[0]).append("_" + UUID.randomUUID()).append("." + pathLst[1]);

        // 分割为小文件的xml文件路径
        String splitXmlPath = sb.toString();
        TransformerFactory transformerFactory = TransformerFactory.newInstance();
        Transformer transformer;

        try {
            transformer = transformerFactory.newTransformer();
            transformer.transform(new DOMSource(document), new StreamResult(splitXmlPath));
        } catch (Exception e) {
            e.printStackTrace();
        }

        try {
            // 读取数据
            StringBuffer splitXmlSb = new StringBuffer();
            BufferedReader br = new BufferedReader(new FileReader(splitXmlPath));
            String line;
            while ((line = br.readLine()) != null) {
                splitXmlSb.append(line);
            }
            br.close();
            //写入数据
            BufferedWriter bw = new BufferedWriter(new FileWriter(splitXmlPath));
            String xmlContent = splitXmlSb.toString().replaceAll("\r|\n", "");
            bw.write(xmlContent);
            bw.newLine();
            bw.flush();
            bw.close();

        } catch (IOException e) {
            e.printStackTrace();
        }
    }


    //  获取节点的data数据集合
    public static ArrayList<Node> getDataList(Document document) {
        NodeList nodeList = document.getElementsByTagName("data");
        //复制datas节点,为了拿到data数据集合
        return copyDataList(nodeList);

    }

    //  获取xml文件的根节点
    public static Document getRootNode() throws Exception {
        //创建解析器工厂
        DocumentBuilderFactory builderFactory = DocumentBuilderFactory.newInstance();
        //创建解析器
        DocumentBuilder builder = builderFactory.newDocumentBuilder();
        // 解析:得到文档对象
        Document document = builder.parse(xmlFolder);
        return document;

    }

}
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,937评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,503评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,712评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,668评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,677评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,601评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,975评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,637评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,881评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,621评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,710评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,387评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,971评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,947评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,189评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,805评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,449评论 2 342

推荐阅读更多精彩内容