Splitte XML dokumenter på mere end 2 GB

Du skal bare bruge en even driven parser (enten push eller pull) ikke en DOM parser.

Hej Arne_v

Findes der en applikation man kan anvende? jeg synes jeg har søgt efter det?

Rasmus

Jeg taenker paa programmering af en special loesning.

Hmmmh - det var træls. Jeg havde håbet at jeg kunne lave et engangsplit da det kun er et initiale load der skal splittes.

Nå, men så må jeg jo op på hesten. Skriver du et svar så du får point.

Den må skulle splittes på en måde som er specific for din XML, så det er svært at finde et generelt tool.

Hvis du fortæller hvilke programmerings sprog du har til rådighed, så kan jeg komme med et eksempel.

og et svar

C# understøttes af mit ETL-værktøj så det vil nok være bedst.

C:\>type big.xml
<all>
  <part>
      <a>1</a>
      <b>2</b>
  </part>
  <part>
      <a>3</a>
      <b>4</b>
  </part>
  <part>
      <a>5</a>
      <b>6</b>
  </part>
</all>

C:\>e29.exe big bigpart part

C:\>type bigpart_0001.xml
&#8745;&#9559;&#9488;<?xml version="1.0" encoding="utf-8"?>
<part>
      <a>1</a>
      <b>2</b>
  </part>
C:\>type bigpart_0002.xml
&#8745;&#9559;&#9488;<?xml version="1.0" encoding="utf-8"?>
<part>
      <a>3</a>
      <b>4</b>
  </part>
C:\>type bigpart_0003.xml
&#8745;&#9559;&#9488;<?xml version="1.0" encoding="utf-8"?>
<part>
      <a>5</a>
      <b>6</b>
  </part>
C:\>

using System;
using System.Xml;
using System.Text;

namespace E
{
    public class Program
    {
        public static void Main(string[] args)
        {
            string infnm = args[0];
            string outfnm = args[1];
            string splittag = args[2];
            int n = 0;
            XmlReader xr = new XmlTextReader(infnm + ".xml");
            XmlTextWriter xtw = null;
            while (xr.Read())
            {
                if (xr.NodeType == XmlNodeType.Element && xr.Name == splittag)
                {
                    n++;
                    xtw = new XmlTextWriter(String.Format("{0}_{1:0000}.xml", outfnm, n), Encoding.UTF8);
                    xtw.Formatting = Formatting.Indented;
                    xtw.WriteStartDocument();
                    xtw.WriteNode(xr, false);
                    xtw.WriteEndDocument();
                    xtw.Close();
                }
                else
                {
                    // ignore everything else
                }
            }
            xr.Close();
        }
    }
}