尝试将XML文件放入SQL Server表中

Posted

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了尝试将XML文件放入SQL Server表中相关的知识，希望对你有一定的参考价值。

我有一个大型的XML文件，我想进入SQL Server，所以我以可读的格式为最终用户查询它。我已经开始查询，我可以得到一些数据，但无法得到其余的。

这是我的xml文件中的一组示例数据

<file>
  <edxMsg>
    <edxMsgHdr>
      <trnNm>ICSHDR2</trnNm>
      <trnAct>N</trnAct>
      <trnVer>01</trnVer>
      <rcvAgncy>PLA</rcvAgncy>
      <rcvAgncyObjId>555012069A</rcvAgncyObjId>
      <sndAgncy>CLK</sndAgncy>
      <sndAgncyApplnId>ICS</sndAgncyApplnId>
      <sentDate>20180920</sentDate>
      <sentTime>013113615000</sentTime>
      <sendGMTOffsetMin>-600</sendGMTOffsetMin>
      <sndMchnId>N</sndMchnId>
      <trnRefId>37</trnRefId>
    </edxMsgHdr>
    <trnData>
      <batchInfo>
        <numRecords>1151</numRecords>
      </batchInfo>
    </trnData>
  </edxMsg>
  <edxMsg>
    <edxMsgHdr>
      <trnNm>ICS400CUR</trnNm>
      <trnAct>N</trnAct>
      <trnVer>01</trnVer>
      <rcvAgncy>PLA</rcvAgncy>
      <rcvAgncyObjId>2015</rcvAgncyObjId>
      <sndAgncy>CLK</sndAgncy>
      <sndAgncyObjId>204630959S</sndAgncyObjId>
      <sndAgncyApplnId>ICS</sndAgncyApplnId>
      <sndUserId>PLAN-AAD192</sndUserId>
      <sentDate>20180919</sentDate>
      <sentTime>131812085000</sentTime>
      <sendGMTOffsetMin>-600</sendGMTOffsetMin>
      <sndMchnId>N</sndMchnId>
      <trnRefId>37</trnRefId>
    </edxMsgHdr>
    <trnData>
      <respCurrent>
        <freeText>2015</freeText>
        <rqstDate>20180919</rqstDate>
        <rqstBtch>5575</rqstBtch>
        <dob>19690328</dob>
        <surname>Knocksville</surname>
        <firstname>Jonny</firstname>
        <procDts>20180919131812057</procDts>
        <partner>N</partner>
        <tpId>555012069A</tpId>
        <numChild>1</numChild>
        <shCareDtl>
          <chId>1</chId>
          <shPercent>100</shPercent>
        </shCareDtl>
        <maxRateDtl>
          <maxRateBen>DSP</maxRateBen>
          <maxRateInd>Y</maxRateInd>
        </maxRateDtl>
        <maxRateDtl>
          <maxRateBen>FTB</maxRateBen>
          <maxRateInd>Y</maxRateInd>
        </maxRateDtl>
        <payDtl>
          <paySts>PYD</paySts>
          <payType>REG</payType>
          <ben>DSP</ben>
          <grntDate>20100817</grntDate>
          <payDate>20180914</payDate>
          <payFreq>2WE</payFreq>
          <payActAmt>90760</payActAmt>
          <cmpDtl>
            <cmp>BASIC</cmp>
            <cmpPayAmt>82620</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CES</cmp>
            <cmpPayAmt>1410</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>PNSUP</cmp>
            <cmpPayAmt>6730</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
        </payDtl>
        <payDtl>
          <paySts>PYD</paySts>
          <payType>REG</payType>
          <ben>FTB</ben>
          <grntDate>20000701</grntDate>
          <payDate>20180907</payDate>
          <payFreq>2WE</payFreq>
          <payLegAmt>51128</payLegAmt>
          <payActAmt>51128</payActAmt>
          <cmpDtl>
            <cmp>FTBA</cmp>
            <cmpPayAmt>23786</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBA</cmp>
            <cmpPayAmt>23786</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBB</cmp>
            <cmpPayAmt>10864</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBB</cmp>
            <cmpPayAmt>10864</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESA</cmp>
            <cmpPayAmt>448</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESA</cmp>
            <cmpPayAmt>448</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESB</cmp>
            <cmpPayAmt>196</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESB</cmp>
            <cmpPayAmt>196</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>RA</cmp>
            <cmpPayAmt>15834</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>RA</cmp>
            <cmpPayAmt>15834</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
        </payDtl>
        <payDtl>
          <paySts>NXT</paySts>
          <payType>REG</payType>
          <ben>DSP</ben>
          <grntDate>20100817</grntDate>
          <payDate>20180928</payDate>
          <payFreq>2WE</payFreq>
          <payActAmt>91195</payActAmt>
          <cmpDtl>
            <cmp>BASIC</cmp>
            <cmpPayAmt>83030</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CES</cmp>
            <cmpPayAmt>1410</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>PNSUP</cmp>
            <cmpPayAmt>6755</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
        </payDtl>
        <payDtl>
          <paySts>NXT</paySts>
          <payType>REG</payType>
          <ben>FTB</ben>
          <grntDate>20000701</grntDate>
          <payDate>20180921</payDate>
          <payFreq>2WE</payFreq>
          <payLegAmt>51128</payLegAmt>
          <payActAmt>51128</payActAmt>
          <cmpDtl>
            <cmp>FTBA</cmp>
            <cmpPayAmt>23786</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBA</cmp>
            <cmpPayAmt>23786</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBB</cmp>
            <cmpPayAmt>10864</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>FTBB</cmp>
            <cmpPayAmt>10864</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESA</cmp>
            <cmpPayAmt>448</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESA</cmp>
            <cmpPayAmt>448</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESB</cmp>
            <cmpPayAmt>196</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>CESB</cmp>
            <cmpPayAmt>196</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>RA</cmp>
            <cmpPayAmt>15834</cmpPayAmt>
            <cmpPayCode>ACT</cmpPayCode>
          </cmpDtl>
          <cmpDtl>
            <cmp>RA</cmp>
            <cmpPayAmt>15834</cmpPayAmt>
            <cmpPayCode>LEG</cmpPayCode>
          </cmpDtl>
        </payDtl>
        <ddnDtl>
          <ddnBen>DSP</ddnBen>
          <ddnType>RCV</ddnType>
          <ddnAmt>9900</ddnAmt>
          <ddnDate>20180914</ddnDate>
        </ddnDtl>
        <ddnDtl>
          <ddnBen>DSP</ddnBen>
          <ddnType>DDF</ddnType>
          <ddnAmt>47319</ddnAmt>
          <ddnDate>20180914</ddnDate>
        </ddnDtl>
        <ddnDtl>
          <ddnBen>FTB</ddnBen>
          <ddnType>RCV</ddnType>
          <ddnAmt>6034</ddnAmt>
          <ddnDate>20180907</ddnDate>
        </ddnDtl>
        <ddnDtl>
          <ddnBen>FTB</ddnBen>
          <ddnType>DDF</ddnType>
          <ddnAmt>3000</ddnAmt>
          <ddnDate>20180907</ddnDate>
        </ddnDtl>
        <incDtl>
          <incType>FIN</incType>
          <incFreq>ANN</incFreq>
          <incAmt>525</incAmt>
          <incDate>20150320</incDate>
        </incDtl>
        <assDtl>
          <assType>CIS</assType>
          <assAmt>30000</assAmt>
          <assDate>20160920</assDate>
        </assDtl>
        <assDtl>
          <assType>HPE</assType>
          <assAmt>1000000</assAmt>
          <assDate>20100817</assDate>
        </assDtl>
      </respCurrent>
    </trnData>
  </edxMsg>
  </file>

这是我目前的代码

DECLARE @x xml

SELECT @x = P
FROM OPENROWSET (BULK 'C:\Temp\XML\CCesResponse.xml', SINGLE_BLOB) AS Tenants (P)

SELECT @x

DECLARE @hdoc int

EXEC sp_xml_preparedocument @hdoc OUTPUT, @x

SELECT *
FROM OPENXML (@hdoc, 'file/edxMsg/trnData/respCurrent', 2)
WITH 
    (dob varchar(100),
     firstname varchar(100),
     surname varchar(100),
     payDtl varchar(500)
    )

我正在尝试为以下各项获取一个列

file/edxMsg/trnData/respCurrent/payDtl/cmpDtl

我已经尝试了我认为的一切，但我必须遗漏一些东西。

任何指导都会很棒..

答案

使用FROM OPENXML的方法（以及准备和删除XML文档的两个过程）已经过时，不应再使用（很少有例外）。

而是使用XML数据类型提供的native XML methods。

试试这个：

DECLARE  @xml XML=
N'place your XML here';

SELECT A.msg.value('(edxMsgHdr/trnNm)[1]','nvarchar(10)') AS trnNm
      ,A.msg.value('(edxMsgHdr/trnAct)[1]','nvarchar(10)') AS trnAct
      --Add all header values here
      ,A.msg.query('trnData') AS trnDataNode
FROM @xml.nodes('/file/edxMsg') A(msg);

中心思想是：

  • 使用.value()从XML中检索值
  • 使用CROSS APPLY YourXml.nodes('Some XPath')将重复元素转换为派生集。
  • 使用.query()检索XML的片段

在这种情况下，我使用.nodes()获得两行<edxMsg>。 <edxMsgHdr>中的所有数据似乎都与1:1相关，因此我们可以使用.value()轻松选择它们。

困难的部分将是<trnData>的内容。

第一条消息仅显示简单的<batchInfo>，但第二条消息包含非常复杂的结构。

问题是：这需要大量的思考，因为它似乎涵盖了分布在几个表格上的复杂的1:n相关结构。任何重复元素（例如<maxRateDtl>或<payDtl>必须在派生列表中检索。后者具有嵌套的重复元素本身（<cmpDtl>），甚至更像<ddnDtl>和<assDtl>。

像下面这样的查询可以帮助您从<payDtl>中获取一些数据：

SELECT A.msg.value('(edxMsgHdr/trnNm)[1]','nvarchar(10)') AS trnNm
      ,A.msg.value('(edxMsgHdr/trnAct)[1]','nvarchar(10)') AS trnAct
      ,A.msg.query('trnData') AS trnDataNode

      ,B.payDtl.value('(paySts)[1]','nvarchar(100)') AS paySts
      ,B.payDtl.value('(payType)[1]','nvarchar(100)') AS payType
      ,C.cmpDtl.value('(cmp)[1]','nvarchar(max)') AS cmp
      ,C.cmpDtl.value('(cmpPayAmt)[1]','decimal(10,4)') AS cmpPayAmt
FROM @xml.nodes('/file/edxMsg') A(msg)
CROSS APPLY A.msg.nodes('trnData/respCurrent/payDtl') B(payDtl)
CROSS APPLY B.payDtl.nodes('cmpDtl') C(cmpDtl)

此外，如果您的消息中可能没有此示例所涵盖的元素，您必须知道edxMsg格式。

所以：我们可以提供和解释提取数据所需的工具，但你必须了解自己，可读格式是什么......

另一答案

SQL Server提供XML数据类型来存储和搜索XML数据。如果要在SQL Server中搜索XML，可以按照以下步骤操作 -

  1. 使用XML数据类型列创建表
  2. 在此表中插入XML
  3. 根据需要在XML节点上搜索

注意：如果您有大数据，那么您还应该在XML列上创建XML索引以提高搜索性能。

您可以参考以下链接获取示例代码

How can I query a value in SQL Server XML column

另一答案

您应该检查内置的XQuery支持 - 并抛弃旧的，传统的OPENXML方法。

试试这个以获取所有<cmpDtl>节点并从中提取详细信息：

SELECT
    Cmp = xc.value('(cmp)[1]', 'varchar(20)'),
    CmpPayAmount = xc.value('(cmpPayAmt)[1]', 'decimal(20,4)'),
    CmpPayCode = xc.value('(cmpPayCode)[1]', 'varchar(20)')
FROM
    @x.nodes('/file/edxMsg/trnData/respCurrent/payDtl/cmpDtl') AS XT(XC)

这将返回XML中所有值（三列Cmp，CmpPayAmount和CmpPayCode）的列表，作为适当的关系数据，然后可以将其作为例如。插入表格。

以上是关于尝试将XML文件放入SQL Server表中的主要内容，如果未能解决你的问题，请参考以下文章

将xml中的数据提取到SQL Server表中

如何设置“以属性的形式将xml数据插入到SQL Server2008数据库的表中”的存储过程

将每个 xml 节点插入到 sql server 2008 表中

使用单个过程将多个 xml 数据动态插入到 sql server 表中

将 XML 数据保存到 SQL Server 表

在 Sql Server 中，如何将游标中的值放入临时表中？