Question

我有很多平面(文本)文件要每天导入到 SQLSERVER 表格中。目前, 在我制定程序时, 我只想导入一个文件。当然我可以为此写入 C# 代码, 但我觉得这不是正确的方式, 我想用xml 格式文件来大量插入。

我的第一个样本文件看起来像这样( 样本. dat) :

Q     RR201110010000000002000000000000232000
N     X4201110010000000001500000000000160000

注:本文件中的一十六式倾斜显示,每条线的终止都有一个确切的新行字符,没有多少是新行字符。

我的 xml 翻译文件看起来像这个 :

<?xml version="1.0"?>
<BCPFORMAT xmlns="http://schemas.microsoft.com/sqlserver/2004/bulkload/format" 
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
 <RECORD>
  <FIELD ID="1" xsi:type="CharFixed" LENGTH="6"/>
  <FIELD ID="2" xsi:type="CharFixed" LENGTH="2"/>
  <FIELD ID="3" xsi:type="CharFixed" LENGTH="8"/>
  <FIELD ID="4" xsi:type="CharFixed" LENGTH="14"/>
  <FIELD ID="5" xsi:type="CharFixed" LENGTH="14"/>
 </RECORD>
 <ROW>
  <COLUMN SOURCE="1" NAME="c1" xsi:type="SQLNCHAR"/>
  <COLUMN SOURCE="2" NAME="c2" xsi:type="SQLNCHAR"/>
  <COLUMN SOURCE="3" NAME="c3" xsi:type="SQLCHAR"/>
  <COLUMN SOURCE="4" NAME="c4" xsi:type="SQLINT" />
  <COLUMN SOURCE="5" NAME="c5" xsi:type="SQLINT" />
 </ROW>
</BCPFORMAT>

我的询问是这样的:

SET LANGUAGE us_english;
GO
SET DATEFORMAT ymd;
go
BULK INSERT 
  PROJ.dbo.Costs
  FROM  C:somewhere	est01SAMPLE.DAT 
  WITH
  (
  DATAFILETYPE = CHAR ,
  FORMATFILE= C:somewhere	est01TRANSLATE02.XML ,
  ERRORFILE= C:somewhere	est01ERRORS.TXT ,
  ROWTERMINATOR= 
 
  )
  GO

When I run this script, I get an overflow error starting with row 2. (That is, row 1 appears to have translated correctly, although I do not see it in the sql table.) A hexdump of ERRORS.TXT reveals that the first error line (row 2) begins with the newline! Of course, that would cause the 4th field to overflow! So it appears the script is not understanding the ROWTERMINATOR. I tried , , , just in case it wasn t seeing the . No avail.

I also attempted a slightly different sql command as per bulk insert txt error with ROWTERMINATOR

并有相同的错误。

对我错过了什么有什么想法吗?

根据请求, 这里是样本. dat 的混血螺旋倾弃处 :

000000: 41 20 20 20  20 20 XX XX  32 30 31 31  31 30 30 31  Q     RR20111001
000010: 30 30 30 30  30 30 30 30  30 31 35 30  30 30 30 30  0000000001500000
000020: 30 30 30 30  30 30 31 35  30 30 30 30  0A ZZ 20 20  000000150000.N
000030: 20 20 20 XX  XX 32 30 31  31 31 30 30  31 30 30 30     X420111001000
000040: 30 30 30 30  30 30 32 30  30 30 30 30  30 30 30 30  0000002000000000
000050: 30 30 30 32  33 32 30 30  30 0A ZZ 20  20 20 20 20  000232000.Y

请注意 XX 和 ZZ 被掩蔽( 不是真实的数据) 0A 是线性字符, 这是最后0 (hex 30) 和开始下一行的 ZZ 字符之间唯一的事物。希望这不会太混乱。

My solution below works, however, this problem is also discussed here and the solution seems better to me (though I haven t confirmed it, I think I ll try it with the next file). Bulk insert rowterminator issue

Answer 1

答案(至少一个答案)简单得令人尴尬。

我刚在XML的FIELDS列表中添加了一个假的字符字段。

<?xml version="1.0"?>
<BCPFORMAT xmlns="http://schemas.microsoft.com/sqlserver/2004/bulkload/format" 
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
 <RECORD>
  <FIELD ID="1" xsi:type="CharFixed" LENGTH="6"/>
  <FIELD ID="2" xsi:type="CharFixed" LENGTH="2"/>
  <FIELD ID="3" xsi:type="CharFixed" LENGTH="8"/>
  <FIELD ID="4" xsi:type="CharFixed" LENGTH="14"/>
  <FIELD ID="5" xsi:type="CharFixed" LENGTH="14"/>
  <FIELD ID="6" xsi:type="CharFixed" LENGTH="1"/>
 </RECORD>
 <ROW>
  <COLUMN SOURCE="1" NAME="c1" xsi:type="SQLNCHAR"/>
  <COLUMN SOURCE="2" NAME="c2" xsi:type="SQLNCHAR"/>
  <COLUMN SOURCE="3" NAME="c3" xsi:type="SQLCHAR"/>
  <COLUMN SOURCE="4" NAME="c4" xsi:type="SQLINT" />
  <COLUMN SOURCE="5" NAME="c5" xsi:type="SQLINT" />
 </ROW>
</BCPFORMAT>

注意我没有写下最后一个字段( 并贴上相应的 COLUMN 标签 ) 。这读取 EOL (/ n) 进入一个假字段。如果这在 BULK INSERT 命令中不是 ROWTER 行为中的错误, 那么它至少是高度不直观的。也就是说, ROWTER 似乎是 NOOP 。

观察1:第3栏是YYYMMDD格式的日期,而相应的 SOURCE 3 实际上是小数字自动转换。

意见2:资源资源3和4被定义为小数点(14,2),我想这将使输入量以百分百的方式在相应的字段中使用最后两个字符。我可以找到一种方法自动(偏好)或b. 后处理除以100(这是另一个问题-在这里指出这一点,对我来说似乎很有意思)。

Either way, this appears to be ONE solution for the problem. Thanks for the responses.

Addendum (as an aside): I have decided to go with option b (as noted in Observation 2), using an UPDATE SET command at the end of the sql commands to divide the money fields by 100.

最后产品将是一个批量文件, 多次引用“ sqlcmd”, 然后在尾端运行一个 perl 脚本以检查各种错误文件中的条目。

还有一件事:我注意到,在我运行此命令时, BULK INSERT 命令中列出的错误文件必须不存在; 否则, 错误本身将产生另一个错误! 我会在预处理期间处理。

无论如何,再次感谢。

Answer 2

You Must Use SSIS "SQL Server Integration Services" For Convert Data From File To Your Database. and You Can Job This Convert In SQL Server for Convert Each Day Automatically.

Answer 3

https://msdn.microsoft.com/en-us/library/ms187833(v=sql.110.10)aspx#importFixed Fields" rel=“nofollow”>SQL服务器关于固定格式文本XML schema文件的文章在记录元素中指定了终止者:

<RECORD>
  <FIELD ID="1" xsi:type="CharFixed" LENGTH="10"/>
  <FIELD ID="2" xsi:type="CharFixed" LENGTH="6"/>
  <FIELD ID="3" xsi:type="CharTerm" TERMINATOR="
"
</RECORD>

(请注意上面的打字)也许这就是为什么您在查询中的规格被忽略的原因。

Answer 4

尝试 char( 13) , 它是 SQL 运输返回。还有 < code>char( 13) + char(10) , 运输返回/ line feed 。

友情链接