ETL 循环导入 平面文件

http://blog.csdn.net/zlp321002/article/details/3413365

ETL设计之-Foreach 循环容器

应用场景:

    批量导入某一文件夹下的所有文件.就可以用foreach循环容器里面的文件枚举。

   

要求:需要把D:/Temp目录下所有csv导入某一个表。如下图:

 

步骤:

1、在控制流中拖拽一个Foreach循环容器。如下图:

2、配置Foreach循环容器。

      a、编辑Foreach循环容器,配置集合方式和参数参考如下:

     说明:选择枚举:Foreach 文件枚举器

                 选择文件夹: D:/Temp

      a、编辑Foreach循环容器,配置变量映射,如下图:

      

   需要新建一个Foreach循环变量,未传递给平面文件的路径。

3、配置平面文件入库。

     a、在控制流中拖拽一个数据流任务在Foreach循环容器中,如下图:

                   

        b、配置数据流任务的平面文件。双击控制流,进入数据流。

              1)选择平面文件管理器,如下图:

              

              2)配置OLDB目标,环境如下图:

 

4、执行该包,如下图:

5、包成功导入完成,查看数据库数据:

 

 

 

导入数据中间会出现 字段被截断的错误,请参照下面的方法解决。

http://bbs.csdn.net/topics/250056337

1 故障分析: 
理由很简单,默认的平文件,每个字段的宽度是50, 
如果你的平面数据源的字段超过这个,则会出现上面这个错误。 

2 解决方案:

也很简单,在数据源的高级里面(也就是文本的高级设置),手工设定每个字段允许的最大宽度就行了.
而不是设置数据库表的这个字段长度。

原文地址:https://www.cnblogs.com/ifreesoft/p/3984020.html