标签: amazon-redshift etl pipeline aws-glue
我正在使用AWS Data Pipeline将我的数据从RDS复制到Redshift。数据管道会使用默认定界符,为数据库表自动创建CSV文件。
,
我的数据具有Comma ,和Dots .作为值。因此会给定界符错误和分配错误。 有什么办法可以将定界符更改为Pipe(|)
Comma ,
Dots .
Pipe(|)
而且,它多次将列移至索引前移,这会在位置-1处产生错误