读取1行制表符分隔的数据并导出为以'+'分隔时,将生成空CSV文件

时间:2019-03-25 14:21:48

标签: powershell powershell-v4.0

(PowerShell)脚本的目标是获取制表符分隔的文本文件,删除标题行,将分隔符更改为“ +”,添加自定义标题记录,并在目录底部添加摘要(页脚)行带有数据记录数量的文件。最后,文件扩展名需要替换为序号。

当原始文件包含多于1行时,结果是所需的,但是当仅一行(标头加1个数据行)时,输出文件为空。

$dir = "C:\Temp\Data"
$file = "rand1"

$sequencefile = "C:\temp\Sequential\DoNotDeleteSequence.txt"

$sequencenumber = (Get-Content $sequencefile)
$newsequencenumber = ($sequencenumber/1) + 1

Clear-Content $sequencefile
Add-Content $sequencefile $newsequencenumber

$backslash = "\"
$ext = ".txt"
$filename = $dir + $backslash + $file + $ext
$text = "TRAILER = "
$dateText = Get-Date -Format d
$Header1 = "HEADER="
$Header2 = "+PSTG"
$HeaderText = $Header1 + $dateText + $Header2

$tempfile1 = "step1" 
$tempfile2 = "step2" 
$tempfile3 = "step3" 
$tempfile4 = "step4" 

$temppstg = "PSTG_NCDLPSTG."

$stepfile1 = $dir + $backslash + $tempfile1 + $ext
$stepfile2 = $dir + $backslash + $tempfile2 + $ext
$stepfile3 = $dir + $backslash + $tempfile3 + $ext
$stepfile4 = $dir + $backslash + $tempfile4 + $ext

$pstgfile = $dir + $backslash + $temppstg + $newsequencenumber

(Get-Content $filename).Replace("+", '') | Set-Content $stepfile1
(Get-Content $stepfile1) | select -Skip 1 | Set-Content $stepfile2
Import-Csv $stepfile2 -Delimiter "`t" | Export-Csv $stepfile3 -Delimiter "+" -NoTypeInformation
Set-Content $stepfile4 $HeaderText
(Get-Content $stepfile3).Replace("""", '') | Add-Content $stepfile4
$records = Import-Csv $stepfile4 | Measure-Object | Select-Object -Expand Count

$textToWrite = $text + $records

Add-Content $stepfile4 $textToWrite

Rename-Item $stepfile4 $pstgfile

我已经创建了2个测试原始文件(制表符分隔)。

C:\Temp\Data\rand1.txt包含

Header  Row
Record1 Data1

C:\Temp\Data\rand2.txt包含

Header  Row
Record1 Data1
Record2 Data2

rand2.txt通过代码传递时,结果为

HEADER=25/03/2019+PSTG
Record1+Data1
Record2+Data2
TRAILER = 2

处理rand1.txt时,结果为

HEADER=25/03/2019+PSTG
TRAILER = 0

1 个答案:

答案 0 :(得分:0)

以下两个处理步骤导致了您观察到的行为:

(Get-Content $stepfile1) | select -Skip 1 | Set-Content $stepfile2
Import-Csv $stepfile2 -Delimiter "`t" | Export-Csv $stepfile3 -Delimiter "+" -NoTypeInformation

要了解发生了什么,您只需要查看各个处理步骤即可。我正在并排显示文件rand1.txt(左)和rand2.txt(右)的输入和输出,以说明发生了什么。

  1. (Get-Content $stepfile1) | select -Skip 1 | Set-Content $stepfile2

    输入:

    Header   Row                  Header   Row
    Record1  Data1                Record1  Data1
                                  Record2  Data2
    

    输出:

    Record1  Data1                Record1  Data1
                                  Record2  Data2
    

    此步骤将删除标题行,为rand1.txt保留一行,而为rand2.txt保留两行。这本身并不是您所观察到的问题的根本原因,但它为实际的罪魁祸首打下了基础。

  2. Import-Csv $stepfile2 -Delimiter "`t" | Export-Csv $stepfile3 -Delimiter "+" -NoTypeInformation

    输入:

    Record1  Data1                Record1  Data1
                                  Record2  Data2
    

    输出:

                                  Record1+Data1
                                  Record2+Data2
    

    由于rand1.txtrand2.txt的工作方式,这一步使Import-Csv没有任何输出,但是Export-Csv的两条记录都没有。

    Import-Csv将定界文件的行转换为自定义对象,并将每行的字段转换为这些对象的属性,并从输入文件的第一行获取这些属性的名称。

    Export-Csv与其兄弟cmdlet截然相反:它将自定义对象列表转换为数据行,并将对象属性的值转换为数据行的字段。列表中第一个对象的属性名称确定要导出的属性,并形成输出文件的标题行。

    由于rand1.txt仅具有一行(即只有标题行),因此由于没有数据,因此在导入时不会创建任何对象,因此没有数据可以导出回文件。另一方面,rand2.txt有两行,因此在导入时,您将获得一个具有以下结构的对象(采用JSON表示法):

    {
      "Record1": "Record2",
      "Data1": "Data2"
    }
    

    然后将其转换回标题行Record1+Data1和数据行Record2+Data2

后续步骤仅将新的标题行添加到您创建的中间文本文件中。如果您没有在使用Import-Csv之前删除标头,或者首先没有使用*-Csv cmdlet,就不会发生此问题。

话虽这么说,您的整个处理过程都很复杂。您只需执行以下几行即可获得理想的结果(为简洁起见,省略了一些变量定义):

$filename = Join-Path $dir "${file}${ext}"

$records = (Get-Content $filename).Replace('+', '').Replace("`t", '+') |
           Select-Object -Skip 1

$newsequencenumber = [int](Get-Content $sequencefile) + 1
$pstgfile = Join-Path $dir "PSTG_NCDLPSTG.${newsequencenumber}"

"HEADER=$(Get-Date -Format d)+PSTG" | Set-Content $ptsgfile
$records | Add-Content $ptsgfile
"TRAILER = $($records.Count)" | Add-Content $ptsgfile