如何将一个巨大的csv excel电子表格分割成单独的文件

microsoftexcel的缺点之一是电子表格的大小有限。如果您需要缩小Excel文件或拆分一个大的CSV文件，请继续阅读！...

microsoftexcel在很多日常工作中都非常出色。但有时，您会遇到它的一个缺点：电子表格的大小。继续阅读，了解如何缩小Excel电子表格或将大型CSV文件拆分为多个文件。

lot-of-numbers-on-a-spreadsheet-3d-render

为什么要将一个大的csv分割成多个文件？

您可能会想，“为什么我需要将一个大型Excel文件拆分为多个较小的文件？”这是一个有趣的问题，尤其是Excel的电子表格行数限制为1048576。

超过100万行听起来很惊人。但是，达到行限制比您想象的要容易，特别是在某些任务中。

例如，如果您通过电子邮件进行营销，您可能会导入包含数百万电子邮件地址的CSV文件。唯一的问题是，如何管理一个包含这么多地址的电子表格？此外，如果有人发送的CSV已经超出了限制（来自另一个程序）？

如果这听起来像是您可能要面对的问题，请查看以下五种将大型CSV或Excel文件拆分为多个较小文件的方法。

没有一个大的CSV文件方便，但想在家玩吗？我正在使用示例中的covd-19开放研究数据集，您也可以下载和使用这些数据集。

1使用程序分解csv文件

有几个有用的CSV拆分程序在那里。这里有两个最好的。公平的警告，虽然这些程序正在工作，他们有时会遇到内存问题，这是一个常见的问题，为CSV分裂程序。

免费巨大的csv拆分器

免费的巨大CSV分割器是一个基本的CSV分割工具。输入要分割的CSV文件、要使用的行数，然后选择“分割文件”。行计数决定最终输出的文件数。

csv拆分器

CSV拆分器是第二个工具。它提供了与免费的巨大CSV拆分器几乎相同的功能，尽管它的设计略显圆滑。它将CSV快速分割成小块，允许您确定要使用的行数。

2使用批处理文件

接下来，创建一个可编程的批处理文件。您可以使用批处理文件将CSV处理成更小的块，自定义文件以传递不同的块。

打开新的文本文档，然后复制并粘贴以下内容：

@echo off
setlocal ENABLEDELAYEDEXPANSION
REM Edit this value to change the name of the file that needs splitting. Include the extension.
SET BFN=HCAHPSHospital.csv
REM Edit this value to change the number of lines per file.
SET LPF=2500
REM Edit this value to change the name of each short file. It will be followed by a number indicating where it is in the list.
SET SFN=HosptialSplitFile
REM Do not change beyond this line.
SET SFX=%BFN:~-3%
SET /A LineNum=0
SET /A FileNum=1
For /F "delims==" %%l in (%BFN%) Do (
SET /A LineNum+=1
echo %%l >> %SFN%!FileNum!.%SFX%
if !LineNum! EQU !LPF! (
SET /A LineNum=0
SET /A FileNum+=1
)
)
endlocal
Pause

您需要在运行之前配置批处理文件。我将告诉您每个命令的作用，您可以根据批处理文件的大小以及所需的输出对其进行更改。

“SET BFN=”应指向需要分解的CSV
“SET LPF=”是要限制新文件的行数
“SET SFN=”是分割文件的新命名方案

输入变量后，请转到“文件”&gt；“另存为”。选择文件名，然后选择“保存”。然后，选择新保存的文本文件并按F2键将其重命名。将.txt扩展名替换为.bat，并在出现警告时按OK。现在，您可以将大的CSV文件拆分为较小的输出文件。

三。使用powershell脚本来拆分csv文件

您可以将批处理文件用于各种日常任务。但是PowerShell脚本速度更快，特别是对于这种类型的处理和划分。

下面的脚本将您的大型CSV快速剪切为较小的文件。

首先，按CTRL+X打开Windows电源菜单，然后选择PowerShell。如果PowerShell不是一个选项，请在“开始”菜单搜索栏中输入PowerShell，然后选择最佳匹配项。

现在，复制并粘贴以下脚本：

$InputFilename = Get-Content 'C:\file\location'
$OutputFilenamePattern = 'output_done_'
$LineLimit = 50000
$line = 0
$i = 0
$file = 0
$start = 0
while ($line -le $InputFilename.Length) {
if ($i -eq $LineLimit -Or $line -eq $InputFilename.Length) {
$file++
$Filename = "$OutputFilenamePattern$file.csv"
$InputFilename[$start..($line-1)] | Out-File $Filename -Force
$start = $line;
$i = 0
Write-Host "$Filename"
}
$i++;
$line++
}

用CSV文件替换第一行中的文件位置，然后运行脚本。脚本将输出用户目录中较小的CSV文件。例如，我的CSV文件位于C:\Users\Gavin，文件名为output\u done\u 1.CSV。您可以通过更改$OutputFilenamePattern='output\u done\u'行来更改输出名称。