如何在windows中拆分大文本文件？[关闭]

Question

这个问题似乎不是关于特定的编程问题、软件算法或主要由程序员使用的软件工具。如果您认为该问题将在另一个Stack Exchange站点上讨论，您可以留下评论，解释该问题可以在何处回答。

未解决原始关闭原因

我有一个大小为2.5 GB的日志文件。有没有办法使用windows命令提示符将此文件拆分为更小的文件？

Answer 1

低于每 500 个代码拆分文件

@echo off
setlocal ENABLEDELAYEDEXPANSION
REM Edit this value to change the name of the file that needs splitting. Include the extension.
SET BFN=upload.txt
REM Edit this value to change the number of lines per file.
SET LPF=15000
REM Edit this value to change the name of each short file. It will be followed by a number indicating where it is in the list.
SET SFN=SplitFile

REM Do not change beyond this line.

SET SFX=%BFN:~-3%

SET /A LineNum=0
SET /A FileNum=1

For /F "delims==" %%l in (%BFN%) Do (
SET /A LineNum+=1

echo %%l >> %SFN%!FileNum!.%SFX%

if !LineNum! EQU !LPF! (
SET /A LineNum=0
SET /A FileNum+=1
)

)
endlocal
Pause

见下文:https://forums . tech guy . org/threads/solved-split-a-100000-line-CSV-into-5000-line-CSV-files-with-dos-batch . 1023949/

Answer 2

Set Arg = WScript.Arguments
set WshShell = createObject("Wscript.Shell")
Set Inp = WScript.Stdin
Set Outp = Wscript.Stdout
    Set rs = CreateObject("ADODB.Recordset")
    With rs
        .Fields.Append "LineNumber", 4 

        .Fields.Append "Txt", 201, 5000 
        .Open
        LineCount = 0
        Do Until Inp.AtEndOfStream
            LineCount = LineCount + 1
            .AddNew
            .Fields("LineNumber").value = LineCount
            .Fields("Txt").value = Inp.readline
            .UpDate
        Loop

        .Sort = "LineNumber ASC"

        If LCase(Arg(1)) = "t" then
            If LCase(Arg(2)) = "i" then
                .filter = "LineNumber < " & LCase(Arg(3)) + 1
            ElseIf LCase(Arg(2)) = "x" then
                .filter = "LineNumber > " & LCase(Arg(3))
            End If
        ElseIf LCase(Arg(1)) = "b" then
            If LCase(Arg(2)) = "i" then
                .filter = "LineNumber > " & LineCount - LCase(Arg(3))
            ElseIf LCase(Arg(2)) = "x" then
                .filter = "LineNumber < " & LineCount - LCase(Arg(3)) + 1
            End If
        End If

        Do While not .EOF
            Outp.writeline .Fields("Txt").Value

            .MoveNext
        Loop
    End With

切

filter cut {t|b} {i|x} NumOfLines

从文件的顶部或底部削减行数。

t - top of the file
b - bottom of the file
i - include n lines
x - exclude n lines

实例

cscript /nologo filter.vbs cut t i 5 < "%systemroot%\win.ini"

另一种方式 此输出线 5001 ，适合您的使用。这几乎不占用任何内存。

Do Until Inp.AtEndOfStream
         Count = Count + 1
         If count > 5000 then
            OutP.WriteLine Inp.Readline
         End If
Loop

Answer 3

如果您已经安装了适用于Windows的Git，那么应该已经安装了Git Bash，因为这是Git附带的。

使用Git Bash中的拆分命令拆分文件：

>

放入每个大小为 500MB 的文件中：拆分 my大文件.txt -b 500m

放入每个有 10000 行的文件中：拆分 myLarge 文件.txt -l 10000

提示：

>

如果您没有Git/Git Bash，请在https://git-scm.com/download下载

如果您丢失了Git Bash的快捷方式，您可以使用C：\Program Files\Git\git-bash.exe运行它。

不过我总是喜欢例子...

例：

您可以在此图像中看到，拆分生成的文件名为xaa、xab、xac等。

这些名称由前缀和后缀组成，您可以指定前缀和后缀。由于我没有指定前缀或后缀的外观，因此前缀默认为x，后缀默认为两个字符的字母顺序枚举。

另一个例子：

这个例子演示了

• 使用MySlice的文件名前缀（而不是默认的x），
• 用于使用数字后缀的-d标志（而不是aa、ab、ac等…），
• 和选项-a 5告诉它我希望后缀为5位数长：