我是靠谱客的博主 想人陪蜜粉,最近开发中收集的这篇文章主要介绍文本切割器,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

日志文件有时在阅读时加载几乎缓慢,大部分切割器一般不支持多文件或切割速度较慢,且无法满足用户自定义的需求。

考虑python实现,利用Python编程语言可以快捷地完成将大文本文件分割成多个小文件,并且拥有非常快的速度. 使用教程,仅需把需要切割的.log文件放入"需分割文件",然后点击data.exe运行即可,(固定值以100w行为一次切割,不足100w行另算一个切割文件),

仅限".log"使用,如需其他可私信

部分代码如下:

source_dir = '../文件分割/需分割文件'
    target_dir = '../文件分割/分割完成文件/'
    logname_list,logdir_list=logname(source_dir)

    print("---欢迎使用小小伟切割器---")
    print("正在处理---")
    for source_dir_1 in logdir_list:
        datalist = [] # 存放数据
        name = 1 # 文件名
        flag = 0 # 计数器
        index_1=logdir_list.index(source_dir_1)
        var = str(logname_list[index_1])
        with open(source_dir_1, 'r', encoding="utf-8") as f_source:
            for line in f_source:
                flag += 1
                datalist.append(line)

                if flag == 1000000:
                    with open(target_dir + var.split(".log")[0] +"_"+ str(name) + ".log", 'w+') as f_target:
                        for data in datalist:
                            f_target.write(data)
                    name += 1
                    flag = 0
                    datalist = []

        # 少于100万行的
        with open(target_dir +  var.split(".log")[0] +"_"+ str(name) + ".log", 'w+') as f_target:
            for data in datalist:
                f_target.write(data)
        time.sleep(3)
    print("处理完成!!!")

最后

以上就是想人陪蜜粉为你收集整理的文本切割器的全部内容,希望文章能够帮你解决文本切割器所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(34)

评论列表共有 0 条评论

立即
投稿
返回
顶部