`

shell切分文件

阅读更多

对于大的文件,我们这么来做切分处理,可以拿最近的密码泄漏的csdn文件做处理

 

1. 20M的大小文件:

expr 20 \* 1024 \* 1024

20971520

 

2. 切分文件

 split -C 20971520 csdn.sql

将会得到一批xa*开头的文件

 

3.重命名文件

for i in `ls xa* |awk -F"xa" '{print $2}'`;do mv xa$i "csdn.sql.$i";done
 

 

0
0
分享到:
评论
1 楼 di1984HIT 2014-05-19  
写的真好。

相关推荐

    shell脚本实现nginx日志分割

    本解本实现了使用shell脚本实现nginx日志分割,大家如果没资源分下载,可以转至:https://mp.csdn.net/mdeditor/85233117# 去查看源代码。谢谢大家

    python实现按行切分文本文件的方法

    比如按行切分文件并返回切分后得到的文件列表,可以利用内建的split命令进行切分。为了返回得到的文件列表名,可以先将文件切分到自建的子目录中,然后通过os.listdir获取所有文件,再将这些文件移到上一级目录(即...

    Shell编程中while与for的区别及用法详解

    while循环默认以行读取文件,而for循环以空格读取文件切分文件,本篇就结合现网的一些使用示例说说二者的用法和区别。 一、常用语法 1、for循环 for循环常用的语法结构有如下几种: for 变量 in seq字符串 for 变量 ...

    邮件发送 poi 二维码 条形码等java常用的工具类

    FileOperater:文件处理工具类 包括 读取文本文件,写出文本文件, 大文件切分,文件下载,文件或文件夹比较,文件或文件夹遍历筛选 ...... HttpClientCard:http工具类 HttpUtil:http工具类 Identification:...

    CentOS 7.0下nginx实现每天定时分割日志

    nginx配置文件路径:/etc/nginx/nignx.conf, nginx日志文件路径:/var/log/nginx/access.log nignx.pid路径:/run/nginx.pid 新建的定时脚本位置/shell/nginx/logs.sh 1.新建脚本并执行 #mkdir /shell/nignx #cd /...

    一天一个shell命令 linux文本内容操作系列-cut命令详解

    cut 按列切分文件,你可以指定分隔每列的定界符。在cut的术语中,每列都是一个字段,就是有时候说第一列,可能表述称第一个字段。 实战: 假设有文件data.txt,格式如下 NO Name Mark Percent  1 Sarath 45 ...

    java笔试题算法-topictiling:TopicTiling是一种基于LDA的文本切分方法

    java笔试题算法主题平铺 Topic Tiling 是一种基于 LDA 的文本分割算法。 该算法受到由 开发的著名算法的启发,并使用潜在狄利克雷分配 (LDA) ...shell 脚本来启动基于 unix 的操作系统的分段: sh top

    VISUAL C++实效编程280例

    8.10 实例166:使用Shell操作文件 8.11 实例167:获取应用程序的目录 8.12 实例168:获取或设置进程的当前目录 8.13 实例169:获取Windows目录和System目录 8.14 实例170:创建临时文件 8.15 实例171:创建目录 8.16...

    电子书:MongoDB权威指南(中文版)

    13510.3 片键 13710.3.1 将已有的集合分片 13710.3.2 递增片键还是随机片键 13710.3.3 片键对操作的影响 13810.4 建立分片 13910.4.1 启动服务器 13910.4.2 切分数据 14010.5 生产配置 14010.5.1 ...

    MongoDB权威指南(中文版)高清

    13510.3 片键 13710.3.1 将已有的集合分片 13710.3.2 递增片键还是随机片键 13710.3.3 片键对操作的影响 13810.4 建立分片 13910.4.1 启动服务器 13910.4.2 切分数据 14010.5 生产配置 14010.5.1 ...

    Spark学习--RDD编码

    Spark程序或shell会话工作流程 1. 从外部数据创建出输入RDD; 2. 使用诸如filter()等这样的转化操作对RDD进行转化,以定义新的RDD; 3. 告诉Spark对需要被重用的中间结果RDD执行persist()操作; 4. 使用诸如first()等...

Global site tag (gtag.js) - Google Analytics