有时候,我们要简单统计下一个文件中包含某个特殊字符串的行数。
我第一个想到的是grep + wc,不知道你想到了什么,不过,我们确实有多种方法。
假如我们的文件叫msg,里面有23380092行数据。
某些行是这样的receive: msg1
我们的任务是找出这些行的数量。
1. grep方法
grep ' msg1' msg | wc -l
使用这种方法耗时: 1s
2. awk方法
awk 'BEGIN{c=1}{if($0 ~ / msg1/) c=c+1}END{print c}' msg
使用这种方法耗时:8s
3. 另一种awk方法
awk 'BEGIN{FS=":";c=0;}{if($2 == " msg1") c=c+1}END{print c}' msg
使用这种方法耗时:14s
4. 文件描述符打开文件遍历
#!/bin/bash count=0; exec 4<msg while read line<&4 do if [ "$line" == "receive: msg1" ]; then count=$((count+1)) fi done exec 4<&- echo $count;
我日,这种方法我跑了N久都没有出结果,效率差到无法忍受。
当然脚本本身的正确性,是通过小文件测试过得。
以上几种方法,grep的效率简直神了。这么多数据筛选出来,再有wc统计之后,一共只需要1秒。
而采取自己遍历文件的方法,无论是awk还是自己写脚本打开文件,效率都极差。
看来,我们还是懒一点的好。呵呵。
相关推荐
获取linux命令返回, 并通过正则表达式过滤字符串 在linux下可用. #include <regex.h>
Linux Shell字符串比较
当今社会linux系统使用十分广泛,简单的linux查找字符串命令方便大家使用,欢迎下载!
Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 Linux命令大全 ...
去左右空格合并字符串取左右字符串大小写转换字符串转数字数字转字符串反转字符串等等 有例子可以直接调用
linux中截取字符串cut命令用法简介[借鉴].pdf
linux中截取字符串cut命令用法简介参考.pdf
我们都知道在linux下是没有itoa函数的,而又不能通过sprintf实现int转二进制字符串的方式,因此手动编写此代码段,希望可以对大家有帮助。
Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux常用命令Linux...
linux c 环境下16进制与字符串之间的相互转换.
Linux C 开发中有关 字符串,字符数组,结构体常用操作总结
linux命令linux命令linux命令linux命令linux命令linux命令linux命令linux命令linux命令linux命令
grep是一个强大的命令行工具,它允许在一个或多个文件中搜索与正则表达式匹配的行,并将匹配的结果写入标准输出。
Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux命令大全Linux...
字符串操作类,与VC CString类接口差不多,线程安全,高性能,跨平台,已经在windows 下VC和linux下g++编译通过。
Linux下用C语言将一个字符串格式(char*)的MAC地址转换为十六进制数组,代码简洁可直接使用
Linux下常用函数-字符串函数 Linux下常用函数-字符串函数 Linux下常用函数-字符串函数
主要介绍Linux系统下的字符串转换的函数功能,并举例说明一下功能的实现!
在Linux上,对字符串中带有特殊字符的,加密和解密都会出现问题,本程序代码能够解决这一问题,通过简单的代码,能够让你轻松解决特殊字符的问题。
shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串截取shell中字符串...