shell文本过滤问题
时间：2011-05-19
来源：互联网
现在有一个文件,内容如下:
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:15
script_filename = /aaa/bbb/123.php
[0xbfaf8dd0] query() 1:84
[0xbfaf93b0] get_results() 1:228
[0xbfaf97e0] iGetByPseridCity() 1:16
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:19
现在想过滤去掉重复的script_filename行,后得出的结果应该是;
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:15
script_filename = /aaa/bbb/123.php
[0xbfaf8dd0] query() 1:84
[0xbfaf93b0] get_results() 1:228
[0xbfaf97e0] iGetByPseridCity() 1:16
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:15
script_filename = /aaa/bbb/123.php
[0xbfaf8dd0] query() 1:84
[0xbfaf93b0] get_results() 1:228
[0xbfaf97e0] iGetByPseridCity() 1:16
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:19
现在想过滤去掉重复的script_filename行,后得出的结果应该是;
script_filename = /aaa/bbb/1.php
[0xbfaf8e70] query() /:84
[0xbfaf9450] get_results() /:228
[0xbfaf97e0] iGetByPseridCity() /:15
script_filename = /aaa/bbb/123.php
[0xbfaf8dd0] query() 1:84
[0xbfaf93b0] get_results() 1:228
[0xbfaf97e0] iGetByPseridCity() 1:16
作者: zhangheng520 发布时间: 2011-05-19
- awk -F'\n' -v RS='\n\n' -v ORS='\n\n' '!a[$1]++'
作者: MaskRay 发布时间: 2011-05-19
回复 zhangheng520
复制代码
- awk '!a[$0]++' RS= FS='\n\n' file
作者: yinyuemi 发布时间: 2011-05-19
- awk -F'\n' -v RS= -v ORS='\n\n' '!a[$1]++'
作者: MaskRay 发布时间: 2011-05-19
感谢哈, 都能使用...........
作者: zhangheng520 发布时间: 2011-05-19
本帖最后由 zooyo 于 2011-05-19 13:16 编辑
复制代码
- awk 'BEGIN{RS="";FS="\n";ORS="\n\n"}!a[$1]++' file
- script_filename = /aaa/bbb/1.php
- [0xbfaf8e70] query() /:84
- [0xbfaf9450] get_results() /:228
- [0xbfaf97e0] iGetByPseridCity() /:15
-
- script_filename = /aaa/bbb/123.php
- [0xbfaf8dd0] query() 1:84
- [0xbfaf93b0] get_results() 1:228
- [0xbfaf97e0] iGetByPseridCity() 1:16
作者: zooyo 发布时间: 2011-05-19
相关阅读 更多
热门阅读
-
office 2019专业增强版最新2021版激活秘钥/序列号/激活码推荐 附激活工具
阅读：74
-
如何安装mysql8.0
阅读：31
-
Word快速设置标题样式步骤详解
阅读：28
-
20+道必知必会的Vue面试题（附答案解析）
阅读：37
-
HTML如何制作表单
阅读：22
-
百词斩可以改天数吗？当然可以，4个步骤轻松修改天数！
阅读：31
-
ET文件格式和XLS格式文件之间如何转化？
阅读：24
-
react和vue的区别及优缺点是什么
阅读：121
-
支付宝人脸识别如何关闭?
阅读：21
-
腾讯微云怎么修改照片或视频备份路径?
阅读：28
