当前位置:  技术问答>linux和unix

Shell处理数据的唯一性问题

    来源: 互联网  发布时间:2015-11-07

    本文导语:  新手用Shell处理数据. 有如下数据,文件名为test.dat: (注:双引号是为方便看在这里加上的,实际数据中没有双引号) "123" "123  " "124" "124 " "124  " 唯一化结果应该是 123 124 但是由于有些数据后有空格,如何处理才可以得到...

新手用Shell处理数据.
有如下数据,文件名为test.dat:
(注:双引号是为方便看在这里加上的,实际数据中没有双引号)
"123"
"123  "
"124"
"124 "
"124  "
唯一化结果应该是
123
124
但是由于有些数据后有空格,如何处理才可以得到正确结果?

我想用sed 's/*[][]$//g' test.dat |...
但是不对,请问该如何处理,用其它脚本也可..

|
sed 's/ *$//g' test.dat |...

|
这样也可以:
cat 1.txt|sort|uniq

|
楼上的合起来就对了
sed 's/ *$//g' | unique

    
 
 

您可能感兴趣的文章:

  • 求助(SHELL 脚本)进程的唯一性检查
  • 在LINUX下做文本处理的工作,一般是用SHELL脚本还是动态语言方便?
  • 请教:shell遍历文件夹,处理其中的文件。
  • [100分]如何在GTK下编写的程序中调用shell下的批处理程序[高手进]
  • 怎样用SHELL按行读取文件并处理?
  • SHELL编程和后台批处理
  • LINUX SHELL 正则处理汉字 问题
  • shell脚本日期处理
  • 关于shell编程的文本处理
  • shell编程:我这样处理上G的大文件,会不会有问题?
  • AIX上用shell处理db2 select的返回值
  • 用来批处理的shell script怎么写?
  • shell中处理字符
  • 一个shell的下的批处理的问题
  • 编写shell脚本执行远端windows的批处理
  • 关于shell的脚本问题.(字符串处理)
  • SHELL行处理:替换行中某域
  • 请教一个shell处理文件或字符串的问题
  • Linux Shell Script 字符串处理
  • shell处理数据:如何将列转换成行
  • shell字符处理
  •  
    本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
    本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • 我在执行shell时,想在shell里直接向mysql数据库插入数据,我该如何写shell。
  • shell脚本读取rrd文件将数据插入sqlserver数据库中
  • shell:sql问题,如何shell循环将不同表数据写入文件中...
  • shell script能为c程序提供输入数据吗?
  • Linux shell 可以实现连接数据库吗?
  • linux上安装oracle 数据库后,是否能写shell程序实现数据库的自动启动。
  • shell数据库编程问题
  • shell编程急问!关于数据库操作的。
  • 请问在文本终端下,怎么用shell命令使网卡发送数据?
  • 如何在shell脚本中往syslog中写数据?
  • linux环境下oracle条件导出数据的shell脚本怎么写
  • 怎么在每行数据后加 一个 词 (shell 实现)
  • 如何在Linux的shell中先删除数据库再创建数据库
  • Linux 如何 用 Shell 读取 CSV 数据文件
  • Linux shell awk提取数据
  • 请问一个shell中有关数据格式转化的问题
  • shell脚本上传数据
  • c/c++ iis7站长之家
  • shell编程怎样把一行数据分成几段
  • 怎么写一个Shell来执行这样的功能,访问Oracle数据库,然后执行一个SQL脚本,生成一个文件。急!
  • Centos6下安装Shell下文件上传下载rz,sz命令
  • 不同类型的shell*(K SHELL , C SHELL) 用命令怎么切换?
  • linux bash shell命令:grep文本搜索工具简介
  • 菜鸟问问题:shell是什么呢?普通的ls、cp、pwd这些命令算不算shell呢?如何把自己写的文件变成shell呢?
  • Linux下指定运行时加载动态库路径及shell下执行程序默认路径
  • 傻瓜问题,请问shell编程和shell脚本编程的关系
  • linux bash shell命令:文本搜索工具grep中用于egrep和 grep -E的元字符扩展集
  • shell变量和子shell的问题请教
  • linux bash shell命令:文本搜索工具Grep命令选项及实例
  • 请问“当前shell”和“子shell”的区别?
  • linux bash shell命令:文本搜索工具grep正则表达式元字符集(基本集)


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3