想使用linux shell对一个文本文件中某个字段截取前特定位数，然后去重，比如
25ds51dd225d86af,20180725115911,22570,20443,120.17138,30.119047
002a51dd225d86af,20180725120017,22570,184680195,120.176506,30.11527
002a51dd225d86af,20180725120058,22290,80489347,120.1810786,30.10003
002a51dd225d86af,20180725120149,22290,80489345,120.1810786,30.10003
002a51dd225d86af,20180725120209,22290,189880577,120.18859,30.093405
102a51dd225d86af,20180725120239,22290,155606668,120.1990471,30.0961
002a51dd225d86af,20180725120303,22290,155606666,120.1990468,30.0961
002a51dd225d86af,20180725120434,22290,193501442,120.220661,30.09723
002a79ded185cb04,20180725125428,22570,185263107,120.1576002,30.1293
002a79ded185cb04,20180726125649,22290,80489347,120.1810786,30.10003
,如何根据第一个字段、第二个字段截取前8位进行排序去重？
linux shell如何根据截取某个字段多少位进行去重？
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
何灵灵 2018-12-10 08:37关注0 表示从左边第一个字符开始，12 表示截取字符的总个数。
Shell Script，Shell脚本与Windows/Dos下的批处理相似，也就是用各类命令预先放入到一个文件中，方便一次性执行的一个程序文件，主要是方便管理员进行设置或者管理用的。但是它比Windows下的批处理更强大，比用其他编程程序编辑的程序效率更高，它使用了Linux/Unix下的命令。
换一种说法也就是，shell script是利用shell的功能所写的一个程序，这个程序是使用纯文本文件，将一些shell的语法与指令写在里面，然后用正规表示法，管道命令以及数据流重导向等功能，以达到我们所想要的处理目的。
明白地说，shell script就像早期dos年代的.bat，最简单的功能就是将许多指令汇整写一起，让使用者很容易地就能够一个操作执行多个命令，而shell script更是提供了数组，循环，条件以及逻辑判断等重要功能，让使用者可以直接以shell来写程序，而不必使用类似C程序语言等传统程序编写的语法解决 无用评论 打赏举报 分享
- 2022-05-05 11:45回答 3 已采纳 Linux的文件系统对文件大小有限制，也就是说一个文件最大不能超过2G，如果压缩包的的内容很大，最后的结果就会超过2G，就会导致压缩失败。最大能压缩多大的文件，跟压缩比有关。（一般认为 tar只能压缩
- 2022-04-27 00:19回答 3 已采纳 case：判断选择语句，主要用于流程控制。用法与c、c++的switch思想基本一致，区别：格式方面case 变量 in常量1）语句；；常量2）语句；；*）默认语句；；esac
- 2022-03-08 18:06回答 2 已采纳 get_value_of_properties_file() { result="" proFilePath="$1" key="$2" if [ "WJA${key}" = "
- 2023-06-11 21:49laufing的博客 shell基础学习；变量；分支；循环；函数；常用命令；
- 2021-12-02 20:22回答 1 已采纳 这个是个循环就是找who命令输出的内容内过滤匹配的文本写入/dev/null这个文件
- 回答 1 已采纳 https://www.cnblogs.com/xiaoliu66007/p/11059527.html
- 2018-04-29 12:23回答 2 已采纳 第一行的符号#!是用来高速系统，它后面的程序来执行该脚本，说白了，第一行是指定执行脚本的程序； 你程序里面的#!etc/bash就是指定etc目录下的bash来解释执行你的脚本。这里有个问题是，你的
- 2022-08-01 13:59清风拂来水波不兴的博客 bash介绍 shell(壳)程序时我们用户和内核打交道的一个中间层，...不同的用户使用不同的shell，这个取决于用户的配置，该配置在文件: /etc/passwd查看得知:root用户是使用bash这个shell，还有些隐藏用户使用的是/s...
- 2023-02-27 18:49回答 6 已采纳 $?它只是代表上一条命令执行的结果，如果没错就返回0，如果有错就返回错误代码是2，你这里的if一执行，应该就会覆盖之前的值了。因此elif始终不满足。修改后的代码： #!/bin/bash CH(){
- 2022-05-11 22:56回答 1 已采纳 报错已经提示你了，这里有问题啊 你的语法问题啊。语法是这样的： while argument; do statement ... done 所以，你的分号去哪里了？
- 2015-09-04 07:20回答 3 已采纳 http://blog.chinaunix.net/uid-20328094-id-95121.html
- 2020-10-24 20:34weixin_39763293的博客 一、安装Linux下面的一个邮件客户端Msmtp软件(类似于一个Foxmail的工具)1、下载安装：http://downloads.sourceforge.net ... 206451&big_mirror=0#tarjxvfmsmtp-1.4.16.tar.bz2#cdmsmtp-1.4.16#./configure--...
- 2023-02-21 13:46回答 3 已采纳 自己解决了，是bash内置命令没有history的原因，开启就行。具体代码如下（shell脚本中）： #!/bin/bash HISTFILE=~/.bash_history set -o histo
- 2021-05-18 15:34七娃爸爸的博客 文件管理之：联网下载文件(wget、curl)、文件上传与下载(rz、sz)----wget、curl联网下载文件----1.CentOS7 系统最小化安装默认没有wget命令，需要进行...3.在linux上使用wget命令进行下载(默认下载到当前目录来)4.由...
- 2021-11-21 23:31若是明月的博客 转自黑马程序员Linux教程Shell篇 第一章 1. grep工具 grep是行过滤工具；用于根据关键字进行行过滤 语法和选项 语法： # grep [选项] '关键字' 文件名 常见选项： OPTIONS: -i: 不区分大小写 -v: 查找不包含...
- 没有解决我的问题, 去提问
