uniq 相关问题

uniq是一个Unix / POSIX / Linux实用程序,用于从已排序的文件中删除或过滤重复的行。它也是从Ruby中的数组中删除重复项的方法的名称。

uniq 命令 - 如何获取分隔符选项并基于列进行搜索?

下面是一个排序的(基于第一列)制表符分隔的文件,名为 file.txt 芭比325社会活动家 大卫 214 IT 专业人士 大卫 457 数学家 大卫 458 生物学家 约翰 85

回答 1 投票 0

使用 Bash 生成乐透号码

我有一个简单的 bash 脚本,可以生成以下内容: 这些是您的中奖彩票号码: 27 6 29 17 15 47 19 16 33 15 20 14 29 34 48 19 33 40 这是我的代码...

回答 4 投票 0

为什么 sort -u 或 uniq 不删除串联文本文件中的重复项?

我正在尝试编写一个 bash 脚本,从我的盒子中的不同位置获取三个用户字典,并将它们组合起来,删除重复项,然后将它们写回到各自的区域。 然而...

回答 2 投票 0

使用 grep 和 wc 获取文件中唯一单词的计数

需要命令使用 grep 查找文件中唯一单词的数量 尝试将 grep 与 uniq 和 sort 一起使用,但需要找到一种仅使用 grep 和 wc 命令的方法。这是两种方法...

回答 2 投票 0

使用 grep 和 wc 获取文件中唯一单词数的命令

需要命令使用 grep 查找文件中唯一单词的数量 尝试使用 grep 以及 uniq 和 sort,但需要找到一种仅使用 grep 和 wc 命令的方法。这是两种方法...

回答 1 投票 0

比较两个具有相同ID的文件,减去并添加到行尾

我有2个文件,格式为 文件A 01 20200111 28.56 22.07 40.14 49.79 22.81 49.31 33.75 31.24 39.41 36.18 02 20200118 32.41 14.89 38.82 60.54 11.54 49.10 34.34 25.53 36....

回答 1 投票 0

比较具有相同 id 和减去字段的两个文件

我有2个文件,格式为 文件A 01 20200111 28.56 22.07 40.14 49.79 22.81 49.31 33.75 31.24 39.41 36.18 02 20200118 32.41 14.89 38.82 60.54 11.54 49.10 34.34 25.53 36....

回答 1 投票 0

查找数组中的重复项,并按对打印计数

我有一个值、位置对数组 arr =(测试,元我,亚马逊测试,亚马逊这个,元测试,谷歌我,谷歌你好,微软) 我想打印重复值,它们的数量/计数,沿着...

回答 2 投票 0

Linux shell 中的排序和 uniq

以下两个命令有什么区别? 排序 -u 文件 排序文件 |优衣库

回答 6 投票 0

删除重复行而不排序[重复]

我有一个Python实用程序脚本: #!/usr/bin/env python 导入系统 唯一行= [] 重复行= [] 对于 sys.stdin 中的行: 如果行位于 unique_lines 中: 重复行.追加(行) 否则...

回答 8 投票 0

打印文件中没有重复项的行并保留排序顺序 linux

我有以下文件: 1 2 4 3 2 1 我想要这样的输出(没有任何重复项并保留顺序的唯一行): 4 3 我尝试排序 file.txt | uniq -u 它可以工作,但输出是如此......

回答 1 投票 0

如何查找文件中的重复行?

我有一个包含以下数据的输入文件: 1号线 第2行 3号线 开始 5号线 6号线 7号线 结尾 9号线 1号线 3号线 我试图找到所有重复的行,我尝试过 排序文件名 |优衣库-c 但是...

回答 4 投票 0

正确使用awk、sort和uniq

我正在处理一个大(500MB+).csv 文件。我想一次一页打印给定列的唯一值,以便于查看。 awk F, '{print $}' 排序 |独特的 这会产生快速滚动...

回答 2 投票 0

awk 以及 sort 和 uniq 组合无法正确计数

这是我的文件.log: {“log”:“2023-08-20 10:06:59 [DNSHandler:ProxyResolver]请求:[86.104.44.22:63761](udp)/'a1834.dscg2.akamai.NET。' (A) ","stream":"stdou...

回答 1 投票 0

在shell中以不同顺序调用uniq和排序。

当在shell脚本中调用uniq和sort时,它们的顺序有区别吗?我这里说的是时间和空间上的问题。 grep 'somePattern' 。

回答 3 投票 3

在Laravel6+中只生成Uniq的交易ID号。

我把这个问题贴在这里,因为我找不到正确的解决方案。我必须做一个uniq的交易ID,我用time()+rand()生成这个函数,但仍然会发生碰撞... ...

回答 1 投票 0

BASH中的<uniq>和R中的<unique>有什么区别?

我在BASH中使用uniq和在R中使用unique得到的结果是不同的。我的样子(超过9千行): samples read_seq ccd_x29 GCATTGGT ccd_x29 GCATTGGT ccd_x29 GCATTGGT ccd_x20 GCCCGGCTAG ....

回答 1 投票 0

在Linux中使用带sort或不带uniq的命令之间的区别

[当我使用uniq -u data.txt时,列出整个文件,而当我使用sort data.txt时| uniq -u省略重复的行。为什么会这样?优衣库人说,-u,--unique只打印唯一行。我不...

回答 1 投票 0

基于Bash中文件名分组文件名的最佳方法?

我有一个包含以下文件的文件夹:DA-001-car.jpg DA-001-dog.jpg DA-001-coffee.jpg DA-002-house.jpg DA-003-coffee.jpg DA-003- cat.jpg ...我想生成以下(CSV)输出:SKU,IMAGE DA -...

回答 4 投票 0

“-”在使用uniq时覆盖文件而不是代表stdin,为什么?

我正在尝试查找两个文件之间的唯一条目。我们称它们为file1和file2。 file1未排序,而file2已预先排序。我尝试了以下操作:排序file1 | uniq -u-file2 ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.