Вопросы с меткой [uniq]

Мне нужно удалить дубликаты строк из текстового файла, это просто в Linux, используя cat file.txt |sort | uniq когда file.txt содержит aaa bbb aaa ccc Будет выводить aaa bbb ccc Есть ли аналог ...

Как я могу удалить дубликаты в каждой строке, например, здесь? 1 1 1 2 1 2 3 5 5 4 1 2 3 3 Я хотел бы получить этот вывод: 1 2 3 5 4 1 2 3 Есть много строк (100 000), и в каждой строке я хочу ...

Я использую FreeBSD 3.2-RELEASE Если у меня есть какой-то отсортированный текст, как этот last вывод - zikla13:Oct:20:22:34 zikla13:Oct:5:00:31 zikla14:Oct:17:22:01 zikla14:Oct:12:23:35 ...

Я нахожусь на macOS и хотел бы использовать grep (или подобный инструмент), чтобы найти уникальные вхождения определенного шаблона в базе кода. Например, для поиска всех вызовов console.somemethod() ...

Как я могу удалить неповторяющиеся строки из текстового файла, используя любую программу linux linke sed, awk или любую другую? Пример: abc bbc abc bbc ccc bbc Результат: abc bbc abc bbc bbc Второй ...

В настоящее время я анализирую журналы apache с помощью этой команды: tail -f /opt/apache/logs/access/gvh-access_log.1365638400 | grep specific.stuff. | awk '{print $12}' | cut -d/ -f3 > ~/logs Вывод ...

Как я могу использовать GNU sort и uniq чтобы иметь наиболее распространенные вхождения вместо числовой или буквенно-цифровой сортировки? Пример list.txt: 1 2 2 2 3 3 Поскольку «2» встречается 3 ...

У меня есть отсортированный файл с такими строками word1 abca word1 abcb word1 abcc word2 abca word2 abcb word3 abbb ........... и я хочу что-то подобное word1 abca word2 abca word3 abbb ...........

Имея этот вход: rsa2048/C7927B82 2015-08-30 rsa2048/FB2D99F9 2015-08-30 Я хочу, чтобы grep возвращал только идентификатор ключа, например: C7927B92 . Использование шаблона из символов Grep до и после ...

Я пытаюсь распечатать уникальные записи в столбце файла .csv . Для этого я попробовал следующее: awk -F "," '{print $6}' dataCoarse.csv | uniq -u который просто печатает 6-й столбец как есть. Есть ...

Каков наиболее эффективный метод (без повторного выполнения команды) для удаления элементов, перечисленных в одном файле, из другого файла (неупорядоченного)? Можно легко получить список ...

это содержимое тестового файла: this this this that is that a that MAP that map that когда я делаю uniq testCase -f1 , результат: this this this that что разумно, но если я запустил: testCase -f2 , я ...

У меня есть файл (sudoers), в котором строки могут быть идентичны, за исключением первого слова в них (разные пользователи могут выполнять один и тот же набор команд). Я могу извлечь такую строку с ...

У меня есть набор данных, который выглядит так: AAAAA 11111 Data1 AAAAA 11111 Data2 AAAAA 11111 Data3 AAAAA 11112 Data4 AAAAA 11112 Data5 AAAAA 11112 Data6 AAAAA 11112 Data7 AAAAA 11113 Data8 AAAAA ...

У меня есть файл, который выглядит так: "string",192.168.1.0,,TX,192.168.1.2,,,100,0,0,10,10,10,, "string",192.168.1.0,,TX,192.168.1.1,,,100,0,0,10,10,10,, ...

Я часто нахожу себя вычисляя проценты вручную после фильтрации через файл журнала, чтобы найти долю X или Y в нем. Может ли это быть легко достигнуто с помощью обычных инструментов CLI?

У меня есть текстовый файл, который содержит около 50 МБ текста: valA valB valC valZ valB Какой самый быстрый способ: кот файл Показать уникальные появления

С sort $file | uniq -c , можно суммировать файлы / ввод и показывать число таких случаев: 13 foo 1 bar Чтобы лучше понять эти данные, я хотел бы видеть их графически, как это делает git при ...

У меня есть несколько файлов с разделителями табуляции. Каждый файл структурирован так: ID Title Rating Date_Rated То, что я хочу сделать, это объединить все эти файлы в один и сохранить только ...

Если у меня есть набор URL-адресов в файле, как: http://example.com/do?foo=bar&etc=123 http://example.com/do?etc=456&foo=bar Я хочу отфильтровать это так, чтобы для каждого уникального значения ...

Я начал изучать bash совсем недавно, и мне нужно найти количество команд из файла, файл можно скачать по этой ссылке. Ниже образец Я понимаю, что должен использовать cut и uniq, но не могу понять, ...

Представь, что есть файл - a b b b b c c d d d Я хочу, чтобы выходные данные были отсортированы по частоте (я хочу, чтобы дублирующиеся строки также печатались), а также - b b b b d d d c c a