https://opennet.dev/openforum/vsluhforumID9/10226.html Есть файл, в нём постоянно повторяются строки. Необходимо удалить повторяющиеся строки, но без сортировки списка. <br>$ sort file.txt&#124; uniq -u &gt; sort.txt - не подходит, так как я не хочу сортировать текст. Мне нужно лишь избавиться от повторяющихся строк. <br><br>Заранее благодарю за помощь.<br> https://opennet.dev/openforum/vsluhforumID9/10226.html#32 Sat, 28 Jul 2018 20:16:03 GMT &gt; В реальности, чаще всего, условия еще более расплывчаты. Так что, нормально...<br><br>В добрый путь :)<br>Дату только смотреть не забываем ...<br><br> https://opennet.dev/openforum/vsluhforumID9/10226.html#31 Fri, 27 Jul 2018 17:11:47 GMT &gt; еще один любитель решать задачи без условий?<br><br>В реальности, чаще всего, условия еще более расплывчаты. Так что, нормально...<br> https://opennet.dev/openforum/vsluhforumID9/10226.html#30 Fri, 27 Jul 2018 07:19:06 GMT еще один любитель решать задачи без условий?<br> https://opennet.dev/openforum/vsluhforumID9/10226.html#29 Thu, 26 Jul 2018 18:16:07 GMT [b]Идея[/b] для большого количества строк данных:<br>1) к исходному файлу добавляем нумерацию строк (индексы) как некоторое поле, например в первых нескольких позициях:<br><br>$cat file<br>7<br>5<br>2<br>7<br>2<br>0<br>3<br>1<br>2<br>3<br>4<br>5<br>0<br>8<br>4<br>2<br><br><br>$cat -n file<br> 17<br> 25<br> 32<br> 47<br> 52<br> 60<br> 73<br> 81<br> 92<br> 103<br> 114<br> 125<br> 130<br> 148<br> 154<br> 162<br><br>2) сортируем по данным с удалением дублей:<br><br>$cat -n file &#124; sort -u -k 2<br> 60<br> 81<br> 32<br> 73<br> 114<br> 25<br> 17<br> 148<br><br>3) теперь сортируем по номерам строк/индексам:<br><br>$cat -n file &#124; sort -u -k 2 &#124; sort -n<br> 17<br> 25<br> 32<br> 60<br> 73<br> 81<br> 114<br> 148<br><br>4) и убираем индексы:<br><br>$cat -n file &#124; sort -u -k 2 &#124; sort -n &#124; cut -f2<br>7<br>5<br>2<br>0<br>3<br>1<br>4<br>8<br> https://opennet.dev/openforum/vsluhforumID9/10226.html#28 Tue, 10 Jul 2018 16:20:10 GMT Вообще uniq без sort, но могли бы свой юник переизобрести, например<br><br>while read -r l ; do [ "$l" != "$p" ] && echo "$l" ; p="$l" ; done<br> https://opennet.dev/openforum/vsluhforumID9/10226.html#26 Thu, 24 May 2018 07:43:55 GMT Аноним, ты определился?<br><br> https://opennet.dev/openforum/vsluhforumID9/10226.html#25 Mon, 21 May 2018 18:28:14 GMT эко бомбануло, я прямо вижу забрызганный слюнями в хлам монитор :)<br><br>&gt; Необходимо удалить повторяющиеся строки, но без сортировки списка.<br><br>Ок. Попробую на пальцах. <br>Есть три строки: <br>3<br>3<br>3<br><br>В каждой по одному символу, первая строка "3", затем идут ДВА ПОВТОРЕНИЯ (строки повторяются, повторяющиеся строки, ИСХОДНАЯ строка дважды повторяется).<br>Имеем формулировку: "удалить повторяющиеся". Самое время определится что такое "повторяющиеся". Я считаю, что повторяющиеся это ВТОРАЯ и ТРЕТЬЯ строки. Но код "sort &#124; uniq -u" грохнет все три строки. <br>Это я к тому, что "афтар там пытался потужится в шеле, и вообще все и так понятно", но лично я уже вижу противоречие, и мне задача неясна. Но при этом он пишет, что его не у страивает только сортировка.<br><br>Еще пример "удалить повторяющиеся":<br>1<br>2<br>3<br>2<br>2<br>4<br>2<br><br>Дак что же является "повторяющимися строками" подлежащими удалению в данном примере?<br>1) Ваше решение грохнет все строки "2", кроме 2й.<br>2) Афтар своим "sort &#124; uniq -u" грохнет все строки "2" (е https://opennet.dev/openforum/vsluhforumID9/10226.html#24 Mon, 21 May 2018 09:28:46 GMT Шо, опять?<br><br>&gt; людей глупея себя я всегда буду считать глупее себя - увы.<br><br>Новый оборот речи - "глупея себя". Может всё же "глупее"?<br>Хотя нет. Именно "глупея". Не по дням, а по часам.<br><br><br>&gt; у меня только один вопрос: почему альтернативная точка зрения вызывает такой батхерт, <br>&gt; ИМХО необоснованный.<br><br>Обоснованный.<br><br>Хе-хе.. у кого что болит - тот о том и говорит.<br>Очевидно же, что у вас явно подгорает в одном месте и "рвёт пукан".<br><br>Вы так стараетесь сделать хорошую мину при плохой игре,<br>и убедить окружающих в своей правоте - это явно говорит о вашей пристрастности.<br><br>Почему? Да потому, что в глубине души вы прекрасно понимаете и осознаёте,<br>что облажались со своим советом. Но признать это - это выше ваших сил. Не можете.<br>Ошибиться может любой. Это не страшно. Но признавать свои ошибки может не каждый.<br><br>Поэтому вы и пристрастны. И все у вас виноваты.<br>И ТС -<br>&gt; Афтар как всегда швырнул нечеткую задачу и свалил<br><br>"Афтар как всегда" - плохому танцору всегда что-то мешает.<br><br>И остальные без вины вин https://opennet.dev/openforum/vsluhforumID9/10226.html#23 Mon, 21 May 2018 08:10:52 GMT &gt; В принципе, да, согласен! Оттачивать мастерство можно и на одноразовом <br>&gt; однострочнике, прикручивая к нему хеши, БД, внешнюю сортировку и де-сортировку... <br>&gt; Подбираешь для себя новую более мАстерскую постановку?<br><br>оттачивать что-либо и подбирать тут малополезно ввиду отсутствия задачи как таковой и примеров исходных данных.<br>