Kuriu dažniausiai naudojamų ar dažniausiai naudotojų naudojamų slaptažodžių žodyną (... Neklauskite, kodėl ... HAHAHA), tam imu tekstą iš kitų žodynų ir pan., bet man atrodo, kad yra daug pasikartojančių slaptažodžių ir man reikia pašalinti pasikartojančias eilutes.
Tai yra, pavyzdžiui ... mes turime šį failą: pass.txt
Ir jo turinys yra:
asdas
Lola
meilė
asdas
langai
VYTEGA
Linux
asdas
meilė
Kaip matome, mes pakartojome «meilė"Y"asdas«, Pastarasis 3 kartus. Kaip pašalinti pasikartojančias eilutes?
Tai padaryti paprasta, atlikdami šią komandą:
cat pass.txt | sort | uniq > pass-listos.txt
Tai sugeneruos failą, vadinamą paruoštas perduoti.txt kuriame bus:
VYTEGA
asdas
Linux
Lola
meilė
langai
Tai, ką daro komanda, yra LABAI paprasta ...
- katės leidimas.txt - »Išvardykite failo turinį.
- sort - »Rūšiuoti turinį abėcėlės tvarka.
- unikalus - »Pašalinkite pasikartojančias eilutes.
- > paruoštas perduoti.txt - »Ankstesnių komandų rezultatas, įdėkite jį į failą pass-ready.txt (kuris, kaip jo nėra, jį sukurs)
Tai taip paprasta ... Aš ką tik atradau tą komandą sort taip, tai labai gerai ... bet kartu su unikalus, jie yra meno brangenybė 😀
Tikiuosi, kad buvote paslaugus.
saludos
Taip pat galite naudoti rūšiuoti -u.
Sveikiname tinklaraštį, man tai patinka!
Kurgi ne.
Nieko, labai ačiū už komentarus 😀
Sveiki atvykę 😉
saludos
Problema yra ta, kad ji keičia žodžių tvarką, veikia ... bet galų gale rezultatas labai skiriasi nuo originalo tokia tvarka (kuri galbūt tam tikru atveju yra svarbi)
Taip, taip, žodžiai išdėstomi abėcėlės tvarka, taigi, jei turinys buvo reikalingas BE variantų, šis sprendimas nėra idealus.
Nesukite aplinkui, o jei jums kiltų mintis nedėti rūšiavimo komandos? prašau pagalvoti dar šiek tiek ir ne viską sukramtyti.
katės leidimas.txt | uniq> pass-ready.txt
neveikia, bandžiau
neveikia, nes „pakartotos“ eilutės turi būti ištisinės
Gracias
tai gana naudinga
Labai gerai! Paprastas ir aiškus sprendimas. Man patinka tokie dalykai 🙂
Turiu pripažinti, kad būčiau ką nors padariusi „Python“, tačiau šis sprendimas yra puikus.
Ačiū ^ - ^
Sveiki! labai gerai!
Prašau prašymo
man tai būtų tinkamas pavyzdys:
ABCD 1111
DEFG 2222 45455
ABCD 1111
DEFG 2222
Eilutės yra tos pačios, bet juose yra tarpai ir dar keli simboliai ... ar tai tikrina tą patį žodį? ar linija? Aš paaiškinu?
nuo šiol aš jums labai dėkoju.
Apkabinimas
Sveiki, kaip tai vyksta
Kaip mačiau, tai lygina eilutes, o ne stulpelius, todėl pavyzdyje, kurį pateikiate, tai pašalintų 1-ąją arba 3-ą, 2-ą ir 4-ą eilutes, nors jos yra beveik identiškos, jos nėra 100% tapačios, nes turėti skirtumo stulpelį. 😉
Ačiū už komentarą ^ - ^
Ačiū tau!! anksčiau užtruko valandą, kol orakulas pašalino dublikatus ... dabar reikia 30 sekundžių su kačių rūšiavimu !!
Aš to reikalauju PHP: S
Uff ... man labai labai trūksta PHP, aš iš tikrųjų nesu programuotojas 🙁
Atsiprašau
PHP oficialiame PHP dokumente yra array_unique (…), kuriame rasite daug svarbių ir efektyvių funkcijų.
Kalbant apie rūšiavimą, nebent jums to reikia, nebūtina ... Vykdymo laikas ir atmintis yra sugaišti. (už tai, kas daroma įraše)
Sveiki atvykę!
Oho !! žodynas, naudojamas kaip žiauri jėga !! XD
Labai geras rūšiavimo derinys su uniq! Man labai padėjo pašalinti pasikartojančias eilutes.
Ačiū
Nepaisant jo arogancijos, Carloso komentaras nėra teisingas. Jis sako naudoti:
katės leidimas.txt | uniq> pass-ready.txt
tačiau būtina uniq sąlyga yra failo užsakymas. Turėjo prieš tai šiek tiek daugiau pagalvoti ar pasiteirauti
labai gerai, jūs sutaupėte man daug laiko paleisti mano bashą
awk '! array_temp [$ 0] ++' pass.txt> pass-ready.txt
su tuo linijos pašalinamos nereikalaujant.
Labai ačiū už indėlį!
Nors būtų šaunu, jei pavyktų paversti jį nepakartojamu, nekeičiant tvarkos, bet ei, lengva ir naudinga komanda!
Ačiū, tai man labai padėjo 😉
aš turiu tai
C000006158880201502051056088364 C00-06158880
C000007601673201503051056088364 C00-07601673
C000008659304201504051056088364 C00-08659304
T 0809074070562015120818144287185 REAÑO RUBIÑOS EMILIA DORIS
T 0809092979972016010818144287185 REAÑO RUBIÑOS EMILIA DORIS
C000005398451201501231044214375 C00-05398451
C000007674996201503051000000286 C00-07674996
C000008514288201504051000000463 C00-08514288
C000011613498201506051056088070 C00-11613498
Kaip man nuspalvinti mane faile tik abonento dublikatus ir palikti ne dublikatus kitame?
abonentas yra 23 pozicijoje (10 pozicijų)
rūšiuoti -u -k 1,1 File.txt> result.txt
Tai rūšiuoja failą pagal pirmąjį lauką
2020 m. Ir vis dar tarnauju, labai ačiū!
Bạn co thể hướng dẫn cách loại bỏ các dòng trùng lặp của nhiều failo teksto trong „Linux“ ar „Windows được không“? Cũng như trường hợp của bạn, khi tôi tạo file từ điển vì tôi chia nội dung ra nên Có khá nhiều file và chắc chắn con nhiều dòng trùng lặp giữa Các file. Vaizdas: 1 failas „côa tôi co 5 dòng“, 2 failas - 15 dòng („co 2 dòng trùng lặp với File 1. Tôi muốn co kết quả, File 1 vẫn giữ nguyên 5 dòng, File 2 only only“ 2 dòng giống file 1 .
Như bạn biết co nhiều li do chúng ta ko thể gộp các file txt đó lại với nhau, vì những file text ừ điển rất ư là nhiều ký, chẳng hạn như Rockyou. Thực tếi muốn thực hiện điều này bên Windows hơn, và chắc chắn ko thể gộp chúng ở bên Windows được. 🙂 Hy vọng nhận được phản hồi từ bạn!