{"id":85009,"date":"2022-10-07T17:13:41","date_gmt":"2022-10-07T22:13:41","guid":{"rendered":"https:\/\/blogging-techies.com\/sw\/hur-man-hittar-dubbletter-av-data-i-en-linux-textfil-med-uniq\/"},"modified":"2022-10-07T17:13:41","modified_gmt":"2022-10-07T22:13:41","slug":"hur-man-hittar-dubbletter-av-data-i-en-linux-textfil-med-uniq","status":"publish","type":"post","link":"https:\/\/blogging-techies.com\/sw\/hur-man-hittar-dubbletter-av-data-i-en-linux-textfil-med-uniq\/","title":{"rendered":"Hur man hittar dubbletter av data i en Linux-textfil med uniq"},"content":{"rendered":"
\n

Har du n\u00e5gonsin st\u00f6tt p\u00e5 textfiler med upprepade rader och dubbletter av ord? Kanske arbetar du regelbundet med kommandoutdata och vill filtrera dem f\u00f6r distinkta str\u00e4ngar. N\u00e4r det kommer till textfiler och borttagning av \u00f6verfl\u00f6diga data i Linux, \u00e4r uniq-kommandot ditt b\u00e4sta val.<\/p>\n

I den h\u00e4r artikeln kommer vi att diskutera uniq-kommandot p\u00e5 djupet, tillsammans med en detaljerad guide om hur man anv\u00e4nder kommandot f\u00f6r att ta bort dubblettrader fr\u00e5n en textfil.<\/p>\n

<\/span> Vad \u00e4r det unika kommandot?<\/span><\/h2>\n

Uniq-kommandot i Linux anv\u00e4nds f\u00f6r att visa identiska rader i en textfil. Det h\u00e4r kommandot kan vara anv\u00e4ndbart om du vill ta bort dubbletter av ord eller str\u00e4ngar fr\u00e5n en textfil. Eftersom uniq-kommandot matchar intilliggande rader f\u00f6r att hitta redundanta kopior, fungerar det bara med sorterade textfiler.<\/p>\n

Lyckligtvis kan du r\u00f6ra sortera<\/strong> kommando med uniq f\u00f6r att organisera textfilen p\u00e5 ett s\u00e4tt som \u00e4r kompatibelt med kommandot. F\u00f6rutom att visa upprepade rader kan kommandot uniq ocks\u00e5 r\u00e4kna f\u00f6rekomsten av dubbletter av rader i en textfil.<\/p>\n

<\/span> Hur man anv\u00e4nder kommandot uniq<\/span><\/h2>\n

Det finns olika alternativ och flaggor som du kan anv\u00e4nda med uniq. Vissa av dem \u00e4r grundl\u00e4ggande och utf\u00f6r enkla operationer som att skriva ut upprepade rader, medan andra \u00e4r f\u00f6r avancerade anv\u00e4ndare som ofta arbetar med textfiler p\u00e5 Linux.<\/p>\n

<\/span>Grundl\u00e4ggande syntax<\/span><\/h3>\n

Den grundl\u00e4ggande syntaxen f\u00f6r uniq-kommandot \u00e4r:<\/p>\n

uniq option input output<\/pre>\n
\u2026var alternativ<\/strong> \u00e4r flaggan som anv\u00e4nds f\u00f6r att anropa specifika metoder f\u00f6r kommandot, inmatning<\/strong> \u00e4r textfilen f\u00f6r bearbetning, och produktion<\/strong> \u00e4r s\u00f6kv\u00e4gen till filen som kommer att lagra utdata.<\/p>\n
De produktion<\/strong> argument \u00e4r valfritt och kan hoppas \u00f6ver.  Om en anv\u00e4ndare inte anger indatafilen tar uniq data fr\u00e5n standardutg\u00e5ngen som indata.  Detta till\u00e5ter en anv\u00e4ndare att pipe uniq med andra Linux-kommandon.<\/p>\n
<\/span>Exempel p\u00e5 textfil<\/span><\/h3>\n
Vi kommer att anv\u00e4nda textfilen duplicate.txt<\/strong> som indata f\u00f6r kommandot.<\/p>\n
127.0.0.1 TCP127.0.0.1 UDPDo catch thisDO CATCH THISDon't match thisDon't catch thisThis is a text file.This is a text file.THIS IS A TEXT FILE.Unique lines are really rare.<\/pre>\n
Observera att vi redan har sorterat denna textfil med hj\u00e4lp av sortera<\/strong> kommando.  Om du arbetar med n\u00e5gon annan textfil kan du sortera den med f\u00f6ljande kommando:<\/p>\n
sort filename.txt > sorted.txt<\/pre>\n
<\/span>Ta bort dubbletter av linjer<\/span><\/h3>\n
Den mest grundl\u00e4ggande anv\u00e4ndningen av uniq \u00e4r att ta bort upprepade str\u00e4ngar fr\u00e5n inmatningen och skriva ut unika utdata.<\/p>\n
uniq duplicate.txt<\/pre>\n
Produktion:<\/p>\n
\n<\/figure>\n
Observera att systemet inte visar den andra f\u00f6rekomsten av raden Detta \u00e4r en textfil<\/strong>.  Dessutom skriver det ovann\u00e4mnda kommandot bara ut de unika raderna i filen och p\u00e5verkar inte inneh\u00e5llet i den ursprungliga textfilen.<\/p>\n
<\/span>R\u00e4kna upprepade rader<\/span><\/h3>\n
F\u00f6r att mata ut antalet upprepade rader i en textfil, anv\u00e4nd -c<\/strong> flagga med standardkommandot.<\/p>\n
uniq -c duplicate.txt<\/pre>\n
Produktion:<\/p>\n
\n<\/figure>\n
Systemet visar antalet f\u00f6r varje rad som finns i textfilen.  Du kan se att linjen Detta \u00e4r en textfil<\/strong> f\u00f6rekommer tv\u00e5 g\u00e5nger i filen.  Som standard \u00e4r uniq-kommandot skiftl\u00e4gesk\u00e4nsligt.<\/p>\n
<\/span>Skriv endast ut upprepade rader<\/span><\/h3>\n
F\u00f6r att endast skriva ut dubbletter fr\u00e5n textfilen, anv\u00e4nd -D<\/strong> flagga.  De -D<\/strong> st\u00e5r f\u00f6r Duplicera<\/strong>.<\/p>\n
uniq -D duplicate.txt<\/pre>\n
Systemet kommer att visa utdata enligt f\u00f6ljande.<\/p>\n
This is a text file.This is a text file.<\/pre>\n
<\/span>Hoppa \u00f6ver f\u00e4lt n\u00e4r du letar efter dubbletter<\/span><\/h3>\n
Om du vill hoppa \u00f6ver ett visst antal f\u00e4lt samtidigt som du matchar str\u00e4ngarna kan du anv\u00e4nda -f<\/strong> flagga med kommandot.  De -f<\/strong> st\u00e5r f\u00f6r F\u00e4lt<\/strong>.<\/p>\n
T\u00e4nk p\u00e5 f\u00f6ljande textfil fields.txt<\/strong>.<\/p>\n
192.168.0.1 TCP127.0.0.1 TCP354.231.1.1 TCPLinux FSWindows FSmacOS FS<\/pre>\n
S\u00e5 h\u00e4r hoppar du \u00f6ver det f\u00f6rsta f\u00e4ltet:<\/p>\n
uniq -f 1 fields.txt<\/pre>\n
Produktion:<\/p>\n
192.168.0.1 TCPLinux FS<\/pre>\n
Det ovann\u00e4mnda kommandot hoppade \u00f6ver det f\u00f6rsta f\u00e4ltet (IP-adresserna och OS-namnen) och matchade det andra ordet (TCP och FS).  Sedan visade den den f\u00f6rsta f\u00f6rekomsten av varje matchning som utdata.<\/p>\n
<\/span>Ignorera tecken n\u00e4r du j\u00e4mf\u00f6r<\/span><\/h3>\n
Precis som att hoppa \u00f6ver f\u00e4lt kan du hoppa \u00f6ver tecken ocks\u00e5.  De -s<\/strong> flaggan l\u00e5ter dig ange antalet tecken som ska hoppa \u00f6ver medan du matchar dubblettrader.  Den h\u00e4r funktionen hj\u00e4lper n\u00e4r data du arbetar med \u00e4r i form av en lista enligt f\u00f6ljande:<\/p>\n
1. First2. Second3. Second4. Second5. Third6. Third7. Fourth8. Fifth<\/pre>\n
F\u00f6r att ignorera de tv\u00e5 f\u00f6rsta tecknen (listnumreringarna) i filen list.txt<\/strong>:<\/p>\n
uniq -s 2 list.txt<\/pre>\n
Produktion:<\/p>\n
\n<\/figure>\n
I utg\u00e5ngen ovan ignorerades de tv\u00e5 f\u00f6rsta tecknen och resten av dem matchades f\u00f6r unika rader.<\/p>\n
<\/span>Kontrollera f\u00f6rsta N Antal tecken f\u00f6r dubbletter<\/span><\/h3>\n
De -w<\/strong> flaggan l\u00e5ter dig kontrollera endast ett fast antal tecken f\u00f6r dubbletter.  Till exempel:<\/p>\n
uniq -w 2 duplicate.txt<\/pre>\n
Det ovann\u00e4mnda kommandot kommer bara att matcha de tv\u00e5 f\u00f6rsta tecknen och kommer att skriva ut unika rader om n\u00e5gra.<\/p>\n
Produktion:<\/p>\n
\n<\/figure>\n
<\/span>Ta bort skiftl\u00e4gesk\u00e4nslighet<\/span><\/h3>\n
Som n\u00e4mnts ovan \u00e4r uniq skiftl\u00e4gesk\u00e4nslig medan den matchar rader i en fil.  F\u00f6r att ignorera skiftl\u00e4ge, anv\u00e4nd -jag<\/strong> alternativet med kommandot.<\/p>\n
uniq -i duplicate.txt<\/pre>\n
Du kommer att se f\u00f6ljande utdata.<\/p>\n
\n<\/figure>\n
Observera i utg\u00e5ngen ovan, uniq visade inte raderna F\u00c5NGA DET H\u00c4R<\/strong> och DETTA \u00c4R EN TEXTFIL<\/strong>.<\/p>\n
<\/span>Skicka utdata till en fil<\/span><\/h3>\n
F\u00f6r att skicka utdata fr\u00e5n uniq-kommandot till en fil kan du anv\u00e4nda Omdirigering av utdata<\/strong> (><\/strong>) tecken enligt f\u00f6ljande:<\/p>\n
uniq -i duplicate.txt > otherfile.txt<\/pre>\n
N\u00e4r en utdata skickas till en textfil visar systemet inte utdata fr\u00e5n kommandot.  Du kan kontrollera inneh\u00e5llet i den nya filen med hj\u00e4lp av katt<\/strong> kommando.<\/p>\n
cat otherfile.txt<\/pre>\n
Du kan ocks\u00e5 anv\u00e4nda andra s\u00e4tt f\u00f6r att skicka kommandoradsutdata till en fil i Linux.<\/p>\n
<\/span>  Analysera dubbletter av data med uniq<\/span><\/h2>\n
F\u00f6r det mesta n\u00e4r du hanterar Linux-servrar kommer du antingen att arbeta p\u00e5 terminalen eller redigera textfiler.  Att veta hur man tar bort redundanta kopior av rader i en textfil kan d\u00e4rf\u00f6r vara en stor tillg\u00e5ng f\u00f6r din Linux-f\u00e4rdighet.<\/p>\n
Att arbeta med textfiler kan vara frustrerande om du inte vet hur man filtrerar och sorterar text i en fil.  F\u00f6r att g\u00f6ra ditt arbete enklare har Linux flera textredigeringskommandon som t.ex sed<\/strong> och awk<\/strong> som l\u00e5ter dig arbeta effektivt med textfiler och kommandoradsutdata.<\/p>\n
    Om f\u00f6rfattaren<\/strong><\/p>\n
            Deepesh Sharma (110 publicerade artiklar)
<\/strong><\/p>\n
Deepesh \u00e4r Junior Editor f\u00f6r Linux p\u00e5 MUO.  Han skriver informationsguider om Linux, i syfte att ge alla nykomlingar en lycksalig upplevelse.  Inte s\u00e4ker p\u00e5 filmer, men om du vill prata om teknik \u00e4r han din kille.<\/p>\n
                            Mer fr\u00e5n Deepesh Sharma<\/p>\n
<\/span>Prenumerera p\u00e5 v\u00e5rt nyhetsbrev<\/span><\/h4>\n
G\u00e5 med i v\u00e5rt nyhetsbrev f\u00f6r tekniska tips, recensioner, free e-b\u00f6cker och exklusiva erbjudanden!<\/p>\n
Klicka h\u00e4r f\u00f6r att prenumerera<\/p>\n<\/p><\/div>\n  
\n
\n
Table of Contents<\/p>\nToggle<\/span><\/path><\/svg><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n