Re: [shell-script] Identificando Linhas duplicadas em um arquivo.

[Bruno Gunter]

Só para ter mais uma forma de fazer:

$ cat arquivo | sed -e '$!N; /^\(.*\)\n\1$/!P; D'

[]'s
Gunter

Em 7 de maio de 2010 15:58, Thiago Henrique <address@hidden> escreveu:
>
> sort -u teste.txt >testesemduplicados.txt -> na mosca...
>
> grato!!!
>
> Em 7 de maio de 2010 15:00, <address@hidden> escreveu:
>
> >
> >
> > Olá, amigão.
> >
> > Veja se isto te ajuda:
> >
> > O arquivo:
> > groo@NOTEERICHDS:~$ cat teste.txt
> > a
> > a
> > b
> > b
> > c
> > c
> > d
> > d
> > e
> > e
> > e
> > e
> > e
> > f
> > f
> > f
> > g
> >
> >
> > Bom dia galera, como faço para identificar se ha linhas duplicadas
> > > em uma arquivo com mais de 20.000 linhas?
> > groo@NOTEERICHDS:~$ uniq -c teste.txt
> > 2 a
> > 2 b
> > 2 c
> > 2 d
> > 5 e
> > 3 f
> > 1 g
> >
> >
> > ual comando eu utilizo pra fazer essa identificação e pra fazer a
> > > exclusão dessas linhas duplicadas?
> > groo@NOTEERICHDS:~$ sort -u teste.txt > testesemduplicados.txt
> > groo@NOTEERICHDS:~$ cat testesemduplicados.txt
> > a
> > b
> > c
> > d
> > e
> > f
> > g
> > groo@NOTEERICHDS:~$
> >
> > flw!
> >
> > On Sex 07/05/10 10:35 , "ogaihtnota10" 
> > address@hidden<ogaihtnota10%40gmail.com>sent:
> >
> > > Bom dia galera, como faço para identificar se ha linhas duplicadas
> > > em uma arquivo com mais de 20.000 linhas?
> > > Qual comando eu utilizo pra fazer essa identificação e pra fazer a
> > > exclusão dessas linhas duplicadas?
> > > Será que poderiam me ajudar?
> > > Grato.
> > >
> > >
> >
> >
> >
>
>
> [As partes desta mensagem que não continham texto foram removidas]
>
>
>
> ------------------------------------
>
> ---------------------------------------------------------------------
> Esta lista não admite a abordagem de outras liguagens de programação, como 
> perl, C etc. Quem insistir em não seguir esta regra será moderado sem prévio 
> aviso.
> ---------------------------------------------------------------------
> Sair da lista: address@hidden
> ---------------------------------------------------------------------
> Esta lista é moderada de acordo com o previsto em 
> http://www.listas-discussao.cjb.net
> ---------------------------------------------------------------------
> Servidor Newsgroup da lista: news.gmane.org
> Grupo: gmane.org.user-groups.programming.shell.brazil
>
> Links do Yahoo! Grupos
>
>