Oi,

Por favor, me ajude!
Eu tenho um arquivo duplicado com algumas palavras em linha e quero remover o duplicado palavras.
A ordem das palavras no arquivo de saída não importa.

Input_file
pink_kite red_pen bola pink_kite bola
yellow_flower brancos não brancos não
nuvem nuvem nine_pen rosa pink nine_pen
brown_ball branco
red_bear verde red_bear
branco não

Outputfile
pink_kite red_pen bola
yellow_flower branco não
nuvem nine_pen rosa
brown_ball branco
red_bear verde
branco não

Sua ajuda é muito apreciada.
Thanks in advance

awk '{ while(++i<=NF) printf (!a[$i]++) ? $i FS : ""; i=split("",a); print "" }' file

#!/usr/bin/env python

for line in open('temp.txt', 'r'):
    seen = []
    words = line.rstrip('\n').split()

    for word in words:
        if not word in seen:
            print word,
            seen.append(word)
    print

# cat temp.txt
pink_kite red_pen ball pink_kite ball
yellow_flower white no white no
cloud nine_pen pink cloud pink nine_pen
brown_ball white
red_bear green red_bear
white no

# python temp.py
pink_kite red_pen ball
yellow_flower white no
cloud nine_pen pink
brown_ball white
red_bear green
white no

oi perl Deve ser fácil.

Mas você pode tentar seguir awk

nawk '
function re_dup(arr,n)
{
	for(i=1;i<num;i++){
		for(j=i+1;j<=num;j++){
			if (arr[i]==arr[j])
				arr[j]=""
		}
	}
}
{
	num=split($0,arr," ")
	re_dup(arr,num)
	for(i=1;i<=num;i++){
		if(arr[i]!="")
			printf("%s ",arr[i])
	}
	printf "\n"
}' filename

Graças summer_cherry, ShawnMilo e Rubin.

O nawk Python e executar códigos são perfeitos,

Rubin, mas o awk uma camisa está dando o erro "uma [: Evento não encontrado." podem u por favor guia por isso que este erro é que vem?

Obrigado novamente.
Sam

Graças summer_cherry, ShawnMilo e Rubin.

O nawk Python e executar códigos são perfeitos,

Rubin, mas o awk uma camisa está dando o erro "uma [: Evento não encontrado." podem u por favor guia por isso que este erro é que vem?

Obrigado novamente.
Sam

Não posso reproduzir o mesmo erro, obviamente utilização nawk ou /usr/xpg4/bin/awk no Solaris. O código funciona bem, quer no Solaris ou Linux, sem mensagens de erro.
HTH.