Enlever les lignes en double dans un fichier

Une petie astuce que j'ai posté sur le blog de torsten en réponse à sa question:
Comment afficher les lignes d'un fichier en enlevant les doublons (faire une sorte de 'unique' ou 'distinct' sur les lignes du fichier)

Je me suis dit que ça pourrait servir à d'autres donc je le repost ici:

puts IO.readlines('data.txt').uniq

Par contre sur un gros fichier ça doit consommer beaucoup de mémoire...

Technorati tags: fichier ruby