Awk: Remove duplicate lines
awk '!x[$0]++' alt.txt > neu.txt
awk '!x[substr($0,1,32)]++' alt.txt > neu.txt
entfernt Zeilenduplikate, resp. Zeilen mit gleichen ersten 32 Zeichen. (find nicht mehr, wo ich es her hab, poste ich aber mal, weil ich es immer wieder brauche)
☍ 20.09.2009
# awk utils
ich verwende das kommentarsystem disqus, mit dem man mit verschiedenen accounts oder als gast (option 'I'd rather post as a guest') kommentieren kann. es wird erst nach dem klick eingebettet, bei bedenken bitte erst nach zurkenntnisnahme der (datenschutzinfos) kommentieren.
kommentare
ich verwende das kommentarsystem disqus, mit dem man mit verschiedenen accounts oder als gast (option 'I'd rather post as a guest') kommentieren kann. es wird erst nach dem klick eingebettet, bei bedenken bitte erst nach zurkenntnisnahme der (datenschutzinfos) kommentieren.