unix - 如何通过忽略特定模式在 Unix 文件中查找唯一行

Question

我在 Unix 中有一个如下所示的文件

">hello"
"hello"
"newuser"
"<newuser"
"newone"

现在我想在文件中找到唯一的事件(仅在搜索时不包括 < 或 >)，输出为:

">hello"
"<newuser"
"newone"

Answer 1

#!/usr/bin/env python

import sys
seen = set()
for line in sys.stdin:
    word = line.strip().replace('>', '').replace('<', '')
    if word not in seen:
        seen.add(word)
        sys.stdout.write(line)

---

$ ./uniq.py < file1
">hello"
"newuser"
"newone"