java - 如何在读取 csv 文件时跳过重复行？

Question

我需要跳过 csv 文件中的重复项，并需要将原始值插入我的沙发数据库中。这是我的代码。

public class Json {
    public List<User> jsonConvert()
                throws JsonGenerationException, JsonMappingException, IOException {
        File input = new File("C:\\Users\\SwedhaS\\Documents\\SametimeFileTransfers\\newPIRs.csv");      

        Pattern pattern = Pattern.compile(",");

        try (BufferedReader in = new BufferedReader(new FileReader(input));) {
            List<User> users = in 
                .lines()
                .skip(1)
                .<User>map(line -> {
                    String[]x = new String[6];
                    x = pattern.split(line);
                    return new User(x);
                }).collect(Collectors.toList());

            ObjectMapper mapper = new ObjectMapper();
            mapper.enable(SerializationFeature.INDENT_OUTPUT);
            mapper.writeValue(System.out, users);

            return users;
        }
    }
}

Answer 1

我相信您正在尝试从用户列表中删除重复项，对吗？

为此，如果您还想保留顺序，可以使用 HashSet，它会自动删除重复项:

Set<String> usersSet = new LinkedHashSet<>(users);