java - 用Java从SQLite数据库中检索特定数据

Question

我有一个 300GB 的 sqlite 数据库，其中包含超过数十亿条记录。它存储在本地机器上。

我想在 sqlite 数据库中搜索数据，如果找到则返回该行。我想根据 csv 文件中的值从该 sqlite 数据库中检索数据。

    String csvfile = "C:/documents/parsed - Copy.csv";
    String line = "";
    String csvSplitBy = ",";
    BufferedReader br = new BufferedReader(new FileReader(csvfile));

    String sql = "select substr(hex(column1),5,12),column2,colum3 from table1 where substr(hex(column1),5,12) = ?";
    try (Connection conn = this.connect();
            PreparedStatement stmt = conn.prepareStatement(sql)){
        while ((line = br.readLine()) != null) {
            String[] cols = line.split(csvSplitBy);
            stmt.setString(1, cols[1]);
            ResultSet rs = stmt.executeQuery()
            if (rs.next()) {
                System.out.println("found");}
            else
               System.out.println("not found");

如何根据单独的较小 csv 文件中的值搜索数据库而不需要花费很长时间？

Answer 1

如果这不是一次性操作，您可以选择向 table1 中再添加一列，例如 column1_1

alter table table1 add column column1_1;

然后用值填充column1_1 substr(hex(column1),5,12)

update table1 set column1_1 = substr(hex(column1),5,12);

然后将您的查找sql​​更改为:

String sql = "select column1_1,column2,colum3 from table1 where column1_1 = ?";

这样你的查找会更快