gpt4 book ai didi

android - 在 SQLite 中搜索时排除 HTML 标签和一些 UNICODE 字符

转载 作者:塔克拉玛干 更新时间:2023-11-02 08:10:47 25 4
gpt4 key购买 nike

更新#4

我已经成功运行了 firstchar例如,但现在问题是使用 regex .即使在包含头文件之后,它也无法识别 regex运算符(operator)。知道如何解决这个问题吗?

更新#2

我编译了sqlite3我项目中的库。我现在正在寻找任何人来帮助我为我的 regex 编写一个函数。 ,将其附加到数据库并从查询中调用它。

更新#3

我已经从 this 中编写了一些代码例子。在这里

extern "C"
void
Java_com_kfmwa916_testapp_DatabaseHandler_createFunction() {
sqlite3 *db;
//Open database
sqlite3_open("MyDBName.db", &db);

//Attach function to database
sqlite3_create_function(db, "firstchar", 1, SQLITE_UTF8, NULL, &firstchar, NULL, NULL);
}

firstchar功能是,

static void firstchar(sqlite3_context *context, int argc, sqlite3_value **argv) {
if (argc == 1) {
char *text = (char *) sqlite3_value_text(argv[0]);
if (text && text[0]) {
char result[2];
result[0] = text[0]; result[1] = '\0';
sqlite3_result_text(context, result, -1, SQLITE_TRANSIENT);
return;
}
}
sqlite3_result_null(context);
}

然后在我的查询中使用它

SELECT firstchar(text) FROM dummy

但是报错

no such function firstchar()

非常感谢任何帮助。

原始问题

我正在使用以 UNICODE 格式保存在 SQLite 中的阿拉伯语。我想实现一个搜索。但是有一个问题。

假设文本是

<html>
<head>
<style>
@font-face {
font-family: "Al_Mushaf";
src: url('fonts/al_mushaf.ttf');
}
@font-face {
font-family: "Jameel Noori Nastaleeq";
src: url('fonts/jameel_noori.ttf');
}
</style>
</head>

<body>
<h3 style='font-family:"Al_Mushaf"'>
صحابہ کرام کا انبیائے کرام کی سنّت پر عمل
میٹھے میٹھے اسلامی بھائیو!صدائے مدینہ لگانا انبیائے کِرام عَلَیْہِمُ السَّلَام کی اس قَدْر پیاری سنّت ہے کہ صحابۂ کِرام عَلَیْہِمُ الرِّضْوَان نے بھی اسے خُوب اپنایا اور وہ بھی حضرت سَیِّدُنا داؤد عَلَیْہِ السَّلَام کی طرح اپنے گھر والوں کو جگایا کرتے جیسا کہ حضرت سَیِّدُنا عبد اللہ بن عُمَر رَضِیَاللّٰہُ تَعَالٰی عَنْہُما فرماتے ہیں کہ میرے والِدِ مُحْتَرَم اَمِیرُ الْمُوْمِنِین حضرت سَیِّدُنا عُمَر فَارُوقِ اَعْظَم رَضِیَاللّٰہُ تَعَالٰی عَنْہ رات میں جس قَدْر ربّ تعالیٰ چاہتا،نَماز پڑھتے رہتے،یہاں تک کہ جب رات کا آخری وَقْت ہوتا تو اپنے گھر والوں کو بھی نَماز کے لیے جگا دیتے اور ان سے فرماتے: اَلصَّلٰوة یعنی نماز۔ پھر یہ آیت مُبارَکہ تِلاوَت فرماتے:
وَاۡمُرْ اَہۡلَکَ بِالصَّلٰوۃِ وَ اصْطَبِرْ عَلَیۡہَا ؕ لَا نَسْـَٔلُکَ رِزْقًا ؕ نَحْنُ نَرْزُقُکَ ؕ وَالْعٰقِبَۃُ لِلتَّقْوٰی (پ۱۶،طٰهٰ:۱۳۲)
</h3>
</body>

</html>

并且存储在SQLite数据库中。现在我想搜索 html ,它将返回结果,如果我搜索 مبارکہ它不会返回结果,因为在实际文本中,它是 مُبارَکہ (使用这些额外的 UNICODE)。

我想在搜索时忽略所有 HTML 标签和这些额外的 UNICODE 字符,这样 html مبارکہ 时不应返回结果应该返回一个结果。

到目前为止我发现了什么;

  1. 多加一栏,把剥离出来的文字放进去,然后搜索(我做不到,因为有几千本书,它们会占用很多内存)

  2. UDF Like SQL(我找不到任何合适的示例/教程来实现它)

  3. 使用 REGEXP(我还不知道如何做,我只知道我必须自己实现)

  4. 使用 LIKE 和 GLOB 运算符以及通配符的 SQL 查询。

我被困了两天,找不到可行的解决方案。选项 #4 是可取的,但任何可行的解决方案都会发挥作用。

与此同时,我必须保持应用程序内存高效和优化搜索。

非常感谢任何帮助。

更新

我让正则表达式忽略 html 标签和样式标签之间的文本,并在查询中使用它 REGEXP .

现在有两个问题,

  1. 我也想忽略这些额外的字符。我知道他们的 UNICODE,只需要知道如何将其附加到正则表达式中。这是我的正则表达式;

    (?![^<]*>)(?!<style[^>]*?>)(TEXT)(?![^<]*?<\/style>)

  2. 我在像这样的查询中使用过它

    SELECT text FROM dummy WHERE text REGEXP <myregex>

    它没有给出错误,但也没有返回所需的结果。

最佳答案

原始问题的答案

注意:根据我最近的了解,我可能在很多地方都错了,请指正我的错误

有两种解决方法

  1. 在 SQLite 查询中使用 REGEXP 运算符
  2. 使用 NDK 实现您自己的用户定义函数

第一个的问题是它返回 truefalse 但我需要数据。这两种方法的问题是您必须在 Android 项目中使用 C/C++ 库。所以我决定创建自己的用户定义函数。

您可以找到很多关于如何在您的项目中使用 NDK 的教程,但找不到任何在您的项目中使用 3rd Party 库的完整示例。

经过大量的搜索/研究,我结合了许多不同地方的东西,并能够完成我的任务。以下是有关如何执行此操作的一些步骤。我还打算编写一个完整的分步教程。

准备就绪

  1. 首先,您需要要在项目中使用的库。在我的例子中,我需要 sqlite3 合并库,可以从 here 下载。 .将它们解压缩到项目的 cpp 文件夹中。
  2. 当您在项目中包含 NDK 时,您现在可能已经熟悉 CMakeLists.txt 文件。是时候在 CMakeLists.txt 文件中添加这些库了。为此,转到您的 Project Pane ,您会在那里看到 External Build Files,在其中您会看到所需的文件。打开并编辑如下,

# Sets the minimum version of CMake required to build the native
# library. You should either keep the default value or only pass a
# value of 3.4.0 or lower.

set(CMAKE_CXX_FLAGS "${CMAKE_CXX_FLAGS} -std=c++11")
cmake_minimum_required(VERSION 3.4.1)

# Creates and names a library, sets it as either STATIC
# or SHARED, and provides the relative paths to its source code.
# You can define multiple libraries, and CMake builds it for you.
# Gradle automatically packages shared libraries with your APK.

add_library( # Sets the name of the library.
native-lib

# Sets the library as a shared library.
SHARED

# Provides a relative path to your source file(s).
# Associated headers in the same location as their source
# file are automatically included.
src/main/cpp/native-lib.cpp )

include_directories(${CMAKE_SOURCE_DIR}/src)
add_library(sqlite3 STATIC src/main/cpp/sqlite3.c src/main/cpp/sqlite3.h src/main/cpp/sqlite3ext.h)
add_executable(sqlite src/main/cpp/sqlite3.c src/main/cpp/sqlite3.h src/main/cpp/sqlite3ext.h)
set_target_properties(sqlite PROPERTIES OUTPUT_NAME sqlite3)

# Searches for a specified prebuilt library and stores the path as a
# variable. Because system libraries are included in the search path by
# default, you only need to specify the name of the public NDK library
# you want to add. CMake verifies that the library exists before
# completing its build.


find_library( # Sets the name of the path variable.
log-lib

# Specifies the name of the NDK library that
# you want CMake to locate.
log )

# Specifies libraries CMake should link to your target library. You
# can link multiple libraries, such as libraries you define in the
# build script, prebuilt third-party libraries, or system libraries.

target_link_libraries( # Specifies the target library.
native-lib

# Links the target library to the log library
# included in the NDK.
sqlite3
log )

您必须首先使用 add_library 添加库,然后将其链接到您创建的类,它默认名为 native-lib.cpp

  1. 构建您的项目,您就可以开始了。

实现功能

现在是主要部分。打开 native-lib.cpp 并包含所需的 filesheaders。你必须做什么;

  1. 创建一个您将从 YourActivity.java 调用的函数。一旦你看到你的文件,你就会知道模式。在我的例子中是 Java_com_kfmwa916_testapp_SearchResult_createFunction(JNIEnv * env, jobject object, jstring search) 其中

Java是关键字

com_kfmwa916_testapp 是你的包

SearchResult 是您的 Java

createFunction 是函数的名称。

  1. 创建您的函数。就我而言,我必须在搜索中应用某些 regex。这是我的,

    static void strip_text(sqlite3_context *context, int argc, sqlite3_value **argv) {
    if(argc == 1) {
    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "inside strip_text");
    char *result = (char *) sqlite3_value_text(argv[0]);
    std::string text(result);
    std::regex regex_head("YOUR REGEX");

    if (!text.empty()) {
    text = std::regex_replace(text, regex_head, "");

    sqlite3_result_text(context, text.c_str(), -1, SQLITE_TRANSIENT);

    __android_log_print(ANDROID_LOG_VERBOSE, "STRIPPED TEXT", "%s", text.c_str());
    return;
    }

    }
    sqlite3_result_null(context);

    }
  2. 创建 sqlite3 实例,打开数据库,将此函数附加到数据库并在您的查询中使用它。这是一个代码 fragment

    extern "C"
    void
    Java_com_kfmwa916_testapp_SearchResult_createFunction(JNIEnv * env, jobject object, jstring search) {
    const char * search_term = env->GetStringUTFChars(search, 0);
    env->ReleaseStringUTFChars(search, search_term);

    std::string q(search_term);

    std::string query = "SELECT text FROM dummy WHERE LIKE('%" + q + "%', strip_text(text))=1";

    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "%s", query.c_str());

    //GetJStringContent(env, search, search_term);
    sqlite3 *db;
    //Open database
    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "Opening database");
    int rc = sqlite3_open("/data/data/com.kfmwa916.testapp/databases/MyDBName.db", &db);
    //It'll be good to check 'rc' for error(s).

    //Attach function to database
    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "Attaching function");
    rc = sqlite3_create_function(db, "strip_text", 1, SQLITE_ANY, NULL, &strip_text, NULL, NULL);

    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "Executing query");
    rc = sqlite3_exec(db, query.c_str(), callback, NULL, NULL);

    }
  3. 实现回调函数来处理结果。它应该看起来像

    static int callback(void *NotUsed, int argc, char **argv, char **azColName)                      {
    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "FOUND");
    int i;
    for (i = 0; i < argc; ++i) {
    __android_log_print(ANDROID_LOG_VERBOSE, "TAG", "%s = %sn", azColName[i], argv[i] ? argv[i] : "NULL");
    }
    return 0;
    }
  4. 终于到了您的 Java 类,在我的例子中,它是 SearchResult 加载库并定义函数。

    static {
    System.loadLibrary("native-lib");
    }

    public native void createFunction(String search);

然后在你想要的地方调用它。假设一个按钮的 onClickEvent createFunction(searchterm)

帖子已开放以供更正和修改。

关于android - 在 SQLite 中搜索时排除 HTML 标签和一些 UNICODE 字符,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42062760/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com