php - Lumen MySQL 查询未按预期处理 UTF8 值

Question

我正在处理一个使用 UTF8 编码的数据库，它有许多包含特殊字符的用户名，例如“˒ђ ▫ Sony”

查询用户表时，Lumen 返回错误数据。我尝试使用 mysqli 和 PDO 查询同一个表，我收到了预期的结果。我设置了一个示例路由来测试它:

$app->get("charset", function() {
    $mysqli = new mysqli("localhost", "user", "password", "database");
    $res = $mysqli->query("select name from users where id = 1");

    $dbh = new PDO('mysql:host=localhost;dbname=database', "user", "password");
    $stmt = $dbh->query("select name from users where id = 1");

    $lumen = DB::select("select name from users where id = 1");

    return response()->json([
        "mysqli" => $res->fetch_assoc(),
        "pdo" => $stmt->fetchAll(PDO::FETCH_ASSOC),
        "framework" => $lumen
    ]);
});

访问路由时，我得到以下响应:

{
  "mysqli": {
    "name": "Ғђ ▫ Sony"
  },
  "pdo": [
    {
      "name": "Ғђ ▫ Sony"
    }
  ],
  "framework": [
    {
      "name": "Ò’Ñ’ â–« Sony"
    }
  ]
}

以下是响应的屏幕截图，以防上面的文本显示不正确:

据我所知，Lumen 的 MySQL 配置默认为 UTF8 且不可更改 - 我在 vendor/laravel/lumen-framework/config/database 中找到以下内容:

'mysql' => [
    'driver'    => 'mysql',
    'host'      => env('DB_HOST', 'localhost'),
    'database'  => env('DB_DATABASE', 'forge'),
    'username'  => env('DB_USERNAME', 'forge'),
    'password'  => env('DB_PASSWORD', ''),
    'charset'   => 'utf8',
    'collation' => 'utf8_unicode_ci',
    'prefix'    => env('DB_PREFIX', ''),
    'timezone'  => env('DB_TIMEZONE','+00:00'),
    'strict'    => false,
],

我不知道是什么原因造成的。我还能做些什么来尝试找出这种差异？

Answer 1

此答案基于我之前的上述评论。

MySQL 连接字符集定义了用于 MySQL 客户端 (PHP) 和服务器之间通信的编码。在实际的 MySQL 表中使用什么编码作为内部编码并不重要。 MySQL服务器会自动在表编码和连接编码之间转换数据。因此，连接编码基本上定义了您希望从 MySQL 获取数据的格式，以及您将数据插入 MySQL 的格式。

您确定数据在数据库中以 utf8 编码正确吗？

似乎您只将 UTF8 用于 lumen DB 连接(如果这是默认设置)，但您没有将 UTF8 用于 mysqli 或 PDO 连接示例。如果使用 $mysqli->set_charset("utf8"); 设置 mysqli 字符集，使用 new PDO('mysql:host=localhost;dbname= database;charset=utf8', "用户", "密码");?

根据您的代码和输出示例，您似乎正确地从 lumen DB 连接获取 UTF8 格式的数据，但输出未显示为 UTF8。

这也解释了为什么 mysqli 和 PDO 输出正确显示，因为它们没有以 UTF8 格式返回数据(因为您没有将它们的连接字符集设置为 UTF8)，但默认情况下它们似乎与您使用的任何编码匹配以(显然是“latin1”或兼容格式)显示输出。

如果您在网络浏览器中查看输出，请确保正确定义了输出页面字符集(例如使用标题)。

编辑:

顺便说一句，只要连接编码与通过连接发送的数据的编码相匹配，插入数据的其他系统使用什么连接编码并不重要。

将连接编码设置为 latin1 意味着当您执行 SELECT 时，您将获得 latin1 的字符串数据。所以看起来你的输出被处理为 latin1 而不是 UTF-8。如果您修复脚本输出以正确显示“作为 UTF-8”，而不是如果您的输出环境(例如网络浏览器)支持它，可能会更好。因为否则，如果您需要处理无法在 latin1 中显示的字符，就会遇到问题。尽管如果您输出到 CLI 终端/控制台，那么您当然应该使用与默认终端编码相同的编码(可以是 UTF-8 或其他)。我更喜欢将我的 Linux 终端也配置为 UTF-8。