php - 实现最佳的 'fread' block 大小？

Question

好吧，我知道我的问题并不完全具体，因为最佳 fread 块大小更像是基于试错的事情。但是，我希望你们中的一些人可以对此有所了解。

这也涉及服务器相关的东西，所以我不确定 Stackoverflow 是否完全正确，但与 ServerFault 相比，它似乎是一个更好的选择。

首先，我将发布两个屏幕截图:

http://screensnapr.com/e/pnF1ik.png

http://screensnapr.com/e/z85FWG.png

现在我有一个脚本，它使用 PHP 将文件流式传输给最终用户。它使用 fopen 和 fread 来流式传输文件。大多数这些文件都大于 100MB。我担心的是，有时，我的服务器统计数据会变成上面的内容。两个屏幕来自不同的服务器；两台服务器都是专用的文件流媒体盒。除了 PHP 将文件流式传输给最终用户之外，没有其他东西可以在它们上面运行。

我对这样一个事实感到困惑，即使我的服务器仅向最终客户端传输总计约 4MB/秒的数据，磁盘读取速度也会达到 100M/s 甚至更高。这种疯狂的 IO 级别最终会锁定我的 CPU，因为它等待 IO 并且任务堆积；最终我的服务器变得完全没有响应，需要重新启动。

我当前的 fread 块大小设置为 8 * 1024 .我的问题是，改变块大小和试验会有帮助吗？客户端仅以平均约 4MB/秒的速度下载数据。那么为什么磁盘读取数据的速度是 100MB/秒？我已经在服务器端尝试了所有可能的解决方案；我什至用新磁盘交换了磁盘以排除潜在的磁盘问题。在我看来，这是一个脚本问题；也许 PHP 正在从磁盘读取整个数据，而不管它传输到最终客户端多少？

任何帮助都将不胜感激。如果这属于 ServerFault，那么我很抱歉在这里发帖。如果你们需要我发布实际脚本中的片段，我也可以这样做。

Answer 1

8 * 1024 字节 ?这似乎完全合理，如果是这样，您的高磁盘 I/O 可能与并发请求有关。您是否考虑过实现某种带宽限制？这是我为我的框架所做的仅 PHP 实现，phunction :

public static function Download($path, $speed = null, $multipart = false)
{
    if (strncmp('cli', PHP_SAPI, 3) !== 0)
    {
        if (is_file($path) === true)
        {
            while (ob_get_level() > 0)
            {
                ob_end_clean();
            }

            $file = @fopen($path, 'rb');
            $size = sprintf('%u', filesize($path));
            $speed = (empty($speed) === true) ? 1024 : floatval($speed);

            if (is_resource($file) === true)
            {
                set_time_limit(0);
                session_write_close();

                if ($multipart === true)
                {
                    $range = array(0, $size - 1);

                    if (array_key_exists('HTTP_RANGE', $_SERVER) === true)
                    {
                        $range = array_map('intval', explode('-', preg_replace('~.*=([^,]*).*~', '$1', $_SERVER['HTTP_RANGE'])));

                        if (empty($range[1]) === true)
                        {
                            $range[1] = $size - 1;
                        }

                        foreach ($range as $key => $value)
                        {
                            $range[$key] = max(0, min($value, $size - 1));
                        }

                        if (($range[0] > 0) || ($range[1] < ($size - 1)))
                        {
                            ph()->HTTP->Code(206, 'Partial Content');
                        }
                    }

                    header('Accept-Ranges: bytes');
                    header('Content-Range: bytes ' . sprintf('%u-%u/%u', $range[0], $range[1], $size));
                }

                else
                {
                    $range = array(0, $size - 1);
                }

                header('Pragma: public');
                header('Cache-Control: public, no-cache');
                header('Content-Type: application/octet-stream');
                header('Content-Length: ' . sprintf('%u', $range[1] - $range[0] + 1));
                header('Content-Disposition: attachment; filename="' . basename($path) . '"');
                header('Content-Transfer-Encoding: binary');

                if ($range[0] > 0)
                {
                    fseek($file, $range[0]);
                }

                while ((feof($file) !== true) && (connection_status() === CONNECTION_NORMAL))
                {
                    ph()->HTTP->Flush(fread($file, round($speed * 1024)));
                    ph()->HTTP->Sleep(1);
                }

                fclose($file);
            }

            exit();
        }

        else
        {
            ph()->HTTP->Code(404, 'Not Found');
        }
    }

    return false;
}

上面的方法有一些次要的依赖，它添加了一些不必要的功能，比如多部分下载，但你应该能够毫无问题地重用节流逻辑。

// serve file at 4 MBps (max)
Download('/path/to/file.ext', 4 * 1024);

你甚至可以默认更慷慨，减少 $speed取决于您从 sys_getloadavg() 的第一个索引中获得的值以免给 CPU 带来压力。