c++ - 使用 boost 线程和循环缓冲区挂起的生产者/消费者

Question

我想通了。我犯了一个愚蠢的错误，我实际上并没有从队列中删除元素，我只是在读取第一个元素。我修改了代码，下面的代码不起作用。感谢大家的帮助。

我正在尝试使用 boost 来实现生产者消费者问题，这实际上是一个更大项目的一部分。我已经根据 Internet 上的示例实现了一个程序，甚至在这里找到了一些帮助。但是目前我的代码只是挂起。基于一些好的建议，我决定使用 boost 环形缓冲区在生产者和消费者之间保存我的数据。那里有很多类似的代码，我能够从中汇集想法并自己编写一些东西。但是，我似乎仍然遇到与以前相同的问题(这是我的程序挂起)。我以为我没有犯和以前一样的错误..

下面给出了我的代码，我已经取出了我之前的代码，其中只有我自己的单链接列表。

缓冲区头:

#ifndef PCDBUFFER_H
#define PCDBUFFER_H

#include <pcl/io/pcd_io.h>
#include <boost/thread/mutex.hpp>
#include <boost/thread/condition.hpp>
#include <boost/circular_buffer.hpp>

class pcdBuffer
{
    public:
        pcdBuffer(int buffSize);
        void put(int data);
        int get();
        bool isFull();
        bool isEmpty();
        int getSize();
        int getCapacity();
    private:
        boost::mutex bmutex;
        boost::condition_variable buffEmpty;
        boost::condition_variable buffFull;
        boost::circular_buffer<int> buffer;
};


#endif

缓冲源(仅相关部分):

#include "pcdBuffer.h"
#include <iostream>

//boost::mutex io_mutex;

pcdBuffer::pcdBuffer(int buffSize)
{
    buffer.set_capacity(buffSize);
}

void pcdBuffer::put(int data)
{
    {
        boost::mutex::scoped_lock buffLock(bmutex);
        while(buffer.full())
        {
            std::cout << "Buffer is full" << std::endl;
            buffFull.wait(buffLock);
        }
        buffer.push_back(data);
    }
    buffEmpty.notify_one();
}

int pcdBuffer::get()
{
    int data;
    {
        boost::mutex::scoped_lock buffLock(bmutex);
        while(buffer.empty())
        {
            std::cout << "Buffer is empty" << std::endl;
            buffEmpty.wait(buffLock);
        }
        data = buffer.front();
            buffer.pop_front();
    }
    buffFull.notify_one();
    return data;
}

代码的主要驱动程序:

#include <iostream>
#include <boost/thread/mutex.hpp>
#include <boost/thread/thread.hpp>
#include <unistd.h>
#include "pcdBuffer.h"

pcdBuffer buff(100);

void producer()
{
    int i = 10;
    while (true)
    {
        buff.put(i);
        i++;
    }
}

void consumer()
{
    int i;
    while(true)
    {
        i = buff.get();
        std::cout << "Data: " << i << std::endl;
    }
}

int main(int argc, char** argv)
{
    std::cout << "Starting main...." << std::endl;
    std::cout << "Buffer Details: " << std::endl;
    std::cout << "Capacity: " << buff.getCapacity() << ", isEmpty: " << buff.isEmpty() << ", isFull: " << buff.isFull() << std::endl;
    boost::thread cons(consumer);
    sleep(5);
    boost::thread prod(producer);
    prod.join();
    cons.join();
    return 0;
}

我的缓冲区容量已正确初始化为 100。消费者线程等待并报告“缓冲区为空”5 秒，但之后我从 put 方法和“数据: 10"从消费者功能交替出现在标准输出上。如您所见，10 是我放入的第一个元素。似乎缓冲区已满，但没有通知消费者，但我检查了我的锁，认为它们是正确的。非常感谢对此的任何帮助。

这是我编写这段代码的引用链接:

http://www.boost.org/doc/libs/1_49_0/libs/circular_buffer/doc/circular_buffer.html#classboost_1_1circular__buffer_19ba12c0142a21a7d960877c22fa3ea00

http://www.drdobbs.com/article/print?articleId=184401518&siteSectionName=cpp

Thread safe implementation of circular buffer

Answer 1

首先，您可以将 std::list 包装在 pcdQueue 中，而不是编写您自己的列表，而不是编写您自己的列表。没错，std::list 不是线程安全的原样，但无论如何您都在您的类中提供了必要的同步原语。

你的程序挂起的原因:你保持锁定并填充队列直到它已满。您通过 notify_one 通知消费者是无用的，因为您的消费者将再次锁定，因为互斥量已被占用(由生产者中的锁)。

当您通过等待 condition_variable 最终释放锁(当队列已满)时，您不会唤醒您的消费者，因此您的消费者和生产者都被阻塞并且您的程序挂起。

将其更改为:

void pcdQueue::produce()
{
    int i=0;
    while(true)
    {
        {
            boost::mutex::scoped_lock lock(qmutex);
            while( ! qlen < buffSize ) {
                std::cout << "Queue is full" << std::endl;
                full.wait(lock);
            }

            enqueue(i); // or myList.push_back(i) if you switch to std::list
        }

        empty.notify_one();


    }
}

您的 consume() 方法也有同样的问题。将其更改为:

pcdFrame* pcdQueue::consume()
{
    pcdFrame *frame;

    {
        boost::mutex::scoped_lock lock(qmutex);
        while( qlen == 0 ) {
            std::cout << "Queue is empty" << std::endl;
            empty.wait(lock);
        }

        frame = dequeue();
    }
    full.notify_one();

    return frame;
}

一般来说，请注意通知只有在有人等待时才有效。否则，他们就会“迷路”。此外，请注意，调用 notify_one 时不需要保持互斥锁锁定(事实上，它会导致额外的上下文切换开销，因为您唤醒了另一个线程，该线程将等待当前(仍然)锁定(由您)的互斥锁。因此，首先释放互斥锁，然后告诉另一个线程继续。

请注意，两个线程都会无限运行，因此您的主程序仍会在第一个 join() 处挂起并且永远不会退出。您可以在 while 循环中包含一个停止标志，以告知您的线程完成。