node.js - 如何确保在 ElasticSearch Bonsai 免费实例中使用 Firebase FlashLight 索引每个对象

Question

感谢手电筒的教程https://github.com/firebase/flashlight , 这在某种程度上很容易用 Firebase 进行全文搜索。

但是，如果您保留免费的 ES 实例，它会在并发访问方面受到限制，当您启动 Node 应用程序时，您会在日志中看到以下消息:

failed to index firebase/xxx/-KHLhdwGplb3lHWjm8RS: Error: Concurrent request limit exceeded. Please consider batching your requests, or contact support@bonsai.io for help.

如何解决？

Answer 1

如果你有一堆数据要索引，手电筒应用程序会要求 ES 即时索引每个对象，没有任何资源访问限制。您必须使用信号量控制/限制对共享资源的访问。

安装信号量库

npm i --save semaphore

编辑PathMonitor.js文件，将ES资源的访问限制为1

PathMonitor.prototype = {
    _init: function () {
        this.sem = require('semaphore')(1);
        this.addMonitor = this.ref.on('child_added', this._process.bind(this, this._childAdded));
        this.changeMonitor = this.ref.on('child_changed', this._process.bind(this, this._childChanged));
        this.removeMonitor = this.ref.on('child_removed', this._process.bind(this, this._childRemoved));
    },
    ...
    _index: function (key, data, callback) {
        var that = this;
        that.sem.take(function () {
            that.esc.index({
                index: that.index,
                type : that.type,
                id   : key,
                body : data
            }, function (error, response) {
                that.sem.leave();
                if (callback) {
                    callback(error, response);
                }
            }.bind(that));
        });
    },
    ...
}

如果是付费计划，则可能不需要。