python-3.x - 无法克隆对象

转载 作者：行者123 更新时间：2023-12-03 16:12:09 28 4

这是关于 TF 2.0。

请在我的代码下方找到使用 sklearn.model_selection.GridSearchCV 执行 GridSearch 和交叉验证的代码对于完美运行的 mnist 数据集。

# Build Function to create model, required by KerasClassifier

    def create_model(optimizer_val='RMSprop',hidden_layer_size=16,activation_fn='relu',dropout_rate=0.1,regularization_fn=tf.keras.regularizers.l1(0.001),kernel_initializer_fn=tf.keras.initializers.glorot_uniform,bias_initializer_fn=tf.keras.initializers.zeros):
        model = tf.keras.models.Sequential([
        tf.keras.layers.Flatten(input_shape=(28, 28)),    
        tf.keras.layers.Dense(units=hidden_layer_size, activation=activation_fn,kernel_regularizer=regularization_fn,kernel_initializer=kernel_initializer_fn,bias_initializer=bias_initializer_fn), 
        tf.keras.layers.Dropout(dropout_rate),
        tf.keras.layers.Dense(units=hidden_layer_size,activation='softmax',kernel_regularizer=regularization_fn,kernel_initializer=kernel_initializer_fn,bias_initializer=bias_initializer_fn) 
          ])
        optimizer_val_final=optimizer_val
        model.compile(optimizer=optimizer_val, loss='sparse_categorical_crossentropy', metrics=['accuracy'])
        return model

    #Create the model with the wrapper
    model = tf.keras.wrappers.scikit_learn.KerasClassifier(build_fn=create_model, epochs=100, batch_size=10, verbose=2)

    #Initialize the parameter grid
    nn_param_grid = {
        'epochs': [10],     
        'batch_size':[128],
        'optimizer_val': ['Adam','SGD'],
        'hidden_layer_size': [128],
        'activation_fn': ['relu'],     
        'dropout_rate': [0.2],    
        'regularization_fn':['l1','l2','L1L2'],    
        'kernel_initializer_fn':['glorot_normal', 'glorot_uniform'],    
        'bias_initializer_fn':[tf.keras.initializers.zeros]    
    }
    #Perform GridSearchCV
    grid = GridSearchCV(estimator=model, param_grid=nn_param_grid, verbose=2, cv=3,scoring=precision_custom,return_train_score=False,n_jobs=-1) 
    grid_result = grid.fit(x_train, y_train)

我的想法是通过具有不同学习率的不同优化器，比如 Adam 的学习率 0.1、0.01 和 0.001。我还想尝试使用不同学习率和动量值的 SGD。

在那种情况下，当我通过 'optimizer_val': [tf.keras.optimizers.Adam(0.1)], ，我得到如下错误:

Cannot clone object <tensorflow.python.keras.wrappers.scikit_learn.KerasClassifier object at 0x7fe08b210e10>, as the constructor either does not set or modifies parameter optimizer_val

请告知我如何纠正此错误。

最佳答案

这是sklearn错误。您应该减少 sklearn 的版本:

conda install scikit-learn==0.21.2

没关系!

关于python-3.x - 无法克隆对象 <tensorflow.python.keras.wrappers.scikit_learn.KerasClassifier 对象，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/59746974/

28 4 0

• keras - keras 和 tf.keras 模型之间的兼容性

  我有兴趣在 tf.keras 中训练一个模型，然后用 keras 加载它。我知道这不是高度建议，但我对使用 tf.keras 来训练模型很感兴趣，因为 tf.keras 更容易构建输入管道 我想利用

• keras - Keras 中的自定义损失函数结合了多个输出

  我进行了大量搜索，但仍然无法弄清楚如何编写具有多个交互输出的自定义损失函数。 我有一个神经网络定义为: def NeuralNetwork(): inLayer = Input((2,));

• keras - 差异学习率 - Keras

  我正在阅读一篇名为 Differential Learning Rates 的文章在 Medium 上，想知道这是否可以应用于 Keras。我能够找到在 pytorch 中实现的这项技术。这可以在 K

• keras - Keras 如何评估测试集上的损失？

  我正在实现一个神经网络分类器，以打印我正在使用的这个神经网络的损失和准确性: score = model.evaluate(x_test, y_test, verbose=False) model.m

• keras - keras 模型输出形状中的方括号

  我最近在查看模型摘要时遇到了这个问题。 我想知道，[(None, 16)] 和有什么区别？和 (None, 16) ?为什么输入层有这样的输入形状？ 来源:model.summary() can't

• keras - Keras 中基于输入数据的自定义损失函数

  我正在尝试使用 Keras 创建自定义损失函数。我想根据输入计算损失函数并预测神经网络的输出。 我尝试在 Keras 中使用 customloss 函数。我认为 y_true 是我们为训练提供的输出，

• keras - keras 中二维元素的填充序列

  我有一组样本，每个样本都是一组属性的序列(例如，一个样本可以包含 10 个序列，每个序列具有 5 个属性)。属性的数量总是固定的，但序列的数量(时间戳)可能因样本而异。我想使用这个样本集在 Keras

• keras - Keras 中的类数量错误

  Keras 在训练集和测试集文件夹中发现了错误数量的类。我有 3 节课，但它一直说有 4 节课。有人可以帮我吗？ 这里的代码: cnn = Sequential() cnn.add(Conv2D(32

• keras - keras 自定义层中的持久变量

  我想编写一个自定义层，在其中我可以在两次运行之间将变量保存在内存中。例如， class MyLayer(Layer): def __init__(self, out_dim = 51, **kwarg

• keras - Keras:如何将学习率输出到张量板上

  我添加了一个回调来降低学习速度： keras.callbacks.ReduceLROnPlateau(monitor='val_loss', factor=0.5, patience=100,

• keras - keras lstm层中的多个内核是什么意思？

  在 https://keras.io/layers/recurrent/我看到 LSTM 层有一个 kernel和一个 recurrent_kernel .它们的含义是什么？根据我的理解，我们需要 L

• keras - 如何检查安装了哪个版本的 Keras？

  问题与标题相同。 我不想打开 Python，而是使用 MacOS 或 Ubuntu。 最佳答案 Python 库作者将版本号放入 .__version__ 。您可以通过在命令行上运行以下命令来打印它:

• keras - Keras 中的嵌入是什么？

  Keras 文档并不清楚这实际上是什么。我知道我们可以用它来将输入特征空间压缩成更小的空间。但从神经设计的角度来看，这是如何完成的呢？它是一个自动编码器，RBM吗？ 最佳答案 据我所知，嵌入层是一个简

• keras - Keras 的中心损失

  我想实现[http://ydwen.github.io/papers/WenECCV16.pdf]中解释的中心损失]在喀拉斯 我开始创建一个具有 2 个输出的网络，例如: inputs = Input

• keras - keras 中的多对一实现

  我正在尝试实现多对一模型，其中输入是大小为 的词向量d .我需要输出一个大小为 的向量d 在 LSTM 结束时。 在此 question ，提到使用(对于多对一模型) model = Sequenti

• keras - Keras 中验证集的不同损失函数

  我有不平衡的训练数据集，这就是我构建自定义加权分类交叉熵损失函数的原因。但问题是我的验证集是平衡的，我想使用常规的分类交叉熵损失。那么我可以在 Keras 中为验证集传递不同的损失函数吗？我的意思是用

• keras - Keras 中输入数据的规范化

  DL 中的一项常见任务是将输入样本归一化为零均值和单位方差。可以使用如下代码“手动”执行规范化: mean = np.mean(X, axis = 0) std = np.std(X, axis =

• keras - Keras 中回调和进度条的准确性不匹配

  我正在尝试学习 Keras 并使用 LSTM 解决分类问题。我希望能够绘制 准确率和损失，并在训练期间更新图。为此，我正在使用 callback function . 由于某种原因，我在回调中收到的准

• keras - 嵌入 Keras

  在 Keras 内置函数中嵌入使用哪种算法？Word2vec？手套？其他？ https://keras.io/layers/embeddings/ 最佳答案 简短的回答是都不是。本质上，GloVe 的

• keras - keras 中的渐变裁剪

  我有一个使用 Keras 完全实现的 LSTM RNN，我想使用梯度剪裁，梯度范数限制为 5(我正在尝试复制一篇研究论文)。在实现神经网络方面，我是一个初学者，我将如何实现？ 是否只是(我正在使用 r