python - scipy 优化 fmin ValueError : setting an array element with a sequence

Question

当使用 scipy.optimize 的 fmin 时，我收到一个我不明白的错误:

ValueError: setting an array element with a sequence.

这里有一个简单的平方误差示例来演示:

import numpy as np
from scipy.optimize import fmin

def cost_function(theta, X, y):    
    m = X.shape[0]
    error = X.dot(theta) - y 
    J = 1/(2*m) * error.T.dot(error)  
    return J

X = np.array([[1., 1.],
              [1., 2.],
              [1., 3.],
              [1., 4.]])

y = np.array([[2],[4],[6],[8]])   
initial_theta = np.ones((X.shape[1], 1)) * 0.01

# test cost_function
print cost_function(initial_theta, X, y)
# [[ 14.800675]] seems okay...

# but then error here...   
theta = fmin(cost_function, initial_theta, args=(X, y))

#Traceback (most recent call last):
#  File "C:\Users\me\test.py", line 21, in <module>
#    theta = fmin(cost_function, initial_theta, args=(X, y))
#  File "C:\Python27\lib\site-packages\scipy\optimize\optimize.py", line 278, in fmin
#    fsim[0] = func(x0)
#ValueError: setting an array element with a sequence.

如果能帮助我解释哪里出了问题，我将不胜感激。

Answer 1

原因是你给fmin的起点(initial_theta)不是一维数组而是二维数组。因此，在第二次迭代中，fmin 传递了一个一维数组(它应该是这样工作的)，结果变成了非标量。

因此您应该重构成本函数以接受一维数组作为第一个参数。

要使代码正常工作，最简单的更改是在传递给 fmin 之前将 initial_theta 展平，并根据需要将 cost_function 内的 theta reshape 为 (X.shape[1],1)。