machine-learning - 如何更方便地获取超参数？

Question

机器学习中的许多模型都包含超参数。使用保留数据找到这些超参数的最佳实践是什么？或者你有什么方法可以做到这一点？

Answer 1

网格搜索和手动搜索是优化机器学习算法超参数最广泛使用的技术。然而，James Bergstra 和 Yoshua Bengio 最近发表的一篇论文认为，对于超参数优化，随机搜索优于网格和手动搜索。有关随机(网格和手动)搜索的更多信息，请查看他们的论文:

Random Search for Hyper-Parameter Optimization

最近，我提交(并接受)了一篇 Pattern Recognition Letters 的论文杂志。在那篇论文中，我使用了随机搜索技术。