关于贝叶斯优化的CNN超参数调优？

关于贝叶斯优化的超参数调优，在下有几个问题；
1、一般的超参数调优，比如对bach size进行调优，他的目标函数是什么？是全局的loss吗？
2、是否可以利用CNN输出的loss作为目标函数，对模型中的某个参数进行调优？
3、怎么调用loss啊，cnn中的

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

1条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2019-08-20 00:07
关注
batch调整是为了加快训练的速度，同时不至于降低很多训练的效果。
机器自动超参数调优不是不能做，而是耗时且效果不见得好，因为你每次调整超参，你都要重新训练，在小数据集上又没有效果。
你正向传播，就可以得到输出值，和你的标记结果比较，调用损失函数（比如mae）就可以得到loss

本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决 1

无用 1
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

关于贝叶斯优化的CNN超参数调优？ tensorflow 机器学习深度学习神经网络
2019-08-19 08:58

回答 1 已采纳 batch调整是为了加快训练的速度，同时不至于降低很多训练的效果。机器自动超参数调优不是不能做，而是耗时且效果不见得好，因为你每次调整超参，你都要重新训练，在小数据集上又没有效果。你正向传播，
引入朴素贝叶斯模型时，出现报错，该怎么解决？人工智能数据挖掘机器学习
2021-02-28 11:38

回答 1 已采纳 numpy在其最新版本中已弃用numpy.testing.nosetester，问题及解决方案见： https://qastack.cn/programming/59474533/modulenot
在处理动态交通系统分析任务时，如何提高优化问题？性能优化
2022-08-24 11:01

回答 1 已采纳根据你的模型设计，基础的像分类概率交叉熵，距离欧式距离什么的，这个是数学问题，核心就是如何度量输出值和真实值之间的差异更加科学，比如你输出的是概率值，真实值也是概率，两个概率的差异的平方就很不科学。不
基于贝叶斯优化CNN-LSTM混合神经网络预测（Matlab实现）
2023-06-05 11:25

小P学长的博客 贝叶斯优化：使用贝叶斯优化算法对模型进行超参数调优，包括学习率、批量大小、卷积核大小、LSTM单元数等。模型设计：设计CNN-LSTM混合神经网络模型，包括卷积层、池化层、LSTM层和全连接层等。设计CNN-LSTM混合神经...
关于概率贝叶斯公式的人工智能其他
2021-06-23 11:01

回答 2 已采纳答案是十分之一烟民占比10%，女烟民占比1%，则女烟民在烟民中占比为10%，遇到烟民，则10%概率是女性，和男性女性总人数没关系了
到底 Judea Pearl 提出的因果推理和贝叶斯网络是什么，求深入浅出讲解？人工智能
2021-07-19 10:12

回答 1 已采纳找些综述看看
哪些机器学习算法可以估计参数呢？机器学习算法
2018-10-15 13:41

回答 1 已采纳机器学习算法都可以“估计参数”，机器学习无论什么算法，本质上都是通过估计参数渐进地提高算法的准确性。如果你要问有哪些机器学习算法，那么常用的有支持向量机（估计参数是超平面的方程参数）、决策树（估计
深度学习技巧应用36-深度学习模型训练中的超参数调优指南大全,总结相关问题与答案
2024-02-08 14:52

微学AI的博客大家好，我是微学AI，今天给大家介绍一下深度学习技巧应用36-深度学习模型训练中的超参数调优指南大全,总结相关问题与答案。深度学习模型训练中的调优指南大全概括了数据预处理、模型架构设计、超参数优化、正则化...
贝叶斯网络三种形式怎么理解人工智能机器学习
2022-02-09 10:27

回答 1 已采纳您可以参考https://blog.csdn.net/FRIGIDWINTER/article/details/115404656?spm=1001.2014.3001.5502我在其中进行了推导。此
基于朴素贝叶斯和sift特征的图像分类（Python） python 人工智能机器学习深度学习
2020-04-20 14:11

回答 1 已采纳不知道你这个问题是否已经解决, 如果还没有解决的话: 看下这篇博客，也许你就懂了，链接：图像特征检测—SIFT算法应用（Python）如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 以帮助
如何创建一个mysql_query来拉动使用贝叶斯平均值排名的项目？ mysql php
2011-06-20 03:41

回答 1 已采纳 A simple way would be to use two queries. Perhaps this will do the trick Query #1 SELECT AVG
高效训练模型——参数量与超参数调优
2023-08-13 01:18

禅与计算机程序设计艺术的博客随着深度学习领域的火热，越来越多的研究...本文将通过“参数量”和“超参数”两个主要的训练模型性能指标，深入探讨训练过程中的参数优化方法。并试图找到合适的参数数量和超参数设置，最大程度地提升训练模型的性能。
人脑与贝叶斯，什么是先验概率，那后验概率呢？ python
2022-10-23 22:54

回答 1 已采纳您好先验概率：就是根据以往经验得到的概率，属于客观概率。统计历史下的概率。比如根据若干年的统计（经验）或者气候（常识），某地方下雨的概率，这种方式就属于先验概率。后验概率：就是当下由因及果的概率。比
超参数优化与NNI(HPO，Hyper-parameter optimization)
2020-03-31 11:37

Macropodus的博客 超参数优化 (HPO) 是 Hyper-parameter optimization的缩写，中文可以翻译为自动机器学习，我比较喜欢叫它“机器学习自动化”，更加接近人们所津津乐道的通用人工智能吧。二、AutoML特性从比较出名的开源Auto...
Transformer的优化算法与超参数调优
2024-04-07 01:37

禅与计算机程序设计艺术的博客 Transformer的优化算法与超参数调优作者：禅与计算机程序设计艺术 1. 背景介绍 Transformer模型自2017年被提出以来，凭借其在自然语言处理和机器翻译等领域的出色表现，已经成为当前最为广泛使用的深度学习模型之一...
没有解决我的问题, 去提问

悬赏问题

¥15 （希望可以解决问题）ma和mb文件无法正常打开，打开后是空白，但是有正常内存占用，但可以在打开Maya应用程序后打开场景ma和mb格式。
¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
¥20 腾讯企业邮箱邮件可以恢复么
¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗？
¥15 错误 LNK2001 无法解析的外部符号
¥50 安装pyaudiokits失败
¥15 计组这些题应该咋做呀
¥60 更换迈创SOL6M4AE卡的时候，驱动要重新装才能使用，怎么解决？
¥15 让node服务器有自动加载文件的功能
¥15 jmeter脚本回放有的是对的有的是错的