jkd112233 2022-11-07 10:24 采纳率: 85.4%
浏览 19
已结题

关于梯度下降法的问题

有以下数据：

img

如果我们使用梯度下降算法来最小化线性回归的代价函数，那么前三次迭代的θ值和代价(cost)值是多少?（可以的话写出解答的全流程）
假设初始θ值为[1,0.5]T，学习率(learning rate)α为0.1。

  • 写回答

2条回答 默认 最新

  • CSDN-Ada助手 CSDN-AI 官方账号 2022-11-07 12:23
    关注
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)
编辑
预览

报告相同问题？

  • 梯度下降算法、牛顿迭代算法的相关问题 人工智能 机器学习 算法
    2022-02-08 03:56
    回答 2 已采纳 这些知识属于工程数学原理的内容，具体分支是最优化理论，您可以参考相关教材。一般地，优化问题可以分为无约束优化和有约束优化，您提到的梯度法和牛顿法都属于无约束优化中的梯度类方法，此外无约束优化中还有非梯
  • 坐标下降法加两行代码变梯度下降法 python
    2023-04-15 09:38
    回答 1 已采纳 这个问题的回答你可以参考下: https://ask.csdn.net/questions/7769862我还给你找了一篇非常好的博客，你可以看看是否有帮助，链接：最优化算法简单对比 梯度下降 牛顿迭
  • 梯度下降的实现，如下， python 人工智能 推荐算法
    2022-09-16 01:56
    回答 2 已采纳 得保存，用俩pre_代表上一个数
  • 人工智能-梯度下降法Python实现
    2020-12-21 09:01
    梯度下降法是优化算法中的一种基本方法，广泛应用于机器学习和深度学习领域，尤其在求解损失函数最小化问题时。它的核心思想是沿着目标函数梯度的反方向更新参数，以期逐渐逼近函数的最小值。在微积分中，梯度是一个...
  • 求大神解答，用梯度下降法优化损失函数，损失函数可以由循环产生吗？
    2018-11-07 18:36
    回答 1 已采纳 损失函数本来都是循环，无论是mse mae crossentropy...，但是关优化算法（反向传播算法）什么事呢。很慢就应该用gpu去加速啊，sgd要设置学习率、动量
  • 关于机器学习梯度下降求 w 和 b 的问题 人工智能 机器学习 深度学习
    2020-02-22 06:04
    回答 2 已采纳 fit函数里面的while循环里的第一个if语句是想判断当前求得的self.w的精度，如果self.w和b的改变小于precision即认为精度达到要求，退出循环！ 而第一次while循环时明显
  • 关于利用梯度下降求参数 python 人工智能 机器学习
    2022-10-16 12:37
    回答 2 已采纳 loss先下降后上升，可能的原因之一是学习率比较大，随机梯度下降算法没法收敛。其他的疑问有点不太理解你的意思，哈哈！
  • 人工智能与机器学习-梯度下降法
    2020-12-21 09:02
    梯度下降法是机器学习和人工智能领域中一个基础且重要的优化算法，尤其在训练模型时用于寻找损失函数的最小值。它是一种一阶最优化方法，通过沿着目标函数梯度的负方向进行迭代更新，逐步接近局部最优解。 一、梯度...
  • 生成式对抗网络中梯度消失的问题
    2017-10-18 23:38
    回答 1 已采纳 请搜索关于wgan的内容，自然会明白
  • 深度学习有关梯度的问题 python 机器学习 深度学习
    2022-08-02 11:28
    回答 2 已采纳 没啥问题，在你 a 的初值为 a = 0.0827 的情况下，d 最终为可以表达为 d = (2^14) * a = 16384 * a，所以 d 关于 a 的偏导数为 dd/da = 16384，属
  • 一道微积分里的关于梯度和方向导数的易混淆问题 其他
    2022-03-18 07:36
    回答 1 已采纳 所谓陡峭，就是角度大这里既然问的是视线，肯定不是相对于地面的角度，而是相对于视线的角度当你爬山的时候，你眼睛往上看，那你的视线和山是平行的你看向山的时候，你的视线和山是垂直的
  • 人工智能梯度下降算法python代码
    2023-04-08 01:22
    总的来说，人工智能中的梯度下降算法是解决优化问题的核心工具，特别是在训练机器学习模型时。Python提供了便利的库，如NumPy，用于高效地执行矩阵运算，使得实现梯度下降变得相对简单。通过理解和掌握这一算法，...
  • 梯度下降法,梯度下降法原理和步骤,matlab
    2021-09-10 09:44
    在许多数据分析和人工智能任务中，如线性回归、逻辑回归、神经网络等，梯度下降法是求解参数最优化的主要工具。接下来，我们将详细讨论梯度下降法的原理、步骤以及在MATLAB中的实现。 **一、梯度下降法的原理** ...
  • 6种梯度下降算法介绍
    2024-10-10 09:57
    彬彬侠的博客 1.批量梯度下降：使用所有样本更新参数，收敛稳定，但速度较慢。2.随机梯度下降：每次更新一个样本，速度快，但收敛波动较大。3.小批量梯度下降：折中方案，每次使用小批量样本，平衡速度与稳定性。4.动量法：通过...
  • 没有解决我的问题, 去提问

问题事件

  • 系统已结题 11月16日
  • 已采纳回答 11月9日
  • 创建了问题 11月7日
手机看
程序员都在用的中文IT技术交流社区

程序员都在用的中文IT技术交流社区

专业的中文 IT 技术社区，与千万技术人共成长

专业的中文 IT 技术社区，与千万技术人共成长

关注【CSDN】视频号，行业资讯、技术分享精彩不断，直播好礼送不停！

关注【CSDN】视频号，行业资讯、技术分享精彩不断，直播好礼送不停！

 客服 返回
顶部