深度学习之优化算法
假设红色部分为一个下凹空间,现在要前往空间的最低点。随机梯度下降法 SGD 低效的根本问题在于,每一步虽然都是立足于当前点的梯度方向(蓝线),但梯度的方向并不一定指向最小值的方向(黑线)。

一切皆有来处,一切终有归途
假设红色部分为一个下凹空间,现在要前往空间的最低点。随机梯度下降法 SGD 低效的根本问题在于,每一步虽然都是立足于当前点的梯度方向(蓝线),但梯度的方向并不一定指向最小值的方向(黑线)。
一种可以迁移浏览器cookie的方法,能够将一个浏览器的登录信息切换到另一个浏览器上,实现无缝对接,避免诸多账号重新登陆的麻烦。
在Windows平台配置scoop包管理工具,并借助其为PowerShell安装模块,以提升使用体验感,达到类zsh的效果。
通过集成化云端开发平台,实现 Hexo 博客资源发布到Git平台后,自动checkout代码并部署环境,构建出静态资源文件后,上传至腾讯云COS对象存储平台进行托管。
在Windows/Linux平台下,使用oh-my-posh工具,对各自平台的命令行进行美化,或者自定义代码高亮提示信息。
通过steam下载游戏时,本地带宽无法跑满,可能是由于cdn不恰当的问题。本文解析代理和直连模式下访问steam时,对cdn产生的影响。