Tolshao
工具
解锁播放器的隐藏功能👀用过的都说好😎
动机🤔有时候想看视频，遭遇1-2min的广告，望而却步“歪，我要看的视频也就3min好嘛？？？”有时候你想看个新闻，却还要装个Flash想起乔帮主说的话“移动时代是低功耗设备、触摸屏界面和开放网络标准的时代，Flash已经落伍。”于是乎，mac和win平台下，都有解😎SolutionMac下，果
IINAPotplayeriptv
工具
免费图床搭建:Github+Picgo+jsDelivr
Introduction简单说图床就是一个在网络上存储图片的地方，目的是为了节省本地服务器空间（.md和.html文件里图片是以链接的形式），加快图片打开速度，主要是个人博客和网站使用。微博图床：挂了已经SM.MS：国外服务，慢imgur：国外，被Q，慢七牛云：需要注册国内域名，备案麻烦阿里云：要花
图床PicgojsDelivr
强化学习笔记
强化学习笔记8：整合学习和规划
1、introduction第7章节，讲了PG，从episode经验学习到策略policy之前的章节，讲了从episode经验学习到价值函数本章，从过去经验学习到环境模型通过规划的手段，构建值函数或者策略Model-free没有模型从经验中学习，得到价值函数Model-based有模型根据模型规划价
强化学习 RL学习 Learning规划 Planning
博客
hexo 进阶设置指南（持续更新）
让hexo渲染MathJax复杂公式(默认的渲染引擎复杂公式会报错)Problem对复杂公式的支持不够好，简单公式可以显示，复杂编译错误，验证表明，问题不是mathjax.js导致，是默认hexo引擎编译导致html文本转义错误。ReasonHexo默认使用”hexo-renderer-marked
HexoBlog
强化学习笔记
强化学习笔记7：策略梯度 Policy Gradient
之前的策略优化，用的基本都是ϵ\epsilon-greedy的policyimprove方法，这里介绍policygradient法，不基于v、q函数1.introduction策略梯度是以P(a∣s)P(a|s)入手，概率π(s,a)\pi(s,a)的形式，同样是modelfree的πθ(s,a)
强化学习 RL策略梯度 Policy gradient
博客
从0 -> 1，拥有你的免费个人博客之“打个前站”
为什么想写个博客耍？我们在生活和工作中会遇到的各种问题，现在基本都能从互联网上找到答案，因为个体相较于群体，所能接触到的面，太窄，也太小了。以前常去“百度知道”去搜答案，上网的门槛逐步降低之后，“知道”也不知道了，碎片化的问答里总是充斥着各种水军、广告，令人窒息。现在，你询问搜索引擎的问题，大多会在
Blog
工具
ios黄页：可算让iPhone好用了点儿
张小跳-ios黄页分享一个ios黄页工具，领取方式见文末黄页是什么说白了，可以理解为指电话号码簿，几乎世界每一个城市都有过这种纸张为载体所印制的电话号码本。【百度百科】定义：黄页是国际通用按企业性质和产品类别编排的工商企业电话号码簿，以刊登企业名称、地址、电话号码为主体内容，相当于一个城市或地区的工
ios黄页iPhone
笔记
为什么数值仿真里要用RK4（龙格库塔法）
一年级的时候搬砖搬多了，数分课也没好好上，回头一看，这么简单的东西，当时竟然整的稀里糊涂的。为什么要用RK4先po一张图，直观感受一下仿真的误差。对于给定线性常微分方程x˙=x\dotx=x易得，其解是x(t)=Cetx(t)=Ce^tRK4是龙格库塔法曲线，None是一阶解法x(t+dt)=x(t
RK4数值仿真
强化学习笔记
强化学习笔记6：值函数估计Value function Approximation
introductionv、q表的问题解决离散化的s,a,导致q-table存储量、运算量大解决连续s、a的表示问题solution用带权重估计函数，估计vorqv^(s,w)≈vπ(s)orq^(s,a,w)≈qπ(s,a)\begin{aligned}\hat{v}(s,\mathbf{w})&
强化学习 RL值函数估计 value function approximation
机器学习笔记
深度学习22张精炼图笔记总结
深度学习精炼图笔记总结本文转自知乎（Sophia）公众号【计算机视觉联盟】笔记图片由TessFerrandez整理，这套信息图优美地记录了深度学习课程的知识与亮点。因此它不仅仅适合初学者了解深度学习，还适合机器学习从业者和研究者复习基本概念。这不仅仅是一份课程笔记，同时还是一套信息图与备忘录。从深度
深度学习DL
机器学习笔记
Keras & Tensorflow 笔记
Keras是一个高层神经网络API，Keras由纯Python编写而成并基于Tensorflow、Theano以及CNTK后端。Keras为支持快速实验而生，能够把你的idea迅速转换为结果，如果你有如下需求，请选择Keras：简易和快速的原型设计（keras具有高度模块化，极简，和可扩充特性）支持
机器学习 MLkerastensorflow
强化学习笔记
强化学习笔记5：无模型控制 Model-free control
适用于：MDPmodel未知：经验的采样可以获取MDPmodel已知：无法使用（e.g.原子级动力学），采样可以使用策略、非策略学习：On-policy：动作采样来自policyπ\piOff-policy：采样来自采样μ或来自于其他策略π\pi，On-policyMCcontrol贪婪策略梯度法如
强化学习 RL无模型控制 model-free control
机器学习笔记
深度学习-Coursera笔记
AI->机器学习分类图分类几种网络结构分类NN——回归预测CNN（convolutionNN）卷积神经网络——图片RNN(RecurrentNeuralNetwork）递归神经网络——声音、语言处理LSTM长短期记忆网络——激活函数sigmoidReLU——rectifiedlinearunit修正
深度学习 DL机器学习 MLCoursera