Simple intuition on law of iterated expectation Nested form Posted on January 24, 2021 最近一个月都在搞论文的时候,没有更新。这几天隔离期空闲了,打算重新回顾下强化学习的一些基础知识;而在MDP里一些基础公式的推导,有时候有law of iterated expectation的影子。 [Read More] Tags: probability
A simple paradox of Bayesian Medical test paradox Posted on December 23, 2020 这两天在3Blue1Brown上看到一个关于贝叶斯悖论的视频, Medical test paradox。大概的意思是说,对于一个比较少见的病,即使检测出来呈阳性,那么真正得这个病的概率也很低。把自己看完的理解写一下,这个问题相对简单,但是对应到实际生活中,含义还是很有趣的。先理解一些概念。 [Read More] Tags: probability
A variational inequality framework for network games (Parise and Ozdaglar, 2019) Part 1 Posted on December 22, 2020 这两天在Games and Economic Behavior上看到一篇个人感觉非常有趣的论文,名字是:A variational inequality framework for network games: Existence, uniqueness, convergence and sensitivity analysis。这篇文章试图用Finite Variational Inequality (VI)的框架去把之前文献中存在的一些关于network game的模型做一个统一。使用VI的主要作用是为了克服文献中使用potential game的框架所无法处理的asymmetric cost function。一些文献中已经研究的模型,可以看做是这篇文章在一定取值下的speical cases. [Read More] Tags: game theory research
Random incidence A bus stop example Posted on December 20, 2020 今天讲一下Random Incidence,我也不太确定Random Incidence的中文翻译是什么,就用英文来表示吧 ᕕ( ՞ ᗜ ՞ )ᕗ。可以先看一个现实中的例子,来看一下它的由来。 [Read More] Tags: probability