Changkun's Blog

Science and art, life in between.


  • Home

  • Ideas

  • Archives

  • Tags

  • Bio

不笑不足以为道

Published at: 2018-02-25   |   Reading: 134 words ~1min
记得曾经有这么一个小故事,说是欧几里德上完课有个学生发问:『我学这有什么好处?能得到什么呢?』 欧几里德马上叫来仆人:『给这小子一块金币,让他
Read More »

论文笔记:Generalization in Deep Learning

Published at: 2018-01-28   |   Reading: 2557 words ~6min

Generalization in Deep Learning, Kenji Kawaguchi

arXiv: https://arxiv.org/abs/1710.05468

ReLU 网络的路径展开

Section 5、6 是全文最有趣的地方了,可惜这个地方作者表达得不是特别好。一个比较主要问题就是作者没有说明 $w_\sigma$ 的定义,这导致了很多人往后就开始懵逼。我问了一下 Kenji ,确认了一下我的理解,他也承认这个地方写得不是很好,因为 $w_\sigma = \bar{w}$,他使用不同记号的原因在于在 5.3 里面要解释 two-phase training。

Read More »

2017 年终总结

Published at: 2018-01-04   |   Reading: 3305 words ~7min

从高中毕业以后,再也没有受过正儿八经的文学熏陶,感觉几乎丢失了表达能力,以前的我是很喜欢用键盘来宣泄情绪的。 而现在的我,无论是生活、感情还是技术都有过不同程度的感悟、提升后,几乎不愿意甚至不再能够行云流水的分享自己的感悟了。现在的我,突然感觉已经加速「衰老」,步入「三十岁中年」了。2017 年过得很累,希望 2018 能够过得好些吧。

Read More »

2017 读书清单

Published at: 2017-12-29   |   Reading: 775 words ~2min
2017 年一整年十二个月的时间总共有是十一个月待在国外,接触到中文实体书的几率大大降低了。加上越来越忙,而精力有限,一年下来回头看看发现论文倒是看
Read More »

深度学习的泛化理论简介

Published at: 2017-12-17   |   Reading: 3725 words ~8min
本文译自:http://www.offconvex.org/2018/02/17/generalization2/ 译者:欧长坤 正如我们在博客
Read More »
3 4 5 6 7 8 9 10 11
Changkun Ou

Changkun Ou

Stop Talking. Just Coding.

274 Blogs
165 Tags
RSS
Homepage GitHub Email YouTube Twitter Zhihu
Friends
    Frimin ZZZero march1993 qcrao maiyang Xargin Muniao
© 2008 - 2022 Changkun Ou. All rights reserved. | PV/UV: /
0%