DL一个基础问题： - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Programming - 葵花宝典

DL一个基础问题：

DL一个基础问题：# Programming - 葵花宝典

s*k2017-02-28 08:02

1 楼

【以下文字转载自 ebiz 讨论区】
发信人: solidk (很伤心), 信区: ebiz
标题: 怎么好象没有人讨论offermatic
发信站: BBS 未名空间站 (Wed Dec 15 16:15:38 2010, 美东)
这个网站究竟怎样，貌似很好，不知道可不可信

r*c2017-02-28 08:02

2 楼

http://hi.baidu.com/bluesky_3/blog/item/dc4a9d24d7db2a028b82a14
纳闷好奇，闭关，是为了什么呀？就是为闭关而闭关，还是说通过闭关达到一个什么修
行的目的？
感觉好辛苦好风霜的样子。。。。
引：
在青海藏区高原的一个山洞里，拉松杰已经闭关了几十年。他每天都要在一块宽不到五
十公分，长不到两米的木板上磕长头，木板下方的踩踏处几乎已经被双脚磨穿了，两侧
双手滑出去时留下了两道深深的凹痕，而这已经是他换过的第三块这样的木板了。
拉松杰将这块板送给了火风，他说：“我在这块板子上磕了二百三十万个长头了。”

吉和贤，89岁，已闭关50多年，其中无杂念闭关达30多年。
这位大德发愿要为天下众生、为世界和平而终生闭关。告别时吉和贤将自己念了50多年
的佛珠送给了火风。
嘉洋卓玛，62岁，50岁出家，闭关12年，已磕长头一百二十万个，闭斋二百一十六天，
念四皈依和宗喀巴大师赞四十万遍，念金刚萨埵百字明和曼扎罗十万遍，念绿度母赞十
万遍，念普贤菩萨行愿三千六百遍，六字箴言一亿遍。她从手腕上摘下自己那串加持了
无数遍经文的念珠，送给了火风
华乾，87岁，7岁出家，13岁闭关至今，已闭斋4000余天。当火风问：“为什么闭关”
时，大德的回答与吉和贤说的一字不差：“为世界和平、为天下众生
这位瑜伽士的头发已达四米多长，告别时他打开盘在头顶的长发，从中挑出一缕，剪下
后送给火风：“这是与生俱来的，跟我的生命一样”
却尼桑姆，21岁出家，已闭关7年迄今已完成50个长头、莲花生大师心咒一千万遍、六
字大明咒一千万遍。发誓一生闭关
火风含着眼泪讲述了一个又一个这样的故事……我在想，末法的时代却还有如此修行的
高僧大德，他们身上所传导出的温暖和慈悲、信念和恩德，智慧和高贵，足以开启世人
的生命。而火风能够有幸拜见到这么多位伟大的喇嘛，我愿意相信那必是得到了上师们
的加持力。

c*m2017-02-28 08:02

3 楼

快抢
http://www.amazon.com/Samsung-Galaxy-10-1-Inch-16GB-Wi-Fi/dp/B0
tablet 大战马上就来了。

s*k2017-02-28 08:02

4 楼

为什么DL每次的minibatch随机选取就可以，而不用像adaboost那样如果训练错了的下
次特征选取加更高的权重？是为了避免overfit？

r*c2017-02-28 08:02

5 楼

【在 r*******c 的大作中提到】

: http://hi.baidu.com/bluesky_3/blog/item/dc4a9d24d7db2a028b82a14
: 纳闷好奇，闭关，是为了什么呀？就是为闭关而闭关，还是说通过闭关达到一个什么修
: 行的目的？
: 感觉好辛苦好风霜的样子。。。。
: 引：
: 在青海藏区高原的一个山洞里，拉松杰已经闭关了几十年。他每天都要在一块宽不到五
: 十公分，长不到两米的木板上磕长头，木板下方的踩踏处几乎已经被双脚磨穿了，两侧
: 双手滑出去时留下了两道深深的凹痕，而这已经是他换过的第三块这样的木板了。
: 拉松杰将这块板送给了火风，他说：“我在这块板子上磕了二百三十万个长头了。”
:

y*g2017-02-28 08:02

6 楼

又不是399，抢什么？

x*u2017-02-28 08:02

7 楼

数据多少不一样啊，如果你训练数据极少，权重就很有必要

【在 s********k 的大作中提到】

: 为什么DL每次的minibatch随机选取就可以，而不用像adaboost那样如果训练错了的下
: 次特征选取加更高的权重？是为了避免overfit？

S*U2017-02-28 08:02

8 楼

他们自己说了∶“为世界和平、为天下众生"。
从内心的平静与开悟，世界上才会有和平与幸福。
现代文明的盲点，是追逐外在的物质，以为满足欲望就幸福快乐，而对开发内心不重视
也不了解。

【在 r*******c 的大作中提到】

r*l2017-02-28 08:02

9 楼

太贵。
而且我不用韩国货。

【在 c**m 的大作中提到】

: 快抢
: http://www.amazon.com/Samsung-Galaxy-10-1-Inch-16GB-Wi-Fi/dp/B0
: tablet 大战马上就来了。

s*k2017-02-28 08:02

10 楼

即使这样，如果有针对对minibatch再选取权重，会不会提高效率？还是会overfitting？

【在 x****u 的大作中提到】

: 数据多少不一样啊，如果你训练数据极少，权重就很有必要

f*l2017-02-28 08:02

11 楼

人，貌似是很容易就能认识到追逐的那些物质还有很多东西都是易逝的，不牢靠的。。。

【在 S**U 的大作中提到】

: 他们自己说了∶“为世界和平、为天下众生"。
: 从内心的平静与开悟，世界上才会有和平与幸福。
: 现代文明的盲点，是追逐外在的物质，以为满足欲望就幸福快乐，而对开发内心不重视
: 也不了解。

t*r2017-02-28 08:02

12 楼

比金刚贵一百，根本不值，不值。

w*g2017-02-28 08:02

13 楼

都会。可能性你都说了，剩下就是自己去试了。这种paper很多, deep learning的也有，
但是这种事情没法指望一般性的结论。

overfitting？

【在 s********k 的大作中提到】

: 即使这样，如果有针对对minibatch再选取权重，会不会提高效率？还是会overfitting？

d*y2017-02-28 08:02

14 楼

啥叫“闭关”啊？
都能让人拍照，送人东西，教学，周围还一群人，这也叫“闭关”？直接说修行不行么？
我不懂啥叫“闭关”，故发此问。

【在 r*******c 的大作中提到】

s*l2017-02-28 08:02

15 楼

同意
到现在为止 dl大部分经验都是试出来的
没啥理论基础
你也可以应该试一下

有，

【在 w***g 的大作中提到】

: 都会。可能性你都说了，剩下就是自己去试了。这种paper很多, deep learning的也有，
: 但是这种事情没法指望一般性的结论。
:
: overfitting？

d*y2017-02-28 08:02

16 楼

m7帅得跟老白似的

【在 r*******c 的大作中提到】

h*c2017-02-28 08:02

17 楼

banach space 好象就说这现象把

【在 s*****l 的大作中提到】

: 同意
: 到现在为止 dl大部分经验都是试出来的
: 没啥理论基础
: 你也可以应该试一下
:
: 有，

d*e2017-02-28 08:02

18 楼

在深山老林里的修行人不少,要到那些西臧的大山,其它山里都有.
不是一般人都做到的.
要年轻,要身体非常健康,又完全没有家庭拖累,那是非常吃苦的.
这样的人是有的,也不一定是照片上的这些.
我阿姨知道一个地方,她们见到过一个高人.
我阿姨她们也是一起去那里闭过关的.
我是如此思念我的阿姨啊.....

【在 r*******c 的大作中提到】

s*k2017-02-28 08:02

19 楼

大牛，你觉得比如adaboost那种迭代式选取feature的方法，在deep learning中适用吗
？比如我每次minibatch选了一部分上次训练错误的特征重新来训练，实际中我在一个
很小的dataset试了一下，感觉没啥差别，难道是DL抹平了这种原来学习机制的不足？

有，

【在 w***g 的大作中提到】

: 都会。可能性你都说了，剩下就是自己去试了。这种paper很多, deep learning的也有，
: 但是这种事情没法指望一般性的结论。
:
: overfitting？

a*y2017-02-28 08:02

20 楼

我觉得可以这么理解,人是一个仪器,通过各种感觉器官跟外部世界接触,
在这个过程中也受到影响,驱动和塑造,这些反应的产物就是各种成形的观念,习性等等.
闭关可以看作一种科学实验,相当于屏蔽大部分外界接触的环节,
看看这个时候心灵会有什么形态的变化,比不闭关的状态有什么优点和缺点

【在 r*******c 的大作中提到】

w*g2017-02-28 08:02

21 楼

别纠结了。折腾形而上学没他大意义。你要真有心测试，也得搞十来个比较大的
dataset吧。而且还不能时nmist那种accuracy已经做到99%的。即使那样，还可能有各
种非数学上的原因让你测出来没多大差别，比如你的程序/参数有错。
我觉得你太钻牛角尖了。包括上次来问线性规划。机器学习水非常深，坑非常多。
如果你想把从线性规划到deep learning之间所有的坑都踩一遍，所有的问题都想明白。
那这辈子都不够用。你应该问的是我手上有这个dataset，已经试了这个这个方法能做到
什么样，接下来怎么做提高的可能性最大。

【在 s********k 的大作中提到】

: 大牛，你觉得比如adaboost那种迭代式选取feature的方法，在deep learning中适用吗
: ？比如我每次minibatch选了一部分上次训练错误的特征重新来训练，实际中我在一个
: 很小的dataset试了一下，感觉没啥差别，难道是DL抹平了这种原来学习机制的不足？
:
: 有，

r*c2017-02-28 08:02

22 楼

咦，版主，你这个说法很有道理哦。。。。。

等.

【在 a*****y 的大作中提到】

: 我觉得可以这么理解,人是一个仪器,通过各种感觉器官跟外部世界接触,
: 在这个过程中也受到影响,驱动和塑造,这些反应的产物就是各种成形的观念,习性等等.
: 闭关可以看作一种科学实验,相当于屏蔽大部分外界接触的环节,
: 看看这个时候心灵会有什么形态的变化,比不闭关的状态有什么优点和缺点

s*k2017-02-28 08:02

23 楼

有道理，不做学术确实不用纠结太多，主要是以前用过经典很多ML做事，然后离开这个
一段时间，现在回来看DL免不了比较一下

白。
做到

【在 w***g 的大作中提到】

: 别纠结了。折腾形而上学没他大意义。你要真有心测试，也得搞十来个比较大的
: dataset吧。而且还不能时nmist那种accuracy已经做到99%的。即使那样，还可能有各
: 种非数学上的原因让你测出来没多大差别，比如你的程序/参数有错。
: 我觉得你太钻牛角尖了。包括上次来问线性规划。机器学习水非常深，坑非常多。
: 如果你想把从线性规划到deep learning之间所有的坑都踩一遍，所有的问题都想明白。
: 那这辈子都不够用。你应该问的是我手上有这个dataset，已经试了这个这个方法能做到
: 什么样，接下来怎么做提高的可能性最大。

r*c2017-02-28 08:02

24 楼

呵呵。
M5的那个师太头发那个长呀。。。。。。

【在 d******y 的大作中提到】

: m7帅得跟老白似的

g*t2017-02-28 08:02

25 楼

做学术的更不用纠结，算法或者解法不工作，添加不切实际的理论假设
即可。重点是搞好包装。月饼100种，99种是卖盒子的。
说不定现在的瞎猜，20年后就是传奇了。

: 有道理，不做学术确实不用纠结太多，主要是以前用过经典很多ML做事，然后离
开这个

: 一段时间，现在回来看DL免不了比较一下

: 白。

: 做到

【在 s********k 的大作中提到】

: 有道理，不做学术确实不用纠结太多，主要是以前用过经典很多ML做事，然后离开这个
: 一段时间，现在回来看DL免不了比较一下
:
: 白。
: 做到

z*n2017-02-28 08:02

26 楼

可是追逐物质享受的习气可不是那么容易纠正的。

。。

【在 f**l 的大作中提到】

: 人，貌似是很容易就能认识到追逐的那些物质还有很多东西都是易逝的，不牢靠的。。。