Spark的mllib有bug？ - 未名空间MITBBS历史存档

c*e2015-08-08 07:08

1 楼

【以下文字转载自 Reunion 讨论区】
发信人: chore (酷儿), 信区: Reunion
标题: 求问父母B2递签材料（本人从F1变H1B）
发信站: BBS 未名空间站 (Sun Nov 23 23:59:12 2014, 美东)
去年父母在我OPT期间面签来过一次，当时领馆收了我的I20和I94等身份证明材料。今
年我是H1B，父母符合免面签条件，看网上说免面签只要交以下材料，新系统开始中信
银行不收多余材料。
1.护照
2.照片
3.DS160确认页
4.文件提交确认页
5.签证费收据
6.邀请信兼行程安排
虽然说他们的B2签证和我的身份没有关系，但由于邀请信里签证目的是探亲+旅游，我
的身份变化了，所以疑惑是不是需要我的收入证明，H1B材料等。请经历过的朋友给点
帮助，多谢。

c*y2015-08-08 07:08

2 楼

http://www.qidian.com/Book/2100010.aspx
大力是一个能力平庸知识有限的底层代练员，穿越到五年前的游戏初期也只想混的比
前世好一些，死搬攻略的他频频失误，阴差阳错之下奇遇连连笑料百出。
本书穿越者争霸，女尊争霸，高富帅争霸，纨绔争霸，职业高玩争霸，中二争霸，
吊丝争霸，NPC争霸。而冠满神之手救世主龙骑士大领主亲王各头衔于一身的大力则表
示：低调发展永不称霸！
大力是一个废材，但再牛逼的人都在为他打工。大力欠一身巨债，但全世界都在为
他买单。
这是一个没有特长，善良而市侩的小人物艰辛的“被”奋斗史。
这是一个真猪吃真虎的“被”代练传说。
本书的又轻又快又爽又欢乐！不装逼不霸气不脑残不后宫不花痴不倒贴不YY。希望
本书能给书友们带来别样的感受。

C*e2015-08-08 07:08

3 楼

training testing 比例不论怎么分，每个stage的input data都是一样多，速度都差不
多（当然计算结果是没错的）。。。只有当我真的把输入数据分好了然后只读入
training data，速度才会快起来。。
这个太bug了吧。。。。

m*s2015-08-08 07:08

4 楼

不懂帮顶

k*a2015-08-08 07:08

5 楼

本版推荐了好几轮了，目前似乎快完结了...

【在 c****y 的大作中提到】

: http://www.qidian.com/Book/2100010.aspx
: 大力是一个能力平庸知识有限的底层代练员，穿越到五年前的游戏初期也只想混的比
: 前世好一些，死搬攻略的他频频失误，阴差阳错之下奇遇连连笑料百出。
: 本书穿越者争霸，女尊争霸，高富帅争霸，纨绔争霸，职业高玩争霸，中二争霸，
: 吊丝争霸，NPC争霸。而冠满神之手救世主龙骑士大领主亲王各头衔于一身的大力则表
: 示：低调发展永不称霸！
: 大力是一个废材，但再牛逼的人都在为他打工。大力欠一身巨债，但全世界都在为
: 他买单。
: 这是一个没有特长，善良而市侩的小人物艰辛的“被”奋斗史。
: 这是一个真猪吃真虎的“被”代练传说。

x*42015-08-08 07:08

6 楼

什么意思？发code看看？

g*22015-08-08 07:08

7 楼

如果是由中信银行递签，则只需前4项，其他问题在DS160填表说明，如旅行计划-来回
程航班号，旅行城市。虽然你在美身份由F变为H，但都是“非移民”身份，不用变更和
说明。

【在 c***e 的大作中提到】

: 【以下文字转载自 Reunion 讨论区】
: 发信人: chore (酷儿), 信区: Reunion
: 标题: 求问父母B2递签材料（本人从F1变H1B）
: 发信站: BBS 未名空间站 (Sun Nov 23 23:59:12 2014, 美东)
: 去年父母在我OPT期间面签来过一次，当时领馆收了我的I20和I94等身份证明材料。今
: 年我是H1B，父母符合免面签条件，看网上说免面签只要交以下材料，新系统开始中信
: 银行不收多余材料。
: 1.护照
: 2.照片
: 3.DS160确认页

T*c2015-08-08 07:08

8 楼

嗯，从推荐到小骂到复兴，这都好几轮了

【在 k*****a 的大作中提到】

: 本版推荐了好几轮了，目前似乎快完结了...

C*e2015-08-08 07:08

9 楼

code肯定没问题，就是原样的example的code
http://spark.apache.org/docs/latest/mllib-optimization.html
我先load了data，然后random split：
val splits = data.randomSplit(Array(0.6, 0.4), seed = 11L)
val training = splits(0).map(x => (x.label, MLUtils.appendBias(x.features)))
.cache()
不论我用0.6, 0.4比例，还是别的比如0.9, 0.1，任务控制页面看到的input size都是
一样的；
如果我事先把data按照某个比例分好training和testing，分别load进来，不用那个
randomsplit来分，那么能看到input size会相应变化

【在 x***4 的大作中提到】

: 什么意思？发code看看？

c*e2015-08-08 07:08

10 楼

好的。非常感谢！

【在 g*****2 的大作中提到】

: 如果是由中信银行递签，则只需前4项，其他问题在DS160填表说明，如旅行计划-来回
: 程航班号，旅行城市。虽然你在美身份由F变为H，但都是“非移民”身份，不用变更和
: 说明。

f*n2015-08-08 07:08

11 楼

咋复兴的？谁给介绍一下简史？

x*42015-08-08 07:08

12 楼

randomSplit 是lazy的，会马上返回。真正的sample的操作会在你call rdd action的
时候才会执行。

))

【在 C********e 的大作中提到】

: code肯定没问题，就是原样的example的code
: http://spark.apache.org/docs/latest/mllib-optimization.html
: 我先load了data，然后random split：
: val splits = data.randomSplit(Array(0.6, 0.4), seed = 11L)
: val training = splits(0).map(x => (x.label, MLUtils.appendBias(x.features)))
: .cache()
: 不论我用0.6, 0.4比例，还是别的比如0.9, 0.1，任务控制页面看到的input size都是
: 一样的；
: 如果我事先把data按照某个比例分好training和testing，分别load进来，不用那个
: randomsplit来分，那么能看到input size会相应变化

c*e2015-08-08 07:08

13 楼

更新，父母签证都已通过，谢谢楼上这位朋友的解答
两个人同时交的，但并不是同时处理，快的3天就回传了，另一本护照已经在回来的路
上了。
多谢

c*y2015-08-08 07:08

14 楼

就是要养肥全本了才看得爽呀：）

C*e2015-08-08 07:08

15 楼

spark能不能设定让这个立刻执行？

【在 x***4 的大作中提到】

: randomSplit 是lazy的，会马上返回。真正的sample的操作会在你call rdd action的
: 时候才会执行。
:
: ))

p*t2015-08-08 07:08

16 楼

这本书如果不要写现实，也不要动不动就“撸一把”，就更好了

【在 c****y 的大作中提到】

: http://www.qidian.com/Book/2100010.aspx
: 大力是一个能力平庸知识有限的底层代练员，穿越到五年前的游戏初期也只想混的比
: 前世好一些，死搬攻略的他频频失误，阴差阳错之下奇遇连连笑料百出。
: 本书穿越者争霸，女尊争霸，高富帅争霸，纨绔争霸，职业高玩争霸，中二争霸，
: 吊丝争霸，NPC争霸。而冠满神之手救世主龙骑士大领主亲王各头衔于一身的大力则表
: 示：低调发展永不称霸！
: 大力是一个废材，但再牛逼的人都在为他打工。大力欠一身巨债，但全世界都在为
: 他买单。
: 这是一个没有特长，善良而市侩的小人物艰辛的“被”奋斗史。
: 这是一个真猪吃真虎的“被”代练传说。

l*u2015-08-08 07:08

17 楼

好像应该不行把，这是由scala语法决定的，lazy的变量只有在需要它的时候才会被调
用执行

【在 C********e 的大作中提到】

: spark能不能设定让这个立刻执行？

c*y2015-08-08 07:08

18 楼

这个“撸一把”和“撸席”是主角的人生意义所在：）

【在 p****t 的大作中提到】

: 这本书如果不要写现实，也不要动不动就“撸一把”，就更好了

x*42015-08-08 07:08

19 楼

就是故意设计成这样的。

【在 C********e 的大作中提到】

: spark能不能设定让这个立刻执行？

b*k2015-08-08 07:08

20 楼

最近挺无趣的

【在 c****y 的大作中提到】

: http://www.qidian.com/Book/2100010.aspx
: 大力是一个能力平庸知识有限的底层代练员，穿越到五年前的游戏初期也只想混的比
: 前世好一些，死搬攻略的他频频失误，阴差阳错之下奇遇连连笑料百出。
: 本书穿越者争霸，女尊争霸，高富帅争霸，纨绔争霸，职业高玩争霸，中二争霸，
: 吊丝争霸，NPC争霸。而冠满神之手救世主龙骑士大领主亲王各头衔于一身的大力则表
: 示：低调发展永不称霸！
: 大力是一个废材，但再牛逼的人都在为他打工。大力欠一身巨债，但全世界都在为
: 他买单。
: 这是一个没有特长，善良而市侩的小人物艰辛的“被”奋斗史。
: 这是一个真猪吃真虎的“被”代练传说。

C*e2015-08-08 07:08

21 楼

那在这种情况下，这种设计岂不是让速度慢了不少。。。

【在 x***4 的大作中提到】

: 就是故意设计成这样的。

n*02015-08-08 07:08

22 楼

听说可以避免不必要的计算，应该是会让速度加快的233.

【在 C********e 的大作中提到】

: 那在这种情况下，这种设计岂不是让速度慢了不少。。。

d*n2015-08-08 07:08

23 楼

只有交互环境才会觉得慢吧。lazy的好处是把执行和优化分来了，当然有人也可能觉得
后台优化是个缺点。

【在 C********e 的大作中提到】

: 那在这种情况下，这种设计岂不是让速度慢了不少。。。

S*s2015-08-08 07:08

24 楼

You used seed for randomSplit, so it's no longer random and it's testable

))

【在 C********e 的大作中提到】

: code肯定没问题，就是原样的example的code
: http://spark.apache.org/docs/latest/mllib-optimization.html
: 我先load了data，然后random split：
: val splits = data.randomSplit(Array(0.6, 0.4), seed = 11L)
: val training = splits(0).map(x => (x.label, MLUtils.appendBias(x.features)))
: .cache()
: 不论我用0.6, 0.4比例，还是别的比如0.9, 0.1，任务控制页面看到的input size都是
: 一样的；
: 如果我事先把data按照某个比例分好training和testing，分别load进来，不用那个
: randomsplit来分，那么能看到input size会相应变化

C*e2015-08-08 07:08

25 楼

什么意思呢？能否具体说说？

【在 S***s 的大作中提到】

: You used seed for randomSplit, so it's no longer random and it's testable
:
: ))