w*6
2 楼
在公司刚开始工作，要用spark做一些数据处理
其中一个问题是，有一堆event，会导致状态来回变，想看某一个时刻的状态是啥
比如说，一个开关，一个事件是打开开关，一个事件是关上开关，最后看开关是开是关
。有可能有冗余的数据，比如关上关闭的，或者打开已经打开的。
像这种情况，怎么用spark在cluster上做计算D啊？我觉得顺序很重要啊，分布怎么能
保证顺序呢？或者没关系，最后还是能算到一起？
其中一个问题是，有一堆event，会导致状态来回变，想看某一个时刻的状态是啥
比如说，一个开关，一个事件是打开开关，一个事件是关上开关，最后看开关是开是关
。有可能有冗余的数据，比如关上关闭的，或者打开已经打开的。
像这种情况，怎么用spark在cluster上做计算D啊？我觉得顺序很重要啊，分布怎么能
保证顺序呢？或者没关系，最后还是能算到一起？
b*2
3 楼
如题
m*r
4 楼
我认为白神可以顶替懒猪总，接人老大
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
s*1
5 楼
将数据根据时间排序后
1:00 on
1:11 off
2:00 on
2:11 off
2:20 off
2:40 on
比如要获得2:15时刻的状态，只需看离2:15最近的时刻(2:11)那个状态即可。
比如序列on on off off on 的最终状态是on
此法可以得到任意时刻的状态。
比如求2:15时刻的状态
# 时间从到大小排序
rdd.filter(lambda (time, event): time ).take(1).
其实可以不用排序，根据时间取最大值就好了
1:00 on
1:11 off
2:00 on
2:11 off
2:20 off
2:40 on
比如要获得2:15时刻的状态，只需看离2:15最近的时刻(2:11)那个状态即可。
比如序列on on off off on 的最终状态是on
此法可以得到任意时刻的状态。
比如求2:15时刻的状态
# 时间从到大小排序
rdd.filter(lambda (time, event): time ).take(1).
其实可以不用排序，根据时间取最大值就好了
c*y
6 楼
看情况，一般至少一倍焦距
【在 b********2 的大作中提到】
: 如题
【在 b********2 的大作中提到】
: 如题
a*a
7 楼
re
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
c*4
8 楼
是sparkstreaming吗？如果是的话应该有个checkpoint的文件夹，如果中途fail了，看
看里面有没有数据，说明已经结束，就重新new好了，如果有数据，就拿出来接着用。
如果用zookeeper的话，那个zookeeper也可以管理这些数据的状态
看里面有没有数据，说明已经结束，就重新new好了，如果有数据，就拿出来接着用。
如果用zookeeper的话，那个zookeeper也可以管理这些数据的状态
b*2
9 楼
经验老道啊，呵呵
【在 c********y 的大作中提到】
: 看情况，一般至少一倍焦距
【在 c********y 的大作中提到】
: 看情况，一般至少一倍焦距
b*n
10 楼
晶晶你又说胡话了
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
d*u
11 楼
怎么个算法？比如焦距50mm, 快门1/100？
【在 c********y 的大作中提到】
: 看情况，一般至少一倍焦距
【在 c********y 的大作中提到】
: 看情况，一般至少一倍焦距
b*y
12 楼
嗯，晶晶就勉为其难当个老二吧
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
c*y
13 楼
一倍就1x，1/50,不过条件允许放1/100更好
【在 d*********u 的大作中提到】
: 怎么个算法？比如焦距50mm, 快门1/100？
【在 d*********u 的大作中提到】
: 怎么个算法？比如焦距50mm, 快门1/100？
p*e
14 楼
俺也认为第一非白神莫数！
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
b*2
15 楼
应该就是这样
【在 d*********u 的大作中提到】
: 怎么个算法？比如焦距50mm, 快门1/100？
【在 d*********u 的大作中提到】
: 怎么个算法？比如焦距50mm, 快门1/100？
b*j
16 楼
这么牛。。
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
y*n
17 楼
If APS-C, need to multiply with 1.6, so for 50mm, the safe speed would be 50
x 2 x 1.6 = 160 S.
【在 c********y 的大作中提到】
: 一倍就1x，1/50,不过条件允许放1/100更好
x 2 x 1.6 = 160 S.
【在 c********y 的大作中提到】
: 一倍就1x，1/50,不过条件允许放1/100更好
b*n
18 楼
你应该在前十位。。。
【在 b**j 的大作中提到】
: 这么牛。。
【在 b**j 的大作中提到】
: 这么牛。。
b*6
19 楼
不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
C*y
20 楼
我觉得懒猪的老婆要比迷糊蛋漂亮不少。
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
【在 b***n 的大作中提到】
: 我认为老大还是当属懒猪， 迷糊蛋可以排第二了
d*0
21 楼
那小DC不是赚大了，1/6S就够了
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
p*p
22 楼
i concur 精精
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
p*p
23 楼
看你最终要打印多大
【在 b********2 的大作中提到】
: 如题
【在 b********2 的大作中提到】
: 如题
b*y
24 楼
有迷糊蛋的pp么
【在 C******y 的大作中提到】
: 我觉得懒猪的老婆要比迷糊蛋漂亮不少。
【在 C******y 的大作中提到】
: 我觉得懒猪的老婆要比迷糊蛋漂亮不少。
b*2
25 楼
突然发现D700的一个好处了。
永远打到M档就好了， 只调一下光圈和快门速度就好了
50
【在 y***n 的大作中提到】
: If APS-C, need to multiply with 1.6, so for 50mm, the safe speed would be 50
: x 2 x 1.6 = 160 S.
永远打到M档就好了， 只调一下光圈和快门速度就好了
50
【在 y***n 的大作中提到】
: If APS-C, need to multiply with 1.6, so for 50mm, the safe speed would be 50
: x 2 x 1.6 = 160 S.
L*i
26 楼
re, zan, spt
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
p*p
27 楼
这和D700有什么关系？随便一个入门机器都可以吧
【在 b********2 的大作中提到】
: 突然发现D700的一个好处了。
: 永远打到M档就好了， 只调一下光圈和快门速度就好了
:
: 50
【在 b********2 的大作中提到】
: 突然发现D700的一个好处了。
: 永远打到M档就好了， 只调一下光圈和快门速度就好了
:
: 50
S*i
28 楼
re,spt
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
b*2
29 楼
机子高感不行的话，这样做就是自虐了
【在 p**p 的大作中提到】
: 这和D700有什么关系？随便一个入门机器都可以吧
【在 p**p 的大作中提到】
: 这和D700有什么关系？随便一个入门机器都可以吧
m*o
30 楼
神医 不应 仅以 量 或者 钱 来排名
稳定排在最低价收货 风波不断的 不能冠以 神医
稳定排在最低价收货 风波不断的 不能冠以 神医
p*p
31 楼
高感只会越来越好，过不了多久入门机的高感都会比现在的顶级机好
【在 b********2 的大作中提到】
: 机子高感不行的话，这样做就是自虐了
【在 b********2 的大作中提到】
: 机子高感不行的话，这样做就是自虐了
y*u
32 楼
热
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
【在 m*r 的大作中提到】
: 我认为白神可以顶替懒猪总，接人老大
b*2
33 楼
现在在入门级上这样做还不行，希望5年以后能够达到
【在 p**p 的大作中提到】
: 高感只会越来越好，过不了多久入门机的高感都会比现在的顶级机好
【在 p**p 的大作中提到】
: 高感只会越来越好，过不了多久入门机的高感都会比现在的顶级机好
p*p
34 楼
不管是不是入门机，这么搞对学习摄影没什么好处
了解一些基本的曝光组合是必要的
【在 b********2 的大作中提到】
: 现在在入门级上这样做还不行，希望5年以后能够达到
了解一些基本的曝光组合是必要的
【在 b********2 的大作中提到】
: 现在在入门级上这样做还不行，希望5年以后能够达到
d*u
35 楼
学习了
k*t
36 楼
B神又打开了这罐虫子
最终观看放大率.
最终观看放大率.
s*c
37 楼
像素密度大 还是要乘1.6的
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
z*c
38 楼
夸张点，假设aps是X16，你手持35mm看看会晃成什么样子。
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
【在 b********6 的大作中提到】
: 不理解为啥aps要乘1.6，我觉得aps切的是相平面的内部，抖动的影响更小一些
相关阅读