Redian新闻
>
Hadoop写入的主流框架有哪些?
avatar
c*w
2
【 以下文字转载自 JobHunting 讨论区 】
发信人: cedarview (skunk), 信区: JobHunting
标 题: 简历问题求讨论
发信站: BBS 未名空间站 (Wed Feb 19 09:39:34 2014, 美东)
一个其实很简单的问题: 简历长短问题
刚开始找工作,简历上没有东西可写, 东凑西凑, 把什么volunteer什么的都写上,
连着cover letter 凑够了几页。
工作若干年以后, 特别是呆过两三个公司,加上在学校做RATA也得花上几行,工作内
容多样了, 写的东西就多起来。写着写着就写长了。
强行压缩也行, 不过很多我认为是重要的东西就不得不去掉, 感觉不能包括我的经验
和技能。
对于有个七八年工作经验的找工作,大家怎么看这个简历长度, 怎么处理的?
avatar
W*W
3
虽然有拙劣的模仿,但是拍的蛮紧凑的。就现代娱乐片而言,大陆没得比啊。
avatar
D*a
4
Anyone recommend one instead of Apple's own? I bought the apple one but it
wasn't confortable for me (left side often gets loose). Budget is Thanks!
avatar
c*i
5
BBC Chinese, Nov. 7, 2010.
http://www.bbc.co.uk/zhongwen/simp/world/2010/11/101107_us_australia_military.shtml
Note: In comparison:
美澳深化军事合作 研究共用基地
http://www.voanews.com/chinese/news/20101107_US-AU_COOPERATION-106846593.html
("美国和澳大利亚的军事合作历时已久,但两国共同使用军事基地还是首次讨论。盖茨
表示,美国没有考虑在亚洲增设军事基地,也不认为美国、澳大利亚和东南亚国家的合
作是对中国的挑战。")
avatar
h*4
6
现在公司里用来向Hadoop写入的框架是13年搭建的,有很多限制,比如要把JSON转成
POJO再用FileSystem写入,麻烦太多。
现在我重新搞了下,可以直接把JSON用FileSystem写入。不过如果AVRO里面定义了type
是union的话就会报错说数据定义不匹配。比如{"name":"age", "type":[null, "int"]
, "default":null} 这样的话{"age":12}, {"age":null} 都报错。
现在想问两个问题:
1. 有没有业界流行的框架能直接把JSON写入到Hadoop,就不用走FileSystem那一套?
2. 如果没有很好的框架,继续用FileSystem写,有没有办法处理union的问题?
谢谢大家!
avatar
e*s
7
我来总结一下自己(中期AP奋斗中):
1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
TPC,做了另一个小会的track chair(大牛们见笑了)。
3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
个小会的最佳论文提名。
4. 新招了三个Ph.D.学生。
5. 暑假到军方搞了个fellowship,拿了点consultant。
6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
project进了决赛,和travel grant若干(不算奖)。
7. 四处给了10几个invited talks。
8. 开始有国内来访问的老师和学生了。
9.第一次上一门新研究生课,接近30个学生选。老课年年爆满(也就是去年和今年,赫
赫)
10.Google引用比去年又多了20%。
明年的目标:
1. 拿CAREER, Funding争取上60万。
2. 总结前几年的工作,争取投出去10篇journal(压手里的太多了)。
3. 再招两个Ph.D.学生,争取有毕业、或者接近毕业的学生。
4. 申请行业协会的junior faculty award。
5. 争取能混个best paper提名,award更好了。
6. Teaching能更上一层楼。更新教学内容、目标和project。
7. 文章引用能更上一层楼。争取能早日tenure!

【在 e****s 的大作中提到】
: 水木青年教师版都在总结。
avatar
c*n
8
有针对性写
按着jd描述工作责任选择那些有用的
几页太多了 1页半都很多了
avatar
P*s
9
没看还,听名字像不像ocean 11啊

【在 W****W 的大作中提到】
: 虽然有拙劣的模仿,但是拍的蛮紧凑的。就现代娱乐片而言,大陆没得比啊。
avatar
a*a
10
klipsch s4i

【在 D*******a 的大作中提到】
: Anyone recommend one instead of Apple's own? I bought the apple one but it
: wasn't confortable for me (left side often gets loose). Budget is : Thanks!

avatar
c*i
11
I am sorry. I made a mistake about which board I was yesterday. I will
delete this series in few hours.
avatar
n*r
12
StreamSet
NIFI
Beam

type
"]


【在 h*****4 的大作中提到】
: 现在公司里用来向Hadoop写入的框架是13年搭建的,有很多限制,比如要把JSON转成
: POJO再用FileSystem写入,麻烦太多。
: 现在我重新搞了下,可以直接把JSON用FileSystem写入。不过如果AVRO里面定义了type
: 是union的话就会报错说数据定义不匹配。比如{"name":"age", "type":[null, "int"]
: , "default":null} 这样的话{"age":12}, {"age":null} 都报错。
: 现在想问两个问题:
: 1. 有没有业界流行的框架能直接把JSON写入到Hadoop,就不用走FileSystem那一套?
: 2. 如果没有很好的框架,继续用FileSystem写,有没有办法处理union的问题?
: 谢谢大家!

avatar
a*k
13
楼上的太牛了。
相比之下,我2012真是个loser。
funding连着悲剧(包括NSF CAREER)
paper 投出去几天就被 editor return回来
招学生薄厚都被人家当备胎(访问的更是不敢碰)
希望2013能好一些吧。
avatar
c*7
14
不能苟同,实在是很烂的片子
avatar
m*c
15
Bose

【在 D*******a 的大作中提到】
: Anyone recommend one instead of Apple's own? I bought the apple one but it
: wasn't confortable for me (left side often gets loose). Budget is : Thanks!

avatar
h*4
16
多谢!明天去试试

【在 n***r 的大作中提到】
: StreamSet
: NIFI
: Beam
:
: type
: "]
: ?

avatar
l*n
17
1l发了以后让我都没有动力发帖子了。。
avatar
f*h
18
太牛了!

TPC

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
l*l
19
楼主太牛了。这一年抵了我好几年的。祝明年目标全达到。
好奇的问一下,今年50万明年60万是算整个项目的总额(比如三年的NSF Grant)还是分
摊到当年的(比如一个三年的NSF除以三)?是后者的话就更牛了。
avatar
l*d
20
赤裸裸的bso.

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
c*t
21
楼主开这样一个头,没有人再敢献丑了 ;)
avatar
c*t
22
楼主开这样一个头,没有人再敢献丑了 ;)
avatar
l*g
23
不还有Levis么
镇版之宝啊

【在 c*******t 的大作中提到】
: 楼主开这样一个头,没有人再敢献丑了 ;)
avatar
m*s
24
不紧张,你整的大家都很紧张啊

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
g*r
25
吃蝈蝈的BSO.发包子吧!

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
L*s
26
操,你怎么不来...

【在 l*****g 的大作中提到】
: 不还有Levis么
: 镇版之宝啊

avatar
l*d
27
不过你这些比起王老师的喜得千金
那都是浮云。

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
M*0
28
俺来总结一下。2012发表约十篇期刊论文,SCI citation增加约1500,总citation向12
,000进军。
avatar
L*s
29
膜拜大神... 一年的citation比我加起来都多。这个citation够IEEE Fellow了。

12

【在 M****0 的大作中提到】
: 俺来总结一下。2012发表约十篇期刊论文,SCI citation增加约1500,总citation向12
: ,000进军。

avatar
M*0
30
果酱果酱。领域不同。
avatar
f*7
31
niu

12

【在 M****0 的大作中提到】
: 俺来总结一下。2012发表约十篇期刊论文,SCI citation增加约1500,总citation向12
: ,000进军。

avatar
f*7
32
my 2012: tenured, then moved from midwest to west coast

【在 e****s 的大作中提到】
: 水木青年教师版都在总结。
avatar
h*w
33
虽然知道是在show off还是进来占点喜气,希望我今年也该开点花结点果了。
avatar
e*g
34
最近写了篇小说,刚拿了个诺贝迩奖,顺带做了个院土。

【在 L***s 的大作中提到】
: 膜拜大神... 一年的citation比我加起来都多。这个citation够IEEE Fellow了。
:
: 12

avatar
D*S
35
这是BSO

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
L*s
36
还作了作协主席?

【在 e****g 的大作中提到】
: 最近写了篇小说,刚拿了个诺贝迩奖,顺带做了个院土。
avatar
l*g
37
怡红院院士的评选要不要给老鸨送礼?

【在 e****g 的大作中提到】
: 最近写了篇小说,刚拿了个诺贝迩奖,顺带做了个院土。
avatar
m*g
38
我进来是沾喜气的。。。。
avatar
s*n
39
My choice of balanced life quality made me realize it is impossible for me
to find a faculty job.
Do you sleep? have a wife cooking for you?

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
b*d
40
厉害!

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
s*e
41
2012年主要工作是看娃,另外读了七八本David Glantz的军史,《中国好声音》从头看
到尾。
avatar
s*e
42
比俺五年做得都多啊。
摸摸大牛,沾沾仙气。。。

额).

【在 e****s 的大作中提到】
: 我来总结一下自己(中期AP奋斗中):
: 1. Funding方面:拿了两个NSF小grant,公司拿了点小钱。全算上50万差点(合同金额).
: 2. 混进了两个journal的Editorial Board,包括一个行业最有名。混进了最好的会的
: TPC,做了另一个小会的track chair(大牛们见笑了)。
: 3. 连挂名发了5篇journal,16篇conference,外加两篇poster和workshop若干。拿了
: 个小会的最佳论文提名。
: 4. 新招了三个Ph.D.学生。
: 5. 暑假到军方搞了个fellowship,拿了点consultant。
: 6. 学生拿了一个行业的fellowship奖,society最佳博士研究进了决赛,全国一个教学
: project进了决赛,和travel grant若干(不算奖)。

avatar
F*y
43
大家都是牛人啊
本人不才,家中添一男丁而已
avatar
f*s
44


【在 e****s 的大作中提到】
: 水木青年教师版都在总结。
相关阅读
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。