Redian新闻
>
为什么sort 的速度在单个server比cluster上快很多
avatar
为什么sort 的速度在单个server比cluster上快很多# Linux - Linux 操作系统
a*a
1
以前记得不要的,现在呢?
avatar
a*f
2
从这个版得到很多信息,非常感谢大家!
金发美女,2分钟不到就放过了。
vo:为什么去美国阿
妈:看儿子。
vo:你儿子的材料有吗?
妈:有,您看看。(把我的邀请信阿一些复印件递上)
vo:有照片吗
妈:有。(把相册隔着玻璃翻)
vo:好的,你过了,thank you。
妈:谢谢。
avatar
b*e
3
NO.1 巨蟹座
厨艺卖点:有妈妈的味道~
念旧恋家的巨蟹座,最喜欢为所爱的人亲自下厨做料理,因为照顾家人是他们的天性,
对他们来说,情人的角色就像自己的家人一样,若是能让对方尝尝自己的拿手菜,或者
特地为对方煮的料理,光是看到对方满足的模样,他们就已经感受到满满的幸福,况且
出自他们手中的菜,绝对是色香味俱全,不管是爱情还是厨艺,巨蟹们都当之无愧,也
愿意在深爱男人背后当个小厨娘哦!
NO.2 处女座
厨艺卖点:高标准厨娘~
处女座天生完美主义,吹毛求疵、爱挑剔的个性,让他们煮出来的家肴不好吃都难,尤
其是为了情人所煮出来的料理,不管是对方亲自下单点的菜色,或者是自己得意的料理
,他们对菜色一定都很讲究,还会特地的去研究情人爱吃的料理和食谱,而且保有传统
观念的处女们,认为牺牲自己的时间为情人做美味料理,必定能换来情人对他们的忠诚
啰!
NO.3 双鱼座
厨艺卖点:浪漫胜过于美味~
爱做梦的双鱼座,常常不时幻想着跟心爱的人,一起共进浪漫的烛光大餐,对他们来说
,为情人煮一道满汉全席,当然不是什么困难的事,只不过做事情总是有些糊涂的他们
,在煮东西的时候,总是喜欢边编织着和情人的爱情故
avatar
a*y
4
all in one chip
avatar
c*g
5
在cluster 上是通过qlogin登陆到某个node的
同样sort一个80G的文件,单个server用了2小时不到, 在cluster上用了11个小时
系统负荷应该不会差太多
如何查是什么原因导致时间差那么多? 谢谢
avatar
w*u
6
搭车问一下
基本上所有建行都可以吗?
一般二级市里面的建行也可以不
多谢了

【在 a*****a 的大作中提到】
: 以前记得不要的,现在呢?
avatar
o*n
7
cong
avatar
H*y
8
为了证明,奔个菜。恩
avatar
l*n
9
I/O的问题, server上读写的是本地硬盘而node上面是通过NFS吧.

【在 c*******g 的大作中提到】
: 在cluster 上是通过qlogin登陆到某个node的
: 同样sort一个80G的文件,单个server用了2小时不到, 在cluster上用了11个小时
: 系统负荷应该不会差太多
: 如何查是什么原因导致时间差那么多? 谢谢

avatar
R*T
10
国内的事很难讲,我遇到过收和不收,两种情况。
就是建行自己的卡,跨市取钱,都有可能收手续费。

【在 a*****a 的大作中提到】
: 以前记得不要的,现在呢?
avatar
R*e
11
奔个n天前的,最近天热很久没好好做饭了
avatar
S*A
12
cluster 上面的 sort 是如何实现的?如果你用 MPI 那种
经常传东西的当然慢了。
cluster 之间传数据和本地访问内存的延时比较大。
对于数据有很多相关依赖性的 cluster 不适合。
cluster 适合数据可以被切割成小块,在小块里面可以独立运算的。
这个 sort 比较适合用 map reduce.
把 80G 分成很多小 N 份,给 N 个节点分别 sort.
然后 merge 就是 O(n) 的。
网上一发一收 80G 就是 160G 数据,这个就要花很多时间。
所以单机没准还快点。

【在 c*******g 的大作中提到】
: 在cluster 上是通过qlogin登陆到某个node的
: 同样sort一个80G的文件,单个server用了2小时不到, 在cluster上用了11个小时
: 系统负荷应该不会差太多
: 如何查是什么原因导致时间差那么多? 谢谢

avatar
c*a
13
It really depends on how you implement "sort" in parallel in clusters.

【在 c*******g 的大作中提到】
: 在cluster 上是通过qlogin登陆到某个node的
: 同样sort一个80G的文件,单个server用了2小时不到, 在cluster上用了11个小时
: 系统负荷应该不会差太多
: 如何查是什么原因导致时间差那么多? 谢谢

avatar
m*r
14
还要看是不是系统对直接在node上run的进程有punishment,
你可以在node的scratch文件系统上试试

【在 c*******g 的大作中提到】
: 在cluster 上是通过qlogin登陆到某个node的
: 同样sort一个80G的文件,单个server用了2小时不到, 在cluster上用了11个小时
: 系统负荷应该不会差太多
: 如何查是什么原因导致时间差那么多? 谢谢

avatar
c*g
15
sort是 linux 系统命令sort, 在cluster上就是用本地的scratch分区的
avatar
m*r
16
很可能punish了,你可以送个sort的任务上去比较一下

【在 c*******g 的大作中提到】
: sort是 linux 系统命令sort, 在cluster上就是用本地的scratch分区的
avatar
Z*0
17
你都没有说server和node配置一样不一样?
相关阅读
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。