cassandra query speed求助 - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Programming - 葵花宝典

cassandra query speed求助

cassandra query speed求助# Programming - 葵花宝典

r*12016-06-10 07:06

1 楼

【以下文字转载自 Military 讨论区】
发信人: yapple (稳似泰山共携手，陶然一笑友情深), 信区: Military
标题: 震惊一位移民二代华裔女孩对中国的印象竟如此不堪
发信站: BBS 未名空间站 (Fri Aug 20 10:39:15 2010, 美东)
【一位在美国出生和成长的16岁华裔女孩，两年前回中国后写下的“中国日记”，
原文是英语】
我的名字叫安玲史，虽然我看上去像中国人，可我并不是。我从没在中国居住过，
我喝西方的牛奶和吃西方的食物，另外告诉你，在母亲的子宫，我的童年，几乎全是在
美国度过的，而那不可逆转地影响了我的现在。
让我开始告诉你我对中国有着怎样的印象。
第一个巨大的、10英寸刀子般深的来自于中国的印象就是交通。在我们被母亲童年
的最好朋友从机场热情洋溢地接到之后(那里有我们的亲戚)，我们在贵阳酷热无比的气
温下，(译者注：当时气温28度)挤在了他狭小无比的桑塔纳里。我曾经在德克萨斯州住
过5年，我习惯了在90华氏
度的气温下待在拥挤不堪的车里，但在德州，交通是在控制之下的。
贵阳的交通，很可惜，不是。
我们开车上路后，我的耳膜只

H*I2016-06-10 07:06

2 楼

千夜点头道：“这就够了。我需要周边黑暗种族城市和据点的分布情况，以及所有一年
内发生的关于黑暗种族的大事。”
“你比我想象中还要专业。”季中校由衷地说了一句。
送走了季元嘉，又是一名少校走进来，将一个手提箱放在桌上，说：“这是配发给
您的物资，请查收！”
千夜签字后打开箱子，看到一排整整齐齐的药剂，共有十支，标签上写着四型原力
激发的字样，这竟然是四级战兵的修炼药剂！
内盖角落里那个徽记属于帝国曙光生物，这是军工行业中与黑石重工同级别的巨头
。这家公司出产的原力激活药剂一向是供不应求的上等货，主力军团也只能获得少量供
应。只有象红蝎这样的精英军团，才能得到不限量供应，但是要用军功兑换。
这样一箱药剂所消耗的积分，如千夜般的菜鸟要奋斗一年才能够存满，还是在不补
充其它积分军备的情况下。
千夜沉默了一下，然后对少校说：“请转告琪琪小姐，我很感激。”
少校微笑道：“一定原话转达。”
既然礼仪老师要到第二天才到，接下来的时间千夜就打算全部用来修炼。在正式执
行任务前，实力增加一点就是一点。
现在一切都还没开始，琪琪就预先抛出来这么多好处，已经远超千夜想象。可是他
也相信天下没有免费的午餐，报酬越高，就说明这个任务的危险度越高，虽然现在他还
无法判断危险来自何处。如果仅仅是和黑暗种族作战以获取军功，似乎用不着雇佣一名
猎人，并且附加这么多资源。
千夜关上院门，拿起药剂，就进入了修炼室。
在后花园最大的水榭中，殷琪琪正伸着一双长腿，懒洋洋地躺着，有些昏昏欲睡。
两名侍女正在给她捶着腿，而季元嘉站在一旁，报告与千夜的交谈经过，特别说明了对
方当时的每一个反应。
“现在就把131连的全部权限都移交给他吧！”殷琪琪仍然是一副漫不经心的样子。
“可是，我们毕竟对他还不了解，是不是再稍稍观察一下？”季元嘉婉转地劝着。
殷琪琪抬手掩住唇，打了个哈欠，说：“我们用不着了解，余英男了解他就行了。
等级不高，实力却还行，背景干净，不属于任何一边。余英男也说过，千夜这个人只要
收了钱就会把事情做到最好。啊，对了，长得真不错，我们还需要什么呢？”
季元嘉眉头一跳，目光移到自己脚尖，假装没听到最后一句话。
“一个加强连不算什么，就给他玩玩吧，说不定还能够给我个惊喜呢！”
季元嘉面带微笑，语调温和，继续努力劝道：“可是，大小姐，您只有一个加强营
的兵力。现在一下就给了他三分之一......”
琪琪慵懒地说：“那种炮灰数量再多又有什么用？过段时间顾立羽就会动用他的关
系，送一个中队的烈焰兵锋过来。当然，他们会换个名字。”
听到顾立羽的名字，季元嘉脸上的笑容顿时显得有些不自然，不过琪琪的目光没在
他身上，他立刻把失态掩饰下去，仿佛发自内心地说：“能够有一个中队的烈焰兵锋，
那情况就会好很多了。”
五十名烈焰兵锋战士确实很有用，但是在殷家继承人大考这种层面的竞争上，却还
没有能够决定胜负的力量。所以季元嘉出于公心私望两方面考虑，小心地提醒了一下。
他的表达方式很隐晦，但是琪琪却一下就听明白了言下之意，淡淡一笑，说：“不
要紧，顾立羽只是个中间人而已。雇佣一个中队烈焰兵锋的钱他可拿不出来，就算把他
整个家族卖了也值不了这么多。”
季元嘉立刻附和地笑了，说：“一个普通士族，并不比寒门强多少。这里最主要还
是小姐您的作用，否则的话就靠顾中校自己的能力，即便有钱，烈焰兵锋也不可能接下
这个任务。”
琪琪笑了笑，说：“要想压倒我那几位没什么本事、野心却很大的兄弟姐妹们，还
是需要稍稍动点脑筋，并且略微付出一些代价的。烈焰兵锋不过是先期的准备，过些时
候你就能看到我真正的底牌是什么了。现在，你好好配合小千夜，让他放手去玩，这个
漂亮的小东西，或许不仅仅只能做一枚明饵。除了吸引注意力之外，我总觉得他会给我
们带来意外惊喜的。”
“我会安排好一切。”
琪琪挥了挥手，季元嘉就退了出去。
修炼室内，千夜已经将药剂注入身体，安静等待着药力生效。在这几分钟时间里，
他没再去想那个诡异的任务，而是在思索另外一个至关重要的问题，那就是琪琪身边的
高手太多了。
这位大小姐并没有收敛原力气息，明晃晃地能看到她已经点燃了七个原力节点，也
就是说她的中校军衔货真价实。而她身边的副官都是少校中校，显然也应该有与军衔相
符合的实力。
那位兰姨的实力千夜根本就看不透，意味着双方等级差超过三级以上，很可能是八
级的高手。这只是摆在明面上的力量，如果暗中另行隐藏实力的话，说不定会有战将级
的真正强者。
千夜在晋升四级后，平时体内黑血完全蛰伏，就象和血脉融为一体，再不会露出一
丝外溢气息，就连他接触秘银类物质，只要不是见血的伤口都没有丝毫波动。但这仍然
不是长久之计，特别是当千夜受重伤后，鲜血之力的气息多半无法掩盖，那时该怎么办
呢？
在答应接下任务时，千夜并不知道琪琪居然拥有如此权势。不过现在他已经不能毁
约，预付的那些天价物资是一个方面，另外，二爷隐晦暗示过，有两个家族的命运都掌
握在这位琪琪大小姐手里，其中就有余英男的家族。
现在只能走一步看一步，倒也不是完全无法可想，比如说，他是一名猎人，也是远
程狙击手，可以要求独行的战斗位置。
药力生效了，千夜立刻驱离脑海中多余的思绪，开始感知药力转化的原力强度。
十支四型药剂是标准一阶段剂量，能够让一个处于平均线的修炼者从四级初期达到
顶峰，开始尝试激活第五个原力节点。但是对千夜来说，十支药剂却只够他补充小半的
原力，距离冲击五级屏障还有相当遥远的距离。
浓郁的原力气息使得血气也开始燥动，一缕缕普通血气从心脏中涌出，开始截留吞
噬原力，并且变得更加饱满。随着金色血气的沉睡，这些普通血气不光恢复到了七缕，
而且变得更加粗壮。此外千夜还感觉到心脏内有一丝异常脉动，好象又有新的血气要生
成了。
就在这时，仿佛受到满盈的普通血气吸引，金色血气化成的小茧突然震动起来，仿
佛里面有什么东西正在冲撞茧壁，下一刻就要破茧而出。
转眼之间，金色小茧表面就布满了龟裂，随时有可能破开。
普通血气如同受惊的羊群，顾不得捕食原力，一哄而散，纷纷钻入心脏中。而紫色
血气这时刚刚抓到了一缕普通血气，正要吞噬，它如有生命般，一个扭动，好像看到了
金色小茧的变化，竟然松开了已经到口的血气，飞速缩回进阶血族体质的符文内，盘成
一团，顶端昂起，严阵以待。
金色小茧终于破开一个小洞，从里面钻出一缕极为细小的金色血气，四处游动着。
它除了体形缩水外，似乎没有太大变化，然而当它高速拉出残影的时候，却会发现多了
一根暗金色的线条。
金色血气瞬间绕着进阶血族体质符文转了十几圈，似乎感觉到无机可趁，这才回到
自己的符文内，开始吞吃金色小茧的残片。
当它吃完残片后，又如一道金色闪电冲进心脏，拖出一道比自己粗壮了十几倍的普
通血气，开始吞噬。转眼之间一根普通血气就彻底消失，这点餐品似乎完全不能填牙缝
，金色血气又如饿虎扑羊般冲入心脏，把一根根普通血气拖出吃掉。七根普通血气很快
就只剩两道了，而这一次金色血气意犹未尽，竟然把第六根血气从心脏里拖了出来，几
口吞下去。
有了前几次的经验，千夜立刻感觉到眼前这个状况不对。如果任由金色血气继续吞
噬下去，岂不是所有普通血气都会消失？
体内三种血气的平衡一旦被打破，根本不知道会产生什么后果！就算没有后果，普
通血气的新生也需要时日，在此期间，失去保护的内脏肯定无法承受三十轮以上的兵伐
决冲击。
“停下！”眼看着金色血气再次冲向心脏，千夜大急，在意识中下了命令，同时运
起原力，心脏外构筑起一道散发濛濛青光的黎明原力屏障。
金色血气在光幕上轻轻一撞，就把千夜全力构建的屏障凿出了一个大洞，冲向心脏
。但就在这时，它或许是感觉到了千夜的意志，半个身体都钻进了心脏，最终还是有些
不情不愿地游出来，放过了最后那道可怜的普通血气。
千夜顿时松了口气，并且有隐约的喜悦。一直以来，无论是修炼还是战斗，体内血
气基本都是自发活动，这是他第一次成功把自己的意志传达给血气，并且得到了有限的
服从和回应。这是否意味着，他终有一日能够控制鲜血之力，而不用担心被黑暗浸染和
影响。
金色血气并没有闲下来，又绕着紫色血气转了十几圈，一幅垂涎欲滴的模样。紫色
血气盘踞在符文里，坚守不出，昂起的顶端如凶厉的巨蟒表达着战意，金色血气这才悻
悻回到瞳术:夜视的符文里，盘踞起来。
从它身上，开始散发出星星点点的金色光芒，不断融入到符文里，符文的线条开始
出现重影、延展，变得更加复杂，最终脱离出一个独立的小符文，飘浮在瞳术的旁边。
两个符文即相对独立，又紧密联系，就象主楼旁加盖的一个房间。
新符文呈现出一个新能力，血脉潜伏。隐藏鲜血之力，把折射出来的原力序列推动
到黎明和永夜之间的灰色地带。
简而言之，这个能力启动后，无法用普通方法感知能力者的原力属性。对于千夜来
说，他的兵伐决是黎明原力，如果同时发动这个能力，将会彻底掩盖掉鲜血之力的气息
，哪怕在战斗中受伤后也同样有效。
但是，千夜忽然想起了夜瞳。

D*C2016-06-10 07:06

3 楼

我有一个table， partition key 是a
select * from table where a=something
这个会返回50k records，但居然用了5秒。
用的是Java，这个table有11million records
大家觉得这个速度正常吗？我应该用memory only compaction吗

w*s2016-06-10 07:06

4 楼

为什么没人回？
顶这个帖子。

c*e2016-06-10 07:06

5 楼

返回50k records，你怎么用这些records啊？全显示到一个网页里?

【在 D**C 的大作中提到】

: 我有一个table， partition key 是a
: select * from table where a=something
: 这个会返回50k records，但居然用了5秒。
: 用的是Java，这个table有11million records
: 大家觉得这个速度正常吗？我应该用memory only compaction吗

h*02016-06-10 07:06

6 楼

让我们怎么回帖呢？说什么呢？

D*C2016-06-10 07:06

7 楼

没，计算，全在内存，没多大。
我说的是从query开始到结束5秒

【在 c*********e 的大作中提到】

: 返回50k records，你怎么用这些records啊？全显示到一个网页里?

w*s2016-06-10 07:06

8 楼

我家老大回国两趟也有类似想法，我认为应该对他们有什么说什么不回避现实。
把他们当作小大人，解释清楚。三五岁很有洞察力的，不可能懵他们。
写那种日记就是小孩子不懂为什么，一时overwhelm了。
你们怎么处理呢？

d*n2016-06-10 07:06

9 楼

为啥要用selet *？c*可以有成千上万列，不同的列可以出现在不同的ss表里面，你确
信你的查询正确吗？
既然你用了partition key，那有11mil行的关系就不那么大了。当然如果表经常修改的
话，还要注意tombstone，这个也严重影响查询效率。

【在 D**C 的大作中提到】

w*s2016-06-10 07:06

10 楼

显比一下，今年在北京，我给儿子解释了为什么有的小朋友睡在街上，去年在纽约，我
尽量解释了轮子老太太站在中国领馆对面干什么。
。。。:)

J*R2016-06-10 07:06

11 楼

你得看你这50k的数据量有多大。narrow table or wide table。如果每行都几百k的数
据，5秒不算夸张了。

【在 D**C 的大作中提到】

h*a2016-06-10 07:06

12 楼

尽管说的是事实，但我觉得这孩子需要引导。因为他看到和提到的全是负面的，更是有
作为“美国人”的
优越感。我们也可以只看到美国的校园抢杀案，种族歧视事件，疯牛肉。。。没有一个
国家是完美的，
如果你一定要带着挑剔的眼光去看一样事物，那是很容易去发现不好的地方。但要换一
种包容的眼光和
心态，感受就不一样了。

【在 r*****1 的大作中提到】

: 【以下文字转载自 Military 讨论区】
: 发信人: yapple (稳似泰山共携手，陶然一笑友情深), 信区: Military
: 标题: 震惊一位移民二代华裔女孩对中国的印象竟如此不堪
: 发信站: BBS 未名空间站 (Fri Aug 20 10:39:15 2010, 美东)
: 【一位在美国出生和成长的16岁华裔女孩，两年前回中国后写下的“中国日记”，
: 原文是英语】
: 我的名字叫安玲史，虽然我看上去像中国人，可我并不是。我从没在中国居住过，
: 我喝西方的牛奶和吃西方的食物，另外告诉你，在母亲的子宫，我的童年，几乎全是在
: 美国度过的，而那不可逆转地影响了我的现在。
: 让我开始告诉你我对中国有着怎样的印象。

D*C2016-06-10 07:06

13 楼

每行就十个columns,一天只写一次，然后truncate

【在 d****n 的大作中提到】

: 为啥要用selet *？c*可以有成千上万列，不同的列可以出现在不同的ss表里面，你确
: 信你的查询正确吗？
: 既然你用了partition key，那有11mil行的关系就不那么大了。当然如果表经常修改的
: 话，还要注意tombstone，这个也严重影响查询效率。

w*s2016-06-10 07:06

14 楼

只有理解才有真正的包容与慈悲，不理解的“包容”只能是逆来顺受，无动于衷，或自
欺欺人。

【在 h******a 的大作中提到】

: 尽管说的是事实，但我觉得这孩子需要引导。因为他看到和提到的全是负面的，更是有
: 作为“美国人”的
: 优越感。我们也可以只看到美国的校园抢杀案，种族歧视事件，疯牛肉。。。没有一个
: 国家是完美的，
: 如果你一定要带着挑剔的眼光去看一样事物，那是很容易去发现不好的地方。但要换一
: 种包容的眼光和
: 心态，感受就不一样了。

D*C2016-06-10 07:06

15 楼

就十个column。
所以我觉得太慢了，我那个cassandra是公司提供的测试环境，我也不知道有多少人在
用。
你们有你们的一些metrics给我参考吗

【在 J****R 的大作中提到】

: 你得看你这50k的数据量有多大。narrow table or wide table。如果每行都几百k的数
: 据，5秒不算夸张了。

y*i2016-06-10 07:06

16 楼

军版上的这种东西就不要瞎转了。

x*42016-06-10 07:06

17 楼

我觉得还行。比我这里的hive快多了。

【在 D**C 的大作中提到】

: 就十个column。
: 所以我觉得太慢了，我那个cassandra是公司提供的测试环境，我也不知道有多少人在
: 用。
: 你们有你们的一些metrics给我参考吗

t*12016-06-10 07:06

18 楼

父母的责任
还有，难道这小朋友十六年来从来没有来过中国？

c*e2016-06-10 07:06

19 楼

如果要快，就把table分成几个小table.

【在 D**C 的大作中提到】

t*e2016-06-10 07:06

20 楼

镇静啊，背粪啊，一个肤浅的小屁孩的印象算个屁。像大部分美国人一样不懂得世界
上有不同的生活方式，缺少教养和宽容。从这里可以看出父母的教育是一种失败。

d*n2016-06-10 07:06

21 楼

觉得不可能这么慢。你可以打开tracing看看到底都花在什么时间里面了。

【在 D**C 的大作中提到】

: 就十个column。
: 所以我觉得太慢了，我那个cassandra是公司提供的测试环境，我也不知道有多少人在
: 用。
: 你们有你们的一些metrics给我参考吗

t*e2016-06-10 07:06

22 楼

J*R2016-06-10 07:06

23 楼

十个column什么类型？
另外cluster上的node的时间sych了吗？

【在 D**C 的大作中提到】

: 就十个column。
: 所以我觉得太慢了，我那个cassandra是公司提供的测试环境，我也不知道有多少人在
: 用。
: 你们有你们的一些metrics给我参考吗

t*r2016-06-10 07:06

24 楼

这是一个16岁小孩看见的肤浅的表象，但是也是一个可悲的事实
每个民族有自己的道德规范，按喇叭在美国不礼貌，在中国无所谓，当你适应了就无所
谓了
我们不能把自己的标准强加在别人的头上，但是让一个16岁的小孩明白这个道理，只有
靠她的父母，或者她今后的阅历了，也许她一辈子也明白不了，为什么在中国按喇叭不
是rude。也许等她明白过来的时候，在中国按喇叭也是rude的行为了，so what

【在 r*****1 的大作中提到】

f*t2016-06-10 07:06

25 楼

服务器配置是啥？带宽是啥？

c*e2016-06-10 07:06

26 楼

我家学龄前儿童回国两次了，都高兴得很，觉得中国很好玩。
16岁，正是叛逆的时候。恨不得跟父母一刀两断。更不用说这个
美国人的假想敌“红色”中国了。还有，这孩子父母估计平时总
是说中国怎么怎么好。孩子就故意挑出中国的不好以显示自己的
跟父母的“不一样”来，这是teenager渴望独立的一种心理。
我看正常得很，等这孩子二十多岁大学毕业了，有了更多阅历更
成熟了，让她看自己的文章一定会觉得肤浅可笑。

【在 t********r 的大作中提到】

: 这是一个16岁小孩看见的肤浅的表象，但是也是一个可悲的事实
: 每个民族有自己的道德规范，按喇叭在美国不礼貌，在中国无所谓，当你适应了就无所
: 谓了
: 我们不能把自己的标准强加在别人的头上，但是让一个16岁的小孩明白这个道理，只有
: 靠她的父母，或者她今后的阅历了，也许她一辈子也明白不了，为什么在中国按喇叭不
: 是rude。也许等她明白过来的时候，在中国按喇叭也是rude的行为了，so what

w*z2016-06-10 07:06

27 楼

有 schema 吗？data compact 过吗？做个 trace 看看，别瞎猜了。你这信息量太小，
没办法知道哪里是 bottle neck.

【在 D**C 的大作中提到】

D*C2016-06-10 07:06

28 楼

很简单，就是text和bigint还有一个date

【在 J****R 的大作中提到】

: 十个column什么类型？
: 另外cluster上的node的时间sych了吗？

D*C2016-06-10 07:06

29 楼

这就是我不知道的，我公司比较麻烦等我看看怎么能figure out，我现在连运行cqlsh
都有问题。。。

【在 f*******t 的大作中提到】

: 服务器配置是啥？带宽是啥？

D*C2016-06-10 07:06

30 楼

暂时没法cqlsh。。。
我得看看memoryonly compact

【在 w**z 的大作中提到】

: 有 schema 吗？data compact 过吗？做个 trace 看看，别瞎猜了。你这信息量太小，
: 没办法知道哪里是 bottle neck.

w*z2016-06-10 07:06

31 楼

去 mailing list 或 IRC channel 问问，那样反馈快点。

【在 D**C 的大作中提到】

: 暂时没法cqlsh。。。
: 我得看看memoryonly compact

D*C2016-06-10 07:06

32 楼

有link吗？，谢谢

【在 w**z 的大作中提到】

: 去 mailing list 或 IRC channel 问问，那样反馈快点。

w*z2016-06-10 07:06

33 楼

http://www.planetcassandra.org/apache-cassandra-mailing-lists/
https://wiki.apache.org/cassandra/IRC

【在 D**C 的大作中提到】

: 有link吗？，谢谢