avatar
如何用python读取大数据# DataSciences - 数据科学
b*s
1
说到反腐败这个问题,就不得不说说老中的手段了。的确全中国人民都能看到大张旗
鼓的反腐败,实话说再不反的话估计整个老中就要完蛋了吧。不过貌似每一届新的领导
班子上来都会有大换血啊,薄熙来不就成为了利益的牺牲品了吗?每一届的更替都需要
换成自己的忠实狗,要不出点什么事情也不好给擦屁股,这太明显了。只不过习大大上
台之后反腐的力度比以往任何一届都要大就是了,那么多贪官落马,习大大也是要标榜
一下自己的决心,要不肯定很多人都不会服气的。
不论是国内还是国外很多人都是贪官,人嘛总是要被利益驱使的,想要的欲望太多了
,自己的事业往往满足不了自己的欲望,可想而知这样的人不少。被欲望驱使的人们得
到了应有的惩罚,习大大这样做只是在为了让老百姓安心,不过或许很多人不知道,看
看这些因为贪污被判刑的人都是上一届领导班子的重要核心人物,而换了领导人当然忠
诚狗也是要换的,这应该就是约定俗成的道理吧。要是不相信的话等习大大下台之后再
看看扳倒的那些人是不是这一届重用的人,不要相信什么是真的在反腐,尼玛不想说在
小镇该贪的还是贪啊,上访都没有用啊,太失望。有时候我感觉这作业也不要做的太漂
亮,以免往后被打脸。
avatar
s*n
2
在做一个小项目,数据是50M行,50列,文件大小是10GB。如果用pandas直接读的话,
一个是慢,另一个是动不动就 memory error。
但是我觉得10GB还算不上大数据,一般如何处理这样的问题呢?
的确可以分块读入,然后计算也分块算吗?比如我算个logistic regression,也能支
持分块算吗
avatar
w*2
4
不然用 EC2
avatar
m*r
5
单机 你就只能分块读取了
avatar
h*7
6
难道不是调SQL?
相关阅读
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。