基站异常大数据问题和我的实施方案 - 未名空间MITBBS历史存档

基站异常大数据问题和我的实施方案# Programming - 葵花宝典

l*a2018-12-16 08:12

1 楼

喊他就跟没听到一样，
非得要你一而再再而三
即使我走到跟前喊他了，他继续他的事，我就非常恼火
每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
我怕再这么下去我就要唠叨死了，
每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

S*52018-12-16 08:12

2 楼

今年的新工作最令我开心的事情就是我来到了一个工作氛围特别好的公司，所有的员工
之间都很和睦，老板也很亲民，我们在一起工作氛围很棒，因为都是年龄相仿，所以平
时也都是无话不谈，公司的司机小李是个很幽默的人，总是跟我们开玩笑，他车技还相
当娴熟，有一次不经意间，我发现他竟然有一个奢侈品的钱包，我问他哪里来的，因为
司机小李平时都是穿着相当朴素低调的人，衣服鞋子什么的都是相当平民化，而突然出
现一个奢侈品钱包真是让人说不过去，心中疑问越来越大就问了他，他还云淡风轻的跟
我说，是他去香港买的，也不贵。我问他哪里来的钱啊，要知道他月工资也就才4000而
已，他这才跟我说家里有好几套房子，还有两套待拆迁，我的天啊，听到这样的消息，
我都不敢相信自己的耳朵，我质问他，既然家里那么有钱还来工作干嘛，他说工作是一
种生活方式，我来不是为了挣钱而是希望能够遇到有趣的人，每天打麻将，看电视的日
子才不好过呢！
真是刷新了我的三观，像我们这种普通人每天为了钱而迷茫，而真正的有钱人倒是因为
有钱可以选择自己喜欢的生活方式。

S*e2018-12-16 08:12

3 楼

多年前在这里看到了有多人提及Spark，就去看了看。后来就试一试组里的项目，经
理比较支持。在那以后的几年里，我们有好几个项目用了Spark。曾经有个项目还得到
SVP的赞许。那也是我提职为principal两三年艰难过程最后的了结：经理早就帮忙，
VP也点头了，可是上面卡的很死。老行业，半死不活的，也无可抱怨。其实，真的非常
鸡肋，只加了5%的薪水。这个坛子还是很不错的，特别像dwong， teacherwei，
guvest等等大牛始终给坛子常年做不少贡献。。。记得赵策写的特快，好虫特能博眼球
，可是英雄气短，不再与众人为伍。
现在在家度假，闲来就再聊聊那个基站异常大数据问题。虽然做的有点辛苦，但觉得
我的解决方案中有点“学术”的味道。在这里和大家分享一下，这基本上是我一个做的
，其中不免很多疏漏和拙见，请大家手下留情，轻砸。
我曾提到我觉得我们主任把问题抽象得很好。。。很多人看了那组数据可能摸不着头
脑，我最初也是如此。现在让我重述一下我们实际上想解决的问题：我们每小时能收
集到一亿多的一种geospatial数据点，在这一亿多中大约有几百万点是“坏点”。这些
坏点也可能是正常的（就像产品有一定的次品率）。但是，要是某个地方比其历史来
突然持续出现很多坏点，我们估计这个地方的基站可能出问题了。我们的目的是找出这
样的区域和基站。
我的方案是这样的：
1. 先把数据按小时分段。把当前小时的“坏点”拿出来分类，比较集中的地方出现
问题的可能性比较大。
2. 把当前小时的“坏点”放在一起，这样实际上我们就只有平面(球面）这两个纬
度了。这样分类容易一些，因为要把时间纬度放在一起，“距离”不好定义。
3. 用DBScan给“坏点”分类。这里也有不少坑。很多包对‘大’数据不行。最后，
选了https://elki-project.github.io/，经过开发者的提示，用covertree index极
大地提高了速度 – 几百万点用一个比较大的单机十几分钟就能完成（用Spark’s
Client mode, 这部分在Edge node上完成）。最初一二十万的点也需要很多小时才能完
成。调DBScan的参数也是一个“艺术“。分类的结果得到大约3~4万的clusters。
4. 下一步要计算“坏点“率。怎么算呢？分母的点集怎么定义？这是个难点。我数
学的基础可能对我有点帮助。。。前半生研究了十几年复杂的凸分析，结果用了一个最
简单的部分。我用3）中每个类里的“坏点”产生一个凸包（convex-hull），这样就定
义了一个含有这些“坏点”的区域。所有属于这个凸包的点就是分母了。在这上面也花
了不少时间：有的凸包太大包含太多点。又试了好多凹包（concave-hull），这是一个
没严格定义的东西。最后，实际上还有些太大的凸（凹）包，虽然我本人不太满意，但
有几个人认为它本身有意义，再分不一定好。
5. 要找到4）中的分母也不容易：有一亿点要判断它们是不是属于某个凸包。用了
GeoSpark里的SQL，但这毕竟是1亿对4万的“Cross Join“，非常昂贵，做不出来。
我试了一个小州的数据，倒是能算出来。可是即使把加州分成两三块，有时还是算不出
来。做“Cross Join“时，也给每个凸包画个矩形，这样可以在lat,lng上做数值比较
，好了不少但有时还是无法算出来。这个地方卡了我好久：给好多州划块，怎么实验有
时总是卡。突然有一天，我脑洞大开：把那4万个凸包每相邻的（就简单按凸包中心做
排序）100个分成一组，把这一百个凸包拼在一起，画个框，这样每次处理的数据大大
地减少了。这样还真的就能做出来了。同时，这也避免了事先画框（像把一个州分块）
把本来在一起的cluster给切开了。
6. 接下来的工作量还是很大：因为要比较历史做统计分析，还得把历史上得“坏点
“率算出来（我们选过去13个周得每周的同一天同一个小时）。这又涉及二十几个”
Cross Join“，但用5）最后的方法同样也做出来了。
7. 其它还有一些零碎工作，像找每个凸包里或附近的基站，这涉及更多的“Cross
Join“。我还帮助前端做了用Google maps 画出凸包（polygon），坏点分布和附近的
基站等的prototype。Detail是另一个人做。
我本人是匹老马了。好在我的经理非常信任我：不管做成什么样子都不会不满意。我也
从这里和我们组里的年轻人那里得到了不少东西。我提到得那个年轻人在我们组时，我
们经理给了他不少荣誉（评上公司优秀奖），以至于有一个老中对经理非常有意见。
其实，大家大部分人只是做一个搬砖的工作，做好做坏做什么大多时候不是那么重要
的。

j*a2018-12-16 08:12

4 楼

跟我女儿一模一样，现在五岁了好多了。
1. 叫两声，不回答后果自负（不吃饭，不出去玩，。。。）
2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
3. 袜子鞋子不穿就不穿吧，生病了去看医生。

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

m*r2018-12-16 08:12

5 楼

principle是什么title ? 比经理还高?

l*a2018-12-16 08:12

6 楼

一般喊他吃饭，出去玩还比较灵光，问题不大
通常是叫他，捡玩具，物品放回原处，刚洗了手不要碰马桶。。。。等等等等，
你说的第3条到时候看医生，很难做到不管不问，最近留鼻涕留了快一周了，每天喊他
擦鼻涕都不肯过来，反正就是不听。

【在 j*******a 的大作中提到】

: 跟我女儿一模一样，现在五岁了好多了。
: 1. 叫两声，不回答后果自负（不吃饭，不出去玩，。。。）
: 2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
: 3. 袜子鞋子不穿就不穿吧，生病了去看医生。

S*e2018-12-16 08:12

7 楼

Principal Developer. 与经理同级。。。其实在我们公司到senior已经和经理同级了。

【在 m******r 的大作中提到】

: principle是什么title ? 比经理还高?

l*a2018-12-16 08:12

8 楼

2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
————————————————
刚才就碰到，面对面问他，刚才妈妈（爸爸）喊你，你听到了吗？人回答，没听到
真是拿他没办法，不管吧不尽父母责任，管吧几乎没成效，穿拖鞋就是一个活生生的例
子，每天耐心的说，他不肯穿我帮他穿，扔到爪哇国再帮他拿回来，一遍遍讲道理都没
用，都快失去信心了。

g*t2018-12-16 08:12

9 楼

非常厉害。再次感谢讲解。
理论的知识能到新的user case和真实数据跑起来的，都不简单
。很理解你的感受。多年前学的东西很多种，后来有一小点忽然冒出来有用了。感觉跟
做梦差不多。
回头我仔细看看你这个方案，再向你请教。你这个是实际出来东西的，远高于无数论文
给的计划纸。
我不是什么大牛。可以说不怎么会写程序。
我来本站，是因为不审查敏感字，这样不会被机器训练/惩罚，然后产生自我审查意识。

j*a2018-12-16 08:12

10 楼

穿拖鞋这个事上，我觉得你的胜算不大。我自己很容易脚冷，所以一开始特别在乎，现
在已经彻底放弃了。Daycare里经常看到所有的孩子光着脚在跑，不乏有挂着鼻涕的。

【在 l****a 的大作中提到】

: 2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
: ————————————————
: 刚才就碰到，面对面问他，刚才妈妈（爸爸）喊你，你听到了吗？人回答，没听到
: 真是拿他没办法，不管吧不尽父母责任，管吧几乎没成效，穿拖鞋就是一个活生生的例
: 子，每天耐心的说，他不肯穿我帮他穿，扔到爪哇国再帮他拿回来，一遍遍讲道理都没
: 用，都快失去信心了。

g*t2018-12-16 08:12

11 楼

btw, 你是数学系的phd吧？
有时候我觉得这个教育体系出了大问题。据我所知，绝大多数phd都是学过的知识在工
作以后十几年才会有一点点能在真实数据，设备，市场上有用。
不知这个看法对不对。

S*p2018-12-16 08:12

12 楼

捡重要的说，不重要的事就别成天跟着娃念叨了，听烦了就不管重要的不重要的都自动
屏蔽了。
穿拖鞋这个，实在没必要一天说50遍。

S*e2018-12-16 08:12

13 楼

多谢赞誉。。。写第一个这方面的帖子时，没想要多写。后来，@chunjuan比较好奇是
什么问题，接着看大家还比较感兴趣，觉得把整个项目写一下给大家看看。也有点自我
欣赏的意思 :-).

识。

【在 g****t 的大作中提到】

: 非常厉害。再次感谢讲解。
: 理论的知识能到新的user case和真实数据跑起来的，都不简单
: 。很理解你的感受。多年前学的东西很多种，后来有一小点忽然冒出来有用了。感觉跟
: 做梦差不多。
: 回头我仔细看看你这个方案，再向你请教。你这个是实际出来东西的，远高于无数论文
: 给的计划纸。
: 我不是什么大牛。可以说不怎么会写程序。
: 我来本站，是因为不审查敏感字，这样不会被机器训练/惩罚，然后产生自我审查意识。

x*j2018-12-16 08:12

14 楼

check this book out:
how to talk so kids will listen & how to listen so kids will talk.
something like this.

d*c2018-12-16 08:12

15 楼

还是不太明白坏点的定义。
你之前给的数据只有位置和时间，还有基站的信息吗？如果没有基站信息，没法定义好
坏吧？
说某些点和其他点不一样就算坏点？怎么个不一样，时间上前后的数据有约束吗？还是
位置上前后的数据有约束？

x*j2018-12-16 08:12

16 楼

Hehe, 我觉得家长肯定也没长耳朵，对孩子的需要视而不见。

S*e2018-12-16 08:12

17 楼

1. 主任把实际问题抽象成那组数据，那组数据的每个记录都是“坏点”。要是他那
个问题能被解决的话，我这篇谈到的实际问题就能被解决。
2.实际问题有基站和其它许多附加信息，但只要上面的主要问题解决了，这些都迎刃
而解。
像我说的，这东西有点学术味道。我有点不太相信，许多人看了那个3D图看不出它的“
问题”所在。。。

【在 d******c 的大作中提到】

: 还是不太明白坏点的定义。
: 你之前给的数据只有位置和时间，还有基站的信息吗？如果没有基站信息，没法定义好
: 坏吧？
: 说某些点和其他点不一样就算坏点？怎么个不一样，时间上前后的数据有约束吗？还是
: 位置上前后的数据有约束？

m*n2018-12-16 08:12

18 楼

面对面没反应是会有, 但我觉得timeout不合适.
我的做法是, 偶尔一两次, 我提醒, 要是短时间内老这样,
我就其人之道还治其人之身.
你不是让我说好几遍没反应么? 好, 等你有事找我的时候,
你就说吧, 不说个百八十遍的, 你别指望我理你.

【在 j*******a 的大作中提到】

: 跟我女儿一模一样，现在五岁了好多了。
: 1. 叫两声，不回答后果自负（不吃饭，不出去玩，。。。）
: 2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
: 3. 袜子鞋子不穿就不穿吧，生病了去看医生。

m*r2018-12-16 08:12

19 楼

如果是'坏点', 怎么会有这么大数据量?
第二，假设worst case, 一个基站瘫痪了，server down, （当然其他基站会自动
cover，我们简化问题，假设附近没有其他基站），那么坏点是怎么收集起来的？这
就好比你只能看成功飞回来的战斗机哪里被子弹击中了。没有飞回来的战斗机，你也
不知道哪里被击中。因为没法收集数据。

j*u2018-12-16 08:12

20 楼

据说3岁左右的小孩都容易有这个毛病，会ourgrowth的。

S*e2018-12-16 08:12

21 楼

数据怎么收集的是商业秘密，我在这儿不能说。要是透露一点的话，就是google也收集
了不少我们收集的信息。我认为大家应该把精力放到那个抽象问题上，那是一个让大家
动脑筋，而又不被细枝末叶掩盖的好问题。

【在 m******r 的大作中提到】

: 如果是'坏点', 怎么会有这么大数据量?
: 第二，假设worst case, 一个基站瘫痪了，server down, （当然其他基站会自动
: cover，我们简化问题，假设附近没有其他基站），那么坏点是怎么收集起来的？这
: 就好比你只能看成功飞回来的战斗机哪里被子弹击中了。没有飞回来的战斗机，你也
: 不知道哪里被击中。因为没法收集数据。

p*g2018-12-16 08:12

22 楼

这个拖鞋事件怎么跟我们家一模一样啊，娃不但不穿拖鞋，还不穿袜子，不管冬夏，常
年如一日，我早就放弃了，怎么说也没用，我们家还有个大大的反面教材在那杵着呢，
娃她爸也这样，不过时间长了，发现人家体质如此吧，还真没生什么病。
关于listen这个问题，这个年龄的孩子这种行为很正常，他们其实是觉得父母说话很
boring才特意不理的，这个时候咱们一不能动气，一发飚人家更不听了，二不能太唐，
小孩子听不进去大道理的。可以参考no-cry discipline那本书里的一些方法，比如让
玩具说话，变任务为游戏之类的“小儿科”方式，因为孩子们觉得有兴趣自然会听你在
说什么了，先用他感兴趣的话引起他的注意力，在潜移默化的把你想说的道理告诉他。
当然这个做法花很多大人的脑细胞的，累了一天了还得想方设法用娃的方式和娃交流，
怎么当父母这么累啊，感觉我们小时候的大棒教育模式，父母应该轻松很多，唉！

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

c*n2018-12-16 08:12

23 楼

你这个确实是很独特的问题
而且很巧的是和我之前做过一个泥石流的项目有点相同点那个是纯学术类和你这边
有点像的是泥石流冲下峡谷改变地貌这里会有堆积那里会有冲刷整套模型是在高
精度的dem数据支持下运行的
所以稍微看懂你拿个问题之后我第一反应可以拿来当这做而且这本身就有一个时间
因素在影响最后结果掉线的多了点坑就深了点如果只是flickering那一会儿这个坑
又给填好了最后我按高度slice一下就好了
现在手机web发帖等下在容我重新看看你原帖确认下
不过我那个和你这个比起来还是少了几个量级而且只管结果处理速度什么都不是
问题扔大型机跑几天就好了原始程序也是很非cs的学术风没有多线程没有内存优化
而且全部存储都扔内存里

【在 S*******e 的大作中提到】

: 数据怎么收集的是商业秘密，我在这儿不能说。要是透露一点的话，就是google也收集
: 了不少我们收集的信息。我认为大家应该把精力放到那个抽象问题上，那是一个让大家
: 动脑筋，而又不被细枝末叶掩盖的好问题。

m*y2018-12-16 08:12

24 楼

孩子是在玩什么玩具或看电视么?有的人玩起来很focus，比如我，LD把头扎到电视机
和我之间喊我，我都有时听不见。汗。。。

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

S*e2018-12-16 08:12

25 楼

羞于提起。能用到一点那么多年的心血还是蛮兴奋的。

【在 g****t 的大作中提到】

: btw, 你是数学系的phd吧？
: 有时候我觉得这个教育体系出了大问题。据我所知，绝大多数phd都是学过的知识在工
: 作以后十几年才会有一点点能在真实数据，设备，市场上有用。
: 不知这个看法对不对。

l*a2018-12-16 08:12

26 楼

穿拖鞋真没必要这样，家里反正都开暖气，他冷了自个就知道了。我家的一直不肯盖被
子睡觉，一盖就踢飞，我努力了好久还是放弃了

【在 l****a 的大作中提到】

: 2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
: ————————————————
: 刚才就碰到，面对面问他，刚才妈妈（爸爸）喊你，你听到了吗？人回答，没听到
: 真是拿他没办法，不管吧不尽父母责任，管吧几乎没成效，穿拖鞋就是一个活生生的例
: 子，每天耐心的说，他不肯穿我帮他穿，扔到爪哇国再帮他拿回来，一遍遍讲道理都没
: 用，都快失去信心了。

m*r2018-12-16 08:12

27 楼

看不出问题，太正常了。
好比医生给我个x光片，什么都不说，我连个门都摸不着。人家给你讲讲，这里有个阴
影，像是癌症；那里变小了，完了，膝盖某个方向磨损差不多了，但还不至于做换膝手
术；你才恍然大悟。

【在 S*******e 的大作中提到】

: 羞于提起。能用到一点那么多年的心血还是蛮兴奋的。

j*u2018-12-16 08:12

28 楼

要是木地板咋办？

【在 l******a 的大作中提到】

: 穿拖鞋真没必要这样，家里反正都开暖气，他冷了自个就知道了。我家的一直不肯盖被
: 子睡觉，一盖就踢飞，我努力了好久还是放弃了

g*t2018-12-16 08:12

29 楼

我完全可以理解。这种机会在大公司一般干十年才能有一两次。
散户的好处就是天天可以兴奋。

【在 S*******e 的大作中提到】

: 羞于提起。能用到一点那么多年的心血还是蛮兴奋的。

p*g2018-12-16 08:12

30 楼

我家娃在卫生间的冰冷地砖上都光脚的，木地板更不在话下了，地毯对她都太奢侈了。

【在 j*****u 的大作中提到】

: 要是木地板咋办？

g*t2018-12-16 08:12

31 楼

My two cents:
algorithm技术含量在于查分母的点这个trick。
假如框以外也有分母的点，他的办法略有损失准确性。
但是根据数据因地制宜发明个trick的能力,一般人是不具备的。
"
把那4万个凸包每相邻的（就简单按凸包中心做
排序）100个分成一组，把这一百个凸包拼在一起，画个框，这样每次处理的数据大大
地减少了。"
这步肯定不是对所有类型数据都有效的假大空。
但是应该是对楼主的项目管用的实用技术。

【在 m******r 的大作中提到】

: 看不出问题，太正常了。
: 好比医生给我个x光片，什么都不说，我连个门都摸不着。人家给你讲讲，这里有个阴
: 影，像是癌症；那里变小了，完了，膝盖某个方向磨损差不多了，但还不至于做换膝手
: 术；你才恍然大悟。

l*a2018-12-16 08:12

32 楼

我闺女木地板上一样光脚，她说袜子臭臭，一回家就脱了。。。

【在 j*****u 的大作中提到】

: 要是木地板咋办？

w*m2018-12-16 08:12

33 楼

这个就相当于是engineering和science的区别吧。
另外一个例子就是，打车业务的nearby service找附近available的车。
理论上应该找附近一个圆的车。这个很麻烦。
为了engineering的需要，都是取的矩形。
这样只需要取左上和右下两个点就可以了。

m*y2018-12-16 08:12

34 楼

木地板穿袜子，容易摔。我们也光脚，把我妈急得。。

【在 l******a 的大作中提到】

: 我闺女木地板上一样光脚，她说袜子臭臭，一回家就脱了。。。

g*t2018-12-16 08:12

35 楼

可能的一个类比：先定义一些地标建筑。然后查这些建筑附近，available 的车的浓度
。如果
density超大或者超小，则需要解释。
我觉得
楼主的问题最复杂的其实是第一步，就是他的主任猜出来的
什么是坏点的定义和所使用的indictor. 这个setup, 穿透了信号和现实，非常难。因
为一次试错也许就要一年。
绝大多数时候，信号的异常不等于机器的异常。（楼主做的是信号的异常。）这两边隔
着一层纸，但这层纸很难穿透。所以用什么信号是他们的商业机密。

: 这个就相当于是engineering和science的区别吧。

: 另外一个例子就是，打车业务的nearby service找附近available的车。

: 理论上应该找附近一个圆的车。这个很麻烦。

: 为了engineering的需要，都是取的矩形。

: 这样只需要取左上和右下两个点就可以了。

【在 w********m 的大作中提到】

: 这个就相当于是engineering和science的区别吧。
: 另外一个例子就是，打车业务的nearby service找附近available的车。
: 理论上应该找附近一个圆的车。这个很麻烦。
: 为了engineering的需要，都是取的矩形。
: 这样只需要取左上和右下两个点就可以了。

l*a2018-12-16 08:12

36 楼

老人总恨不得把孩子穿的严严实实的，我妈还特意买了那种特厚的袜子给娃家里穿的，
一次都没用过。。。

【在 m****y 的大作中提到】

: 木地板穿袜子，容易摔。我们也光脚，把我妈急得。。

s*k2018-12-16 08:12

37 楼

你这个例子，看看能不能用sparkML来做啊，只有spark可能不够，spark处理的数据
offline还要做training，不然就是纯粹online做slide windowing的比较了？

【在 S*******e 的大作中提到】

: 羞于提起。能用到一点那么多年的心血还是蛮兴奋的。

j*a2018-12-16 08:12

38 楼

我家厨房还地钢砖呢，反正最后还是个不穿，我就不做无用功了。

【在 j*****u 的大作中提到】

: 要是木地板咋办？

d*c2018-12-16 08:12

39 楼

你原来帖子里写的是
a. Find the anomalous points in this data set
但是实际上那些数据全是坏点？我还是不太明白。
附加信息是必要的，没有附加信息没法理解点之间的相互关系和约束。如果是完全没有
约束的一些点，没法定义好坏。

【在 S*******e 的大作中提到】

: 羞于提起。能用到一点那么多年的心血还是蛮兴奋的。

f*m2018-12-16 08:12

40 楼

RE这个。我是好好和她讲了一次道理。还有就是小孩如果叫你的话，不管有事没事，你
都一定要应他。这是一个相互的过程。孩子的第一个老师就是父母。

【在 m**n 的大作中提到】

: 面对面没反应是会有, 但我觉得timeout不合适.
: 我的做法是, 偶尔一两次, 我提醒, 要是短时间内老这样,
: 我就其人之道还治其人之身.
: 你不是让我说好几遍没反应么? 好, 等你有事找我的时候,
: 你就说吧, 不说个百八十遍的, 你别指望我理你.

l*a2018-12-16 08:12

41 楼

偶尔做过,让他感受
然后讲给他听
大部分时候正面教育,尤其是晚上都在家的时候,他喊我们其中一个,一个答应,另一个就
发话了,你看,你喊爸爸(妈妈),爸爸妈妈立刻答应你了,下次我们喊你,你是不是也要这
样呢.
人家答应的很好.

【在 m**n 的大作中提到】

: 面对面没反应是会有, 但我觉得timeout不合适.
: 我的做法是, 偶尔一两次, 我提醒, 要是短时间内老这样,
: 我就其人之道还治其人之身.
: 你不是让我说好几遍没反应么? 好, 等你有事找我的时候,
: 你就说吧, 不说个百八十遍的, 你别指望我理你.

l*a2018-12-16 08:12

42 楼

最近想花力气集中整顿这件事,所以说的比较多,一周了没效果,而且这一周没耳朵听的
现象也比较严重,这才发贴来看看大家怎么教育孩子的.
我也担心说多了,成老油条那就更麻烦了.

【在 S****p 的大作中提到】

: 捡重要的说，不重要的事就别成天跟着娃念叨了，听烦了就不管重要的不重要的都自动
: 屏蔽了。
: 穿拖鞋这个，实在没必要一天说50遍。

l*a2018-12-16 08:12

43 楼

好的.

【在 x**********j 的大作中提到】

: check this book out:
: how to talk so kids will listen & how to listen so kids will talk.
: something like this.

l*a2018-12-16 08:12

44 楼

仔细想了想应该没有
我现在全职带他,比较注重观察和发现他的行为,思想活动和需求等

【在 x**********j 的大作中提到】

: Hehe, 我觉得家长肯定也没长耳朵，对孩子的需要视而不见。

l*a2018-12-16 08:12

45 楼

时时刻刻想着把道理简单易懂的灌输给他,真是一件很累很累的事,有时候自己说的都觉
得恶心.
穿拖鞋这事,看来我要放弃了,刚入秋没来暖气那会很凉,现在暖气比较足,好多了,

【在 p*******g 的大作中提到】

: 这个拖鞋事件怎么跟我们家一模一样啊，娃不但不穿拖鞋，还不穿袜子，不管冬夏，常
: 年如一日，我早就放弃了，怎么说也没用，我们家还有个大大的反面教材在那杵着呢，
: 娃她爸也这样，不过时间长了，发现人家体质如此吧，还真没生什么病。
: 关于listen这个问题，这个年龄的孩子这种行为很正常，他们其实是觉得父母说话很
: boring才特意不理的，这个时候咱们一不能动气，一发飚人家更不听了，二不能太唐，
: 小孩子听不进去大道理的。可以参考no-cry discipline那本书里的一些方法，比如让
: 玩具说话，变任务为游戏之类的“小儿科”方式，因为孩子们觉得有兴趣自然会听你在
: 说什么了，先用他感兴趣的话引起他的注意力，在潜移默化的把你想说的道理告诉他。
: 当然这个做法花很多大人的脑细胞的，累了一天了还得想方设法用娃的方式和娃交流，
: 怎么当父母这么累啊，感觉我们小时候的大棒教育模式，父母应该轻松很多，唉！

l*a2018-12-16 08:12

46 楼

我觉得你带的有点太细了，想起我小时候也很烦爸妈唠叨（我爸巨唠叨），看你说一天
要说50遍穿拖鞋马上想起我的童年。。。

【在 l****a 的大作中提到】

:
: 时时刻刻想着把道理简单易懂的灌输给他,真是一件很累很累的事,有时候自己说的都觉
: 得恶心.
: 穿拖鞋这事,看来我要放弃了,刚入秋没来暖气那会很凉,现在暖气比较足,好多了,

l*a2018-12-16 08:12

47 楼

赞你的注意力,我从来不会这样,我家ld会.

【在 m****y 的大作中提到】

: 孩子是在玩什么玩具或看电视么?有的人玩起来很focus，比如我，LD把头扎到电视机
: 和我之间喊我，我都有时听不见。汗。。。

l*a2018-12-16 08:12

48 楼

我们很注意这么和他互动的
他喊我们立刻答应,如果手头在回个email等重要的事的话,那肯定说等一会,
如果都在家,我会告诉他妈妈暂时没空,在做什么,你喊爸爸,通常他爸爸也会立刻回应.

【在 f********m 的大作中提到】

: RE这个。我是好好和她讲了一次道理。还有就是小孩如果叫你的话，不管有事没事，你
: 都一定要应他。这是一个相互的过程。孩子的第一个老师就是父母。

l*a2018-12-16 08:12

49 楼

最近想集中精力整顿此事,所以说了多了点
不过留鼻涕需要经常擦,万一不小心病了也比较麻烦呢.

【在 l******a 的大作中提到】

: 我觉得你带的有点太细了，想起我小时候也很烦爸妈唠叨（我爸巨唠叨），看你说一天
: 要说50遍穿拖鞋马上想起我的童年。。。

f*r2018-12-16 08:12

50 楼

就是欠揍

v*e2018-12-16 08:12

51 楼

言之必行，行之比果。
一直不断地“言言言言言”，是木有用地～～

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

A*n2018-12-16 08:12

52 楼

你是不是要求的太多了？太多了就不停地唐唐唐，然后逐渐的唐就不管用了。
我觉得要有house rule，但是要少而精，比如不能打人，不能碰危险的东西。
这些规矩，犯之必罚，不能有一次不罚。其他事情，像穿拖鞋这样的，实在
没有必要要求。光脚不会生病的，除非是没暖气的水泥地

l*a2018-12-16 08:12

53 楼

恩，反省思考中

【在 A**n 的大作中提到】

: 你是不是要求的太多了？太多了就不停地唐唐唐，然后逐渐的唐就不管用了。
: 我觉得要有house rule，但是要少而精，比如不能打人，不能碰危险的东西。
: 这些规矩，犯之必罚，不能有一次不罚。其他事情，像穿拖鞋这样的，实在
: 没有必要要求。光脚不会生病的，除非是没暖气的水泥地

t*z2018-12-16 08:12

54 楼

教育孩子真是一个大学问，物极必反。我家小子也一样，前些天刚开始冷的时候让他穿
裤子，说不好听的，都跟杀猪一样。这几天知道冷了才乖乖让人给他穿裤子。真是没办
法。

i*e2018-12-16 08:12

55 楼

要不，咱不喊了
咱每次都走到他跟前，
叫名字，没反应
咱就蹲下，双手扳双肩，眼睛直视其双眼，说：xxx,吃饭了！
如果娃不看咱，咱就要求：xxx，妈妈跟你说话的时候，请你看着妈妈
拖鞋袜子的事，就算了吧，娃比咱们火大，你越追着要求，对有些孩子来说，越适得其反

【在 l****a 的大作中提到】

: 2. 面对面跟她说话时如果没反应，数一二三，还不理就timeout。
: ————————————————
: 刚才就碰到，面对面问他，刚才妈妈（爸爸）喊你，你听到了吗？人回答，没听到
: 真是拿他没办法，不管吧不尽父母责任，管吧几乎没成效，穿拖鞋就是一个活生生的例
: 子，每天耐心的说，他不肯穿我帮他穿，扔到爪哇国再帮他拿回来，一遍遍讲道理都没
: 用，都快失去信心了。

v*e2018-12-16 08:12

56 楼

对～俺就是这个意思～～

其反

【在 i**e 的大作中提到】

: 要不，咱不喊了
: 咱每次都走到他跟前，
: 叫名字，没反应
: 咱就蹲下，双手扳双肩，眼睛直视其双眼，说：xxx,吃饭了！
: 如果娃不看咱，咱就要求：xxx，妈妈跟你说话的时候，请你看着妈妈
: 拖鞋袜子的事，就算了吧，娃比咱们火大，你越追着要求，对有些孩子来说，越适得其反

x*j2018-12-16 08:12

57 楼

哈哈，你好谦虚。
我觉得啊，我妈说的一句话让我触动很大，我妈问我爸，为什么我爸说什么我们这几个
孩子都比较响应，我妈说破嘴皮子了，我们动都不动一下？我爸说我妈太罗嗦了。想想
也是。我现在尽量不是什么琐碎的事情都要求孩子按照我的规矩办，比如光脚这件事情
，似乎也没看娃得病，无非就是脚凉一点而已。但是，有些事情，孩子必须听我的，尤
其是涉及到危险啊，品德方面的事情。所谓的抓大放小。大的方向我把握，小的事情娃
自己做主。这个大的事情一般生活中还不能太多。否则你时时刻刻啰嗦，到娃该听的时
候也不听你的了。

【在 l****a 的大作中提到】

:
: 恩，反省思考中

j*a2018-12-16 08:12

58 楼

等我最后一句话说完了，我闺女会抬起头来说：“嗯？啊？你说什么？”
这种情况下你再重复吗？

其反

【在 i**e 的大作中提到】

: 要不，咱不喊了
: 咱每次都走到他跟前，
: 叫名字，没反应
: 咱就蹲下，双手扳双肩，眼睛直视其双眼，说：xxx,吃饭了！
: 如果娃不看咱，咱就要求：xxx，妈妈跟你说话的时候，请你看着妈妈
: 拖鞋袜子的事，就算了吧，娃比咱们火大，你越追着要求，对有些孩子来说，越适得其反

c*e2018-12-16 08:12

59 楼

听话了要表扬，要奖励，这点很重要

p*g2018-12-16 08:12

60 楼

re这个“抓大放小”，我现在也基本上是这样做了，感觉轻松多了，我lg说我现在净当
老好人了，我说那时因为咱娃大的方面都做的非常好，没有犯到我手里。至于吃饭磨蹭
点，刷牙洗脸磨蹭点，我都不怎么罗索了。

【在 x**********j 的大作中提到】

: 哈哈，你好谦虚。
: 我觉得啊，我妈说的一句话让我触动很大，我妈问我爸，为什么我爸说什么我们这几个
: 孩子都比较响应，我妈说破嘴皮子了，我们动都不动一下？我爸说我妈太罗嗦了。想想
: 也是。我现在尽量不是什么琐碎的事情都要求孩子按照我的规矩办，比如光脚这件事情
: ，似乎也没看娃得病，无非就是脚凉一点而已。但是，有些事情，孩子必须听我的，尤
: 其是涉及到危险啊，品德方面的事情。所谓的抓大放小。大的方向我把握，小的事情娃
: 自己做主。这个大的事情一般生活中还不能太多。否则你时时刻刻啰嗦，到娃该听的时
: 候也不听你的了。

l*a2018-12-16 08:12

61 楼

看来每个妈妈渡被孩子磨的没脾气了哈

【在 p*******g 的大作中提到】

: re这个“抓大放小”，我现在也基本上是这样做了，感觉轻松多了，我lg说我现在净当
: 老好人了，我说那时因为咱娃大的方面都做的非常好，没有犯到我手里。至于吃饭磨蹭
: 点，刷牙洗脸磨蹭点，我都不怎么罗索了。

l*a2018-12-16 08:12

62 楼

其反
这样做过
而且人家现在认错态度还很好，知道我说话重了语气强烈了，赶忙说对不起
哎！

【在 i**e 的大作中提到】

: 要不，咱不喊了
: 咱每次都走到他跟前，
: 叫名字，没反应
: 咱就蹲下，双手扳双肩，眼睛直视其双眼，说：xxx,吃饭了！
: 如果娃不看咱，咱就要求：xxx，妈妈跟你说话的时候，请你看着妈妈
: 拖鞋袜子的事，就算了吧，娃比咱们火大，你越追着要求，对有些孩子来说，越适得其反

l*a2018-12-16 08:12

63 楼

天下不罗嗦的妈妈还真不多见
主要是小事都妈妈在抓，少数几个大事爸爸在抓

【在 x**********j 的大作中提到】

: 哈哈，你好谦虚。
: 我觉得啊，我妈说的一句话让我触动很大，我妈问我爸，为什么我爸说什么我们这几个
: 孩子都比较响应，我妈说破嘴皮子了，我们动都不动一下？我爸说我妈太罗嗦了。想想
: 也是。我现在尽量不是什么琐碎的事情都要求孩子按照我的规矩办，比如光脚这件事情
: ，似乎也没看娃得病，无非就是脚凉一点而已。但是，有些事情，孩子必须听我的，尤
: 其是涉及到危险啊，品德方面的事情。所谓的抓大放小。大的方向我把握，小的事情娃
: 自己做主。这个大的事情一般生活中还不能太多。否则你时时刻刻啰嗦，到娃该听的时
: 候也不听你的了。

l*a2018-12-16 08:12

64 楼

我走到儿子跟前
问，刚才妈妈喊你听到了吗/妈妈说的你听见了吗
答：没听到（有时还摇着头）

【在 j*******a 的大作中提到】

: 等我最后一句话说完了，我闺女会抬起头来说：“嗯？啊？你说什么？”
: 这种情况下你再重复吗？
:
: 其反

l*a2018-12-16 08:12

65 楼

恩

【在 c*******e 的大作中提到】

: 听话了要表扬，要奖励，这点很重要

S*L2018-12-16 08:12

66 楼

不一定是故意的。找医生查查是不是有Sensory Processing的问题。

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

n*a2018-12-16 08:12

67 楼

我家也是不穿拖鞋，不穿袜。家里木地板，厨房地板砖，每次摸他脚都冰凉，
鼻子挂老长。他爹用“面对面跟他说，如果没反应，数一二三，还不理就timeout。”
这招，当时管用，转眼就忘了。带他去超市挑拖鞋，啥都不喜欢，不要穿，
晚上睡觉不盖被子，非要搭一个夏天盖肚子的绵绸布，跟他说天冷要换被，
就是不干，你给他盖了，他一旦发现立马蹬了，还要发脾气。那块绵绸布
还不能洗，洗了没干，晚上睡觉看不见那就一顿大闹，没完没了了。

c*g2018-12-16 08:12

68 楼

Mine is like that. But he is 5 already.
He is not like that when he was little.
Now he is doing that intentionally to ignore me.
Very very annoying...

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？

l*e2018-12-16 08:12

69 楼

看来需要不停地推荐magic 1-2-3呀

【在 l****a 的大作中提到】

: 喊他就跟没听到一样，
: 非得要你一而再再而三
: 即使我走到跟前喊他了，他继续他的事，我就非常恼火
: 每天为穿拖鞋的事，从一睁眼到晚上上床前，少说要讲50遍以上，但还没让他养成这个
: 习惯，穿上脚一会就脱了，不穿拖鞋穿袜子也行啊，可是一样喜欢脱。
: 我怕再这么下去我就要唠叨死了，
: 每天跟他唐，爸爸妈妈喊了要答应，或者问问什么事，爸爸妈妈吩咐的事，如果不想做
: 的话也要回应下，说等一会什么的，可是唐10次能做到1次就很错了，
: 有没有孩子象我儿子的呢，他27个半月大，又该怎么对付没耳朵听的孩子呢？