数据库的data和tensorflow集成 - 未名空间MITBBS历史存档

数据库的data和tensorflow集成# Programming - 葵花宝典

L*m2018-05-04 07:05

1 楼

现在已经可以付>25%，还有一些存款和股票，在犹豫是不是取出来增加首付（当然还要
留一些应急的钱）。这样loan amount可降到417k，利率稍微好一点(少0.25%左右）。
还有如果选15年fix利率又可降一点。这样做值得吗？我们平时没什么投资手段，存款
都在saving account，利率很低。

f*22018-05-04 07:05

2 楼

看了一个文章，用数据库的数据做训练集，做了一个tensorflow的接口。
看完了有两个问题：
1. 深度网络对这种数据真有有用吗？作者是不是蹭热点啊？
2. 即使真有用，tensorflow对这种一行一行sql query出来的数据，训练起来太慢了吧？

y*h2018-05-04 07:05

3 楼

至少要留几万块的应急钱吧，万一失业了涅？

【在 L***m 的大作中提到】

: 现在已经可以付>25%，还有一些存款和股票，在犹豫是不是取出来增加首付（当然还要
: 留一些应急的钱）。这样loan amount可降到417k，利率稍微好一点(少0.25%左右）。
: 还有如果选15年fix利率又可降一点。这样做值得吗？我们平时没什么投资手段，存款
: 都在saving account，利率很低。

w*g2018-05-04 07:05

4 楼

一般数据库I/O根本跟不上tf训练要求。
还有spark和tf整合的，都是扯淡。

吧？

【在 f******2 的大作中提到】

: 看了一个文章，用数据库的数据做训练集，做了一个tensorflow的接口。
: 看完了有两个问题：
: 1. 深度网络对这种数据真有有用吗？作者是不是蹭热点啊？
: 2. 即使真有用，tensorflow对这种一行一行sql query出来的数据，训练起来太慢了吧？

c*o2018-05-04 07:05

5 楼

最好不要，除非你的工作比O8还稳定

f*22018-05-04 07:05

6 楼

谢谢指点。
您回答了我第二个问题，这玩意儿系统层面讲就是胡扯。
那么我问的第一个问题您怎么看？（假设系统performance不是问题）数据库的这些
tabulated value能做深度网络的训练数据吗？我孤陋寡闻，似乎没有听说structured
data适合这么玩儿的

: 一般数据库I/O根本跟不上tf训练要求。

: 还有spark和tf整合的，都是扯淡。

: 吧？

【在 w***g 的大作中提到】

: 一般数据库I/O根本跟不上tf训练要求。
: 还有spark和tf整合的，都是扯淡。
:
: 吧？

y*h2018-05-04 07:05

7 楼

08也不稳定，只有3年合同而且随时都可以被弹劾下台

【在 c****o 的大作中提到】

: 最好不要，除非你的工作比O8还稳定

w*g2018-05-04 07:05

8 楼

到2017年12月为止，我认为table data应该无脑上LGBT。
最近我改变观点了。我觉得经过合适的处理，用CNN可以和
LGBT做的差不多好，可能稍微差一点。但是上CNN是值得的，
就是手工调architecture要容易的多，还可以整合各种类型的数据。
CNN提特征再LGBT，就没法end to end，在精度上是要吃亏的。
CNN主要的技术是embedding处理categorical variable。
参考这个kernel:
https://www.kaggle.com/alexanderkireev/deep-learning-support-9663
所有的kernel在这里
https://www.kaggle.com/c/talkingdata-adtracking-fraud-detection/kernels
一般分数在0.96x到0.97x之间。 xgb/lgbm流比cnn流的kernel要多，
平均分数要高。但是差别在0.01之内。leaderboard第一是0.983，我估计
就是拿public kernel的技术在加上各种ensemble stacking啥的弄出来的。

structured

【在 f******2 的大作中提到】

: 谢谢指点。
: 您回答了我第二个问题，这玩意儿系统层面讲就是胡扯。
: 那么我问的第一个问题您怎么看？（假设系统performance不是问题）数据库的这些
: tabulated value能做深度网络的训练数据吗？我孤陋寡闻，似乎没有听说structured
: data适合这么玩儿的
:
:
: 一般数据库I/O根本跟不上tf训练要求。
:
: 还有spark和tf整合的，都是扯淡。
:
: 吧？
:

w*j2018-05-04 07:05

9 楼

08其实比我们都不稳，随时都担心自己的人身安全。

【在 y*h 的大作中提到】

: 08也不稳定，只有3年合同而且随时都可以被弹劾下台

w*r2018-05-04 07:05

10 楼

我觉得从data warehousing的角度，做一个从数据库到类似TFrecord的工具还是有意义
的。先有一个基础大数据集，再针对不同的学习任务，trim一个更高效的衍生数据集

w*j2018-05-04 07:05

11 楼

08其实比我们都不稳，随时都担心自己的人身安全。

【在 y*h 的大作中提到】

: 08也不稳定，只有3年合同而且随时都可以被弹劾下台

s*k2018-05-04 07:05

12 楼

其实如果数据范式一直比较稳定，可以先train一个embedding，然后直接上DNN，好处
是可以iterate这样做，用spark的地方一般都是stream，不停有数据来，数据来了每次
可以直接算embedding然后做个几层的DNN，类似youtube那种wide network。embedding
每隔一段时间重新train一下，保证pipeline一直走，有可以不断更新

【在 w***g 的大作中提到】

: 到2017年12月为止，我认为table data应该无脑上LGBT。
: 最近我改变观点了。我觉得经过合适的处理，用CNN可以和
: LGBT做的差不多好，可能稍微差一点。但是上CNN是值得的，
: 就是手工调architecture要容易的多，还可以整合各种类型的数据。
: CNN提特征再LGBT，就没法end to end，在精度上是要吃亏的。
: CNN主要的技术是embedding处理categorical variable。
: 参考这个kernel:
: https://www.kaggle.com/alexanderkireev/deep-learning-support-9663
: 所有的kernel在这里
: https://www.kaggle.com/c/talkingdata-adtracking-fraud-detection/kernels

m*o2018-05-04 07:05

13 楼

没必要。万一有个急用手头就没钱了。

l*n2018-05-04 07:05

14 楼

这对business user是个很大的卖点，把DL完全白菜化。数据库那个公司没有，有了这
么个接口，然后就可以号称ai产品，想想都有点小激动。估计会有一波dl工具的热潮。
这个在搞ml的时候，不是很多公司就干这个，开发工具给analyst做ml？这基本是一个
思路。最好在来个gui的界面，直接drag一下就出model

吧？

【在 f******2 的大作中提到】

: 看了一个文章，用数据库的数据做训练集，做了一个tensorflow的接口。
: 看完了有两个问题：
: 1. 深度网络对这种数据真有有用吗？作者是不是蹭热点啊？
: 2. 即使真有用，tensorflow对这种一行一行sql query出来的数据，训练起来太慢了吧？

w*g2018-05-04 07:05

15 楼

贷点款对减税有好处。

M*02018-05-04 07:05

16 楼

没有完全明白你说的embedding比LGBT的优势在哪里
去年曾经在我们的data上试过embedding+DNN 结果远不如LGBT 也可能是我train不到位
的原因我没有GPU 只是用CPU做的training
但如果我可以花很短的时间train一个相对结果更好的LGBT模型那么embedding+DNN优
势在哪里呢？

【在 w***g 的大作中提到】

: 到2017年12月为止，我认为table data应该无脑上LGBT。
: 最近我改变观点了。我觉得经过合适的处理，用CNN可以和
: LGBT做的差不多好，可能稍微差一点。但是上CNN是值得的，
: 就是手工调architecture要容易的多，还可以整合各种类型的数据。
: CNN提特征再LGBT，就没法end to end，在精度上是要吃亏的。
: CNN主要的技术是embedding处理categorical variable。
: 参考这个kernel:
: https://www.kaggle.com/alexanderkireev/deep-learning-support-9663
: 所有的kernel在这里
: https://www.kaggle.com/c/talkingdata-adtracking-fraud-detection/kernels

w*g2018-05-04 07:05

17 楼

如果想降利率，也可以买point,相关的花费也可以免税。

【在 L***m 的大作中提到】

: 现在已经可以付>25%，还有一些存款和股票，在犹豫是不是取出来增加首付（当然还要
: 留一些应急的钱）。这样loan amount可降到417k，利率稍微好一点(少0.25%左右）。
: 还有如果选15年fix利率又可降一点。这样做值得吗？我们平时没什么投资手段，存款
: 都在saving account，利率很低。

l*m2018-05-04 07:05

18 楼

从训练复杂度来讲，GBM是O（N LOG N）的，N是数据量。DNN是O（N）。而且GBM没法
MINI-BATCH
从计算角度， DNN只用到非常少而且大众的OPERATIONs，很容易在不同的硬件上加速。

【在 M********0 的大作中提到】

: 没有完全明白你说的embedding比LGBT的优势在哪里
: 去年曾经在我们的data上试过embedding+DNN 结果远不如LGBT 也可能是我train不到位
: 的原因我没有GPU 只是用CPU做的training
: 但如果我可以花很短的时间train一个相对结果更好的LGBT模型那么embedding+DNN优
: 势在哪里呢？

b*l2018-05-04 07:05

19 楼

贷款有几个关键的阀值，3%，5%，10%，15%，20%（jumbo还有25%）。另外就是你说的
几个贷款总额的阀值：417k,523k,714k.主要看你最大总体成本。不但要考虑利率的降
低，还有将来贷款支付风险/收入风险，投资回报之类的。如果你将来没有别的增加开
销风险，工作十分稳定（比如太牛了的教授--学校经济状况不错），可以考虑。否则，
最好达到20%的比例就好。多余的钱用作应急基金。不要忘了，即使你这里没有需要，
万一国内父母有个问题需要钱呢？

【在 L***m 的大作中提到】

: 现在已经可以付>25%，还有一些存款和股票，在犹豫是不是取出来增加首付（当然还要
: 留一些应急的钱）。这样loan amount可降到417k，利率稍微好一点(少0.25%左右）。
: 还有如果选15年fix利率又可降一点。这样做值得吗？我们平时没什么投资手段，存款
: 都在saving account，利率很低。

M*02018-05-04 07:05

20 楼

OK 听着有道理我需要理解下你的观点 lol

【在 l*******m 的大作中提到】

: 从训练复杂度来讲，GBM是O（N LOG N）的，N是数据量。DNN是O（N）。而且GBM没法
: MINI-BATCH
: 从计算角度， DNN只用到非常少而且大众的OPERATIONs，很容易在不同的硬件上加速。

u*b2018-05-04 07:05

21 楼

从钱来讲，现在利率很低，加上退税相当于利息打了个25%折扣，所以实际利息成本就
是不到4%。
你不必急于还贷款，留些钱备用，或者投资。从保守的方面说，留2年的生活费，再拿
点钱投资，不挺好的吗。

w*g2018-05-04 07:05

22 楼

我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的性能
可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。
我这样挑剔肯定是赚不到钱的。

【在 l******n 的大作中提到】

: 这对business user是个很大的卖点，把DL完全白菜化。数据库那个公司没有，有了这
: 么个接口，然后就可以号称ai产品，想想都有点小激动。估计会有一波dl工具的热潮。
: 这个在搞ml的时候，不是很多公司就干这个，开发工具给analyst做ml？这基本是一个
: 思路。最好在来个gui的界面，直接drag一下就出model
:
: 吧？

H*72018-05-04 07:05

23 楼

人家没投资手端。还贷款就等于投资房子

【在 u******b 的大作中提到】

: 从钱来讲，现在利率很低，加上退税相当于利息打了个25%折扣，所以实际利息成本就
: 是不到4%。
: 你不必急于还贷款，留些钱备用，或者投资。从保守的方面说，留2年的生活费，再拿
: 点钱投资，不挺好的吗。

s*k2018-05-04 07:05

24 楼

https://dynamics.microsoft.com/en-us/
已经被搞进Azure了，大多数business根本不需要DL，但是宣传一下powered by AI估计
能多charge点，本质上还是UX和data pipeline backend的工作多

【在 l******n 的大作中提到】

: 这对business user是个很大的卖点，把DL完全白菜化。数据库那个公司没有，有了这
: 么个接口，然后就可以号称ai产品，想想都有点小激动。估计会有一波dl工具的热潮。
: 这个在搞ml的时候，不是很多公司就干这个，开发工具给analyst做ml？这基本是一个
: 思路。最好在来个gui的界面，直接drag一下就出model
:
: 吧？

s*n2018-05-04 07:05

25 楼

不会就学阿，把钱都投到不动产上，有个风吹草动就比较难受了。
至少现在买点C, BAC，等上10年，应该不差吧。

【在 H******7 的大作中提到】

: 人家没投资手端。还贷款就等于投资房子

c*v2018-05-04 07:05

26 楼

DL is a selling point now.
顺风扯旗，跟上大队。你不跟，将来就算DL算法不是最好，
但是大队的人改进DL tool，系统做的干净漂亮高效，你再好的算法也会被打死。
另外CNN只有三个算子。矩阵乘法，ReLu，卷积。结构简单，
扩展性很强。可以堆硬件。堆硬件比堆人省事。这个优点是实打实的。

【在 M********0 的大作中提到】

: 没有完全明白你说的embedding比LGBT的优势在哪里
: 去年曾经在我们的data上试过embedding+DNN 结果远不如LGBT 也可能是我train不到位
: 的原因我没有GPU 只是用CPU做的training
: 但如果我可以花很短的时间train一个相对结果更好的LGBT模型那么embedding+DNN优
: 势在哪里呢？

n*n2018-05-04 07:05

27 楼

怯怯地问一句:
417k偶知道,但523k,714k是什么呢?
417k,523k,714k之间的利率差有多大呢?
偶附近村里房贵,地贵,偶一直想把贷款额度降到417K,但难度很大啊,请问大家贷523k,
714k会比417K利率高很多吗?
谢谢!!

【在 b*****l 的大作中提到】

: 贷款有几个关键的阀值，3%，5%，10%，15%，20%（jumbo还有25%）。另外就是你说的
: 几个贷款总额的阀值：417k,523k,714k.主要看你最大总体成本。不但要考虑利率的降
: 低，还有将来贷款支付风险/收入风险，投资回报之类的。如果你将来没有别的增加开
: 销风险，工作十分稳定（比如太牛了的教授--学校经济状况不错），可以考虑。否则，
: 最好达到20%的比例就好。多余的钱用作应急基金。不要忘了，即使你这里没有需要，
: 万一国内父母有个问题需要钱呢？

l*m2018-05-04 07:05

28 楼

尤其是云服务商，希望越慢越好。比如在云上租个2xP100或V100，简单的benchmark似
乎没问题，训练个imageNet就慢好多。因为default 硬盘是网盘， IO有限。一般用户
也不知道应该有多块，服务商省了一大笔电费，偷着笑。少数有能力的发现问题，只好
租有local SSD的instances 了，还是要多花些钱，但至少明明白白。

【在 w***g 的大作中提到】

: 我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的性能
: 可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。
: 我这样挑剔肯定是赚不到钱的。

q*m2018-05-04 07:05

29 楼

523k是jumbo conforming？你去问一个loan broker就知道了。
我把所有钱都扑出去了，只贷417k。

【在 n********n 的大作中提到】

: 怯怯地问一句:
: 417k偶知道,但523k,714k是什么呢?
: 417k,523k,714k之间的利率差有多大呢?
: 偶附近村里房贵,地贵,偶一直想把贷款额度降到417K,但难度很大啊,请问大家贷523k,
: 714k会比417K利率高很多吗?
: 谢谢!!

L*82018-05-04 07:05

30 楼

弱问一句 CNN咋处理这个表格数据？

【在 w***g 的大作中提到】

: 到2017年12月为止，我认为table data应该无脑上LGBT。
: 最近我改变观点了。我觉得经过合适的处理，用CNN可以和
: LGBT做的差不多好，可能稍微差一点。但是上CNN是值得的，
: 就是手工调architecture要容易的多，还可以整合各种类型的数据。
: CNN提特征再LGBT，就没法end to end，在精度上是要吃亏的。
: CNN主要的技术是embedding处理categorical variable。
: 参考这个kernel:
: https://www.kaggle.com/alexanderkireev/deep-learning-support-9663
: 所有的kernel在这里
: https://www.kaggle.com/c/talkingdata-adtracking-fraud-detection/kernels

B*42018-05-04 07:05

31 楼

我总是听到这样的说法，＂买房子要在手头留几万块以备万一＂。难到你们都买房子了
申请贷款了，都没听说过HELOC（home equity line of credit)？为什么要放几万块
钱闲置去防备那不知道会不会发生的＂万一＂？当那个多半不会发生的＂万一＂真得
来临，你只要能从银行借到钱不就行了？
我现在申请的房屋贷款就是HELOC，我们银行规定是只要我首付超过银行对房子估价的
２５％就可以申请。然后我把所有的钱都放到首付里。每个月还款没有最高限度，我总
是尽量把手里的钱拿去还款。当我需要钱时，我可以先减少还款额（最低还款额是上个
月的利息）。如果我需要更多的钱，我还可以从HELOC里借钱，利息是一样的。只要借
款不超过我已经还的贷款，不需要任何手续，跟从自己的支票帐户里提钱一样。
中国人手头总是有些钱，能付得起２５％首付的不少，为什么不考虑HELOC?

l*m2018-05-04 07:05

32 楼

DNN， typo

【在 L****8 的大作中提到】

: 弱问一句 CNN咋处理这个表格数据？

n*n2018-05-04 07:05

33 楼

这个417K是在所有的州都适用还是有些high-cost areas 是以$729,750为界线的?
偶查到的:http://www.fhfa.gov/Default.aspx?Page=185
Fannie Mae and Freddie Mac are restricted by law to purchasing single-family
mortgages with origination balances below a specific amount, known as the
“conforming loan limit.” Loans above this limit are known as jumbo loans.
偶也一直想把贷款额度限定于417K的,但如果这样的话,首付就要到30-40%(还没敢考虑
小学,中学,高中都特好的学区)...
偶看了一下这个表中,偶这村里的limit是$729,750,这是不是说只要贷$729,750以下的
就都是conforming loan呢?(偶想尽量避免jumbo loan,这么多贷款,利率高一点每个月
就要多还几百啊)

【在 q********m 的大作中提到】

: 523k是jumbo conforming？你去问一个loan broker就知道了。
: 我把所有钱都扑出去了，只贷417k。

f*22018-05-04 07:05

34 楼

在输入是图像这种训练输入的时候，每一层干啥大家慢慢能给个不太靠谱的解释。
在输入是一堆（k，（v1，v2，v3.....））这种数据库里的rows的时候，这dnn怎么玩
的？会不会很快就overfit了？

: DNN， typo

【在 l*******m 的大作中提到】

: DNN， typo

t*a2018-05-04 07:05

35 楼

但如果你的房子房价下降25%,你还能够得到当年贷款额度那末多的贷款么?

【在 B********4 的大作中提到】

: 我总是听到这样的说法，＂买房子要在手头留几万块以备万一＂。难到你们都买房子了
: 申请贷款了，都没听说过HELOC（home equity line of credit)？为什么要放几万块
: 钱闲置去防备那不知道会不会发生的＂万一＂？当那个多半不会发生的＂万一＂真得
: 来临，你只要能从银行借到钱不就行了？
: 我现在申请的房屋贷款就是HELOC，我们银行规定是只要我首付超过银行对房子估价的
: ２５％就可以申请。然后我把所有的钱都放到首付里。每个月还款没有最高限度，我总
: 是尽量把手里的钱拿去还款。当我需要钱时，我可以先减少还款额（最低还款额是上个
: 月的利息）。如果我需要更多的钱，我还可以从HELOC里借钱，利息是一样的。只要借
: 款不超过我已经还的贷款，不需要任何手续，跟从自己的支票帐户里提钱一样。
: 中国人手头总是有些钱，能付得起２５％首付的不少，为什么不考虑HELOC?

f*22018-05-04 07:05

36 楼

可不可以把tensor算子做成pushdown operator（借用hadoop把运算push到数据侧的思
路，或者数据库trigger的思路），建成一个AI ready的新一代的数据库co-peocessor。
这样不就把系统层面（我的第二个问题）的bottleneck问题解决了吗？

: 我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的
性能

: 可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。

: 我这样挑剔肯定是赚不到钱的。

【在 w***g 的大作中提到】

: 我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的性能
: 可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。
: 我这样挑剔肯定是赚不到钱的。

c*o2018-05-04 07:05

37 楼

HELOC想法是对的，不过有两点：
1. 很多人就算是付20%裆配都快被榨干了，所以没法戴HELOC
2. 房价下降的话，银行会要你加还HELOC，风险
俺是用了HELOC的，不过不是所有人都愿意用

【在 B********4 的大作中提到】

: 我总是听到这样的说法，＂买房子要在手头留几万块以备万一＂。难到你们都买房子了
: 申请贷款了，都没听说过HELOC（home equity line of credit)？为什么要放几万块
: 钱闲置去防备那不知道会不会发生的＂万一＂？当那个多半不会发生的＂万一＂真得
: 来临，你只要能从银行借到钱不就行了？
: 我现在申请的房屋贷款就是HELOC，我们银行规定是只要我首付超过银行对房子估价的
: ２５％就可以申请。然后我把所有的钱都放到首付里。每个月还款没有最高限度，我总
: 是尽量把手里的钱拿去还款。当我需要钱时，我可以先减少还款额（最低还款额是上个
: 月的利息）。如果我需要更多的钱，我还可以从HELOC里借钱，利息是一样的。只要借
: 款不超过我已经还的贷款，不需要任何手续，跟从自己的支票帐户里提钱一样。
: 中国人手头总是有些钱，能付得起２５％首付的不少，为什么不考虑HELOC?

w*r2018-05-04 07:05

38 楼

在入SQL脚本后，查找结果可以做成streaming的方式吗？这样没准儿能行

: 可不可以把tensor算子做成pushdown operator（借用hadoop把运算push到数据
侧的思

: 路，或者数据库trigger的思路），建成一个AI ready的新一代的数据库co-
peocessor。

: 这样不就把系统层面（我的第二个问题）的bottleneck问题解决了吗？

: 性能

【在 f******2 的大作中提到】

: 可不可以把tensor算子做成pushdown operator（借用hadoop把运算push到数据侧的思
: 路，或者数据库trigger的思路），建成一个AI ready的新一代的数据库co-peocessor。
: 这样不就把系统层面（我的第二个问题）的bottleneck问题解决了吗？
:
:
: 我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的
: 性能
:
: 可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。
:
: 我这样挑剔肯定是赚不到钱的。
:

q*m2018-05-04 07:05

39 楼

各个州不一样的，房子便宜的州一般是417k，像加州这类地方就不止这么点了。
我们州就是417k，郁闷啊
jumbo loan除了利息高，批起来可能也麻烦点，我是自己造房子，借construction
loan，更要避免jumbo了

family
.

【在 n********n 的大作中提到】

: 这个417K是在所有的州都适用还是有些high-cost areas 是以$729,750为界线的?
: 偶查到的:http://www.fhfa.gov/Default.aspx?Page=185
: Fannie Mae and Freddie Mac are restricted by law to purchasing single-family
: mortgages with origination balances below a specific amount, known as the
: “conforming loan limit.” Loans above this limit are known as jumbo loans.
: 偶也一直想把贷款额度限定于417K的,但如果这样的话,首付就要到30-40%(还没敢考虑
: 小学,中学,高中都特好的学区)...
: 偶看了一下这个表中,偶这村里的limit是$729,750,这是不是说只要贷$729,750以下的
: 就都是conforming loan呢?(偶想尽量避免jumbo loan,这么多贷款,利率高一点每个月
: 就要多还几百啊)

l*m2018-05-04 07:05

40 楼

基本就是两三层全联通，找cross features

：在输入是图像这种训练输入的时候，每一层干啥大家慢慢能给个不太靠谱的解释。
：

B*42018-05-04 07:05

41 楼

没有问过我们的bank agent这个问题，不过我从合同条款来看，好象没有提到房价下降
的事。所以我理解是不管房价怎么下降，我总是可以贷同样的款。
实际上银行很喜欢我们这种多首付的人，我们的bank agent当时就说会给我们最好的条
件，因为我们有现金首付２５％，所以是risk free的贷款。而那些首付少的，就不会
给那么好的条件，因为要cover risk. 我的利率是 prime-0.5. 因为我已经还了50%
的贷款了，所以我随时可以以一点几的利率（现在prime低）从银行借出近１０万元来。

【在 t*a 的大作中提到】

: 但如果你的房子房价下降25%,你还能够得到当年贷款额度那末多的贷款么?

l*m2018-05-04 07:05

42 楼

大的query都是streaming吧

：在入SQL脚本后，查找结果可以做成streaming的方式吗？这样没准儿能行
：

x*g2018-05-04 07:05

43 楼

这个是需要钱了再去申请HELOC还是要提前申请好等需要用钱时直接从里面拿钱呢？
现在手里有些闲钱不知道是不是应该全付掉贷款还是留着应急...

【在 B********4 的大作中提到】

: 我总是听到这样的说法，＂买房子要在手头留几万块以备万一＂。难到你们都买房子了
: 申请贷款了，都没听说过HELOC（home equity line of credit)？为什么要放几万块
: 钱闲置去防备那不知道会不会发生的＂万一＂？当那个多半不会发生的＂万一＂真得
: 来临，你只要能从银行借到钱不就行了？
: 我现在申请的房屋贷款就是HELOC，我们银行规定是只要我首付超过银行对房子估价的
: ２５％就可以申请。然后我把所有的钱都放到首付里。每个月还款没有最高限度，我总
: 是尽量把手里的钱拿去还款。当我需要钱时，我可以先减少还款额（最低还款额是上个
: 月的利息）。如果我需要更多的钱，我还可以从HELOC里借钱，利息是一样的。只要借
: 款不超过我已经还的贷款，不需要任何手续，跟从自己的支票帐户里提钱一样。
: 中国人手头总是有些钱，能付得起２５％首付的不少，为什么不考虑HELOC?

l*n2018-05-04 07:05

44 楼

TF能提供的性能是100, 连上db以后降到10，这说明还有很大的改进潜力，business
user也需要升级的空间吗，说不定搞个dnn专用db也挺美好

【在 w***g 的大作中提到】

: 我知道的。TF能提供的性能是100, 连上db以后降到10, business users需要的性能
: 可能只有5。虽然是杀鸡用牛刀，事情干成了还是有钱赚。
: 我这样挑剔肯定是赚不到钱的。

m*o2018-05-04 07:05

45 楼

我也申请了HELOC。有一笔钱放在那里做应急基金，感觉还是好多了。HELOC有百利无一
害，大家都应该去弄一个。

【在 c****o 的大作中提到】

: HELOC想法是对的，不过有两点：
: 1. 很多人就算是付20%裆配都快被榨干了，所以没法戴HELOC
: 2. 房价下降的话，银行会要你加还HELOC，风险
: 俺是用了HELOC的，不过不是所有人都愿意用

r*t2018-05-04 07:05

46 楼

弱问一下 ML 里 LGBT 是啥？没狗出来

【在 w***g 的大作中提到】

: 到2017年12月为止，我认为table data应该无脑上LGBT。
: 最近我改变观点了。我觉得经过合适的处理，用CNN可以和
: LGBT做的差不多好，可能稍微差一点。但是上CNN是值得的，
: 就是手工调architecture要容易的多，还可以整合各种类型的数据。
: CNN提特征再LGBT，就没法end to end，在精度上是要吃亏的。
: CNN主要的技术是embedding处理categorical variable。
: 参考这个kernel:
: https://www.kaggle.com/alexanderkireev/deep-learning-support-9663
: 所有的kernel在这里
: https://www.kaggle.com/c/talkingdata-adtracking-fraud-detection/kernels

x*g2018-05-04 07:05

47 楼

科普一下啊，我理解的HELOC不是应该是你从里面拿钱出来用吗，怎么你还放一笔钱进
去？

【在 m****o 的大作中提到】

: 我也申请了HELOC。有一笔钱放在那里做应急基金，感觉还是好多了。HELOC有百利无一
: 害，大家都应该去弄一个。

h*c2018-05-04 07:05

48 楼

Looks like Light Gradient boosting

【在 r****t 的大作中提到】

: 弱问一下 ML 里 LGBT 是啥？没狗出来

m*o2018-05-04 07:05

49 楼

我是说相当于有一笔钱放在那里做应急基金，实际我没掏钱出去。HELOC就是个credit
line，用的时候付利息，不用的时候不付利息。比如银行批了你２０万的HELOC，相当
于你可以随时动用２０万cash。

【在 x********g 的大作中提到】

: 科普一下啊，我理解的HELOC不是应该是你从里面拿钱出来用吗，怎么你还放一笔钱进
: 去？

w*g2018-05-04 07:05

50 楼

应该是GBDT

：弱问一下 ML 里 LGBT 是啥？没狗出来
：

x*g2018-05-04 07:05

51 楼

哦，了解了。这个是不错，看来也应该申请一下的。

credit

【在 m****o 的大作中提到】

: 我是说相当于有一笔钱放在那里做应急基金，实际我没掏钱出去。HELOC就是个credit
: line，用的时候付利息，不用的时候不付利息。比如银行批了你２０万的HELOC，相当
: 于你可以随时动用２０万cash。

M*02018-05-04 07:05

52 楼

Typo...是GBDT wdong打成了LGBT
我就被带沟里了这就是典型的被大牛带歪了所以说自己不够牛轻易不要跟着大牛容
易掉进坑。。。

【在 r****t 的大作中提到】

: 弱问一下 ML 里 LGBT 是啥？没狗出来

B*42018-05-04 07:05

53 楼

当然是买房的时候申请HELOC。HELOC就和普通的mortgage一样，是以房屋做抵押的。但
HELOC比普通的mortgage好的地方是你还可以从里面再借钱，不需要任何手续，利率也
比一般的商业贷款低很多。

【在 x********g 的大作中提到】

: 这个是需要钱了再去申请HELOC还是要提前申请好等需要用钱时直接从里面拿钱呢？
: 现在手里有些闲钱不知道是不是应该全付掉贷款还是留着应急...

s*k2018-05-04 07:05

54 楼

LGBT, or GLBT, is an initialism that stands for lesbian, gay, bisexual, and
transgender.
hah

【在 M********0 的大作中提到】

: Typo...是GBDT wdong打成了LGBT
: 我就被带沟里了这就是典型的被大牛带歪了所以说自己不够牛轻易不要跟着大牛容
: 易掉进坑。。。

s*i2018-05-04 07:05

55 楼

那你可借的钱就是你的downpay？

【在 B********4 的大作中提到】

: 当然是买房的时候申请HELOC。HELOC就和普通的mortgage一样，是以房屋做抵押的。但
: HELOC比普通的mortgage好的地方是你还可以从里面再借钱，不需要任何手续，利率也
: 比一般的商业贷款低很多。

r*q2018-05-04 07:05

56 楼

keep 6 month emergency fund and money for furnitures. Other than that,
depends on the way you investing money.

m*o2018-05-04 07:05

57 楼

一般不可能把投入的钱全贷出来吧，前几年兴许还可以。

【在 s*i 的大作中提到】

: 那你可借的钱就是你的downpay？

B*42018-05-04 07:05

58 楼

不是，可借的钱是你已经还的钱。
比如，房屋估价100k，你down pay 25k. 过了一年，你还了5k,欠银行70k,那么你可以
借5k。当你全部还清贷款，你可以不close HELOC，因为没有借款了，所以没有利息，
也没有管理费（我们银行是这样）。但当你需要钱时，可以最多借出75k,利率还是一样。

【在 s*i 的大作中提到】

: 那你可借的钱就是你的downpay？

n*n2018-05-04 07:05

59 楼

自己盖房子啊? 手续麻烦吗?
偶也一直在想是不是不是自己盖更好些:偶这里好学区的五六十年代的老房都是米林
house,感觉真是不值得.
看好的地大约在40-50万左右,好象盖房子在30万左右,所以一幢新屋的价格按照这么算
可能能控制在70-80万,不知道偶是不是忽略了哪些costs...
你们自己盖房子怎么找的builder啊?
谢谢.

【在 q********m 的大作中提到】

: 各个州不一样的，房子便宜的州一般是417k，像加州这类地方就不止这么点了。
: 我们州就是417k，郁闷啊
: jumbo loan除了利息高，批起来可能也麻烦点，我是自己造房子，借construction
: loan，更要避免jumbo了
:
: family
: .

s*i2018-05-04 07:05

60 楼

可是一般头几年还的都是利息啊，本金只占很小的一部分。那你实际上拿不出多少钱
啊？
你是额外多付了很多本金了？

样。

【在 B********4 的大作中提到】

: 不是，可借的钱是你已经还的钱。
: 比如，房屋估价100k，你down pay 25k. 过了一年，你还了5k,欠银行70k,那么你可以
: 借5k。当你全部还清贷款，你可以不close HELOC，因为没有借款了，所以没有利息，
: 也没有管理费（我们银行是这样）。但当你需要钱时，可以最多借出75k,利率还是一样。

T*J2018-05-04 07:05

61 楼

麻烦

【在 n********n 的大作中提到】

: 自己盖房子啊? 手续麻烦吗?
: 偶也一直在想是不是不是自己盖更好些:偶这里好学区的五六十年代的老房都是米林
: house,感觉真是不值得.
: 看好的地大约在40-50万左右,好象盖房子在30万左右,所以一幢新屋的价格按照这么算
: 可能能控制在70-80万,不知道偶是不是忽略了哪些costs...
: 你们自己盖房子怎么找的builder啊?
: 谢谢.

B*42018-05-04 07:05

62 楼

"一般头几年还的都是利息啊"? 那是你的贷款利息太高了。现在我的利率是prime-0.5,
已经还了５０％了，现在每个月的利息才２００多。
你想靠这HELOC借钱投资做生意，确实头几年不可能。但我们不是说防备万一吗？我万
一失业了，每月最低还款才２００多，如果我缺生活费，我每个月从里面借个２０００
块不就行了。如果我国内的家人亲戚急需钱，从里面借个几万块也是很方便的。所以我
就不用留着几万块在银行里闲着。

【在 s*i 的大作中提到】

: 可是一般头几年还的都是利息啊，本金只占很小的一部分。那你实际上拿不出多少钱
: 啊？
: 你是额外多付了很多本金了？
:
: 样。

s*i2018-05-04 07:05

63 楼

你是借的ARM？

5,

【在 B********4 的大作中提到】

: "一般头几年还的都是利息啊"? 那是你的贷款利息太高了。现在我的利率是prime-0.5,
: 已经还了５０％了，现在每个月的利息才２００多。
: 你想靠这HELOC借钱投资做生意，确实头几年不可能。但我们不是说防备万一吗？我万
: 一失业了，每月最低还款才２００多，如果我缺生活费，我每个月从里面借个２０００
: 块不就行了。如果我国内的家人亲戚急需钱，从里面借个几万块也是很方便的。所以我
: 就不用留着几万块在银行里闲着。

B*42018-05-04 07:05

64 楼

HELOC 都是 variable rate

【在 s*i 的大作中提到】

: 你是借的ARM？
:
: 5,

s*i2018-05-04 07:05

65 楼

我是说你的mortgage，我理解你的意思是买房的时候同时开了heloc账户和mortgage账
户，
如果是30年fixed rate mortgage，前面几年付的大部分都是利息啊

【在 B********4 的大作中提到】

: HELOC 都是 variable rate

B*42018-05-04 07:05

66 楼

我只有HELOC，有HELOC就不需要用一般的mortgage了。
你也可以把HELOC里的某笔贷款锁住，变成fixed rate. 但需要和银行谈利率，如果用
缺省的variable rate就不用麻烦，直接拿钱就是。
目前prime低，所以我的利率prime-0.5不错。如果prime要升高，我可能会去锁住。

【在 s*i 的大作中提到】

: 我是说你的mortgage，我理解你的意思是买房的时候同时开了heloc账户和mortgage账
: 户，
: 如果是30年fixed rate mortgage，前面几年付的大部分都是利息啊

B*42018-05-04 07:05

67 楼

你把房子抵押给银行，银行给你一个贷款额度，最多到房子当时估价的７５％(depends on different banks），至于
你是拿这个贷款去买房子，还是开公司，银行不管。贷款没有还款期限，每月还多少本
金没有限制。只要你每个月还利息就可以了。

【在 s*i 的大作中提到】

: 我是说你的mortgage，我理解你的意思是买房的时候同时开了heloc账户和mortgage账
: 户，
: 如果是30年fixed rate mortgage，前面几年付的大部分都是利息啊

t*s2018-05-04 07:05

68 楼

一般还是有还款期限的。最常见的是10年draw，再10年或20年还。

depends on different banks），至于

【在 B********4 的大作中提到】

: 你把房子抵押给银行，银行给你一个贷款额度，最多到房子当时估价的７５％(depends on different banks），至于
: 你是拿这个贷款去买房子，还是开公司，银行不管。贷款没有还款期限，每月还多少本
: 金没有限制。只要你每个月还利息就可以了。

g*s2018-05-04 07:05

69 楼

那些回答同是policitcal correct. 0.25% rate difference is ENOUGH for you to
pay more down payment if you can afford it.

【在 L***m 的大作中提到】

: 现在已经可以付>25%，还有一些存款和股票，在犹豫是不是取出来增加首付（当然还要
: 留一些应急的钱）。这样loan amount可降到417k，利率稍微好一点(少0.25%左右）。
: 还有如果选15年fix利率又可降一点。这样做值得吗？我们平时没什么投资手段，存款
: 都在saving account，利率很低。

s*k2018-05-04 07:05

70 楼

美国总统都是临时工, 最多干八年

【在 w**j 的大作中提到】

: 08其实比我们都不稳，随时都担心自己的人身安全。

q*m2018-05-04 07:05

71 楼

总归是麻烦的，很多人不能花这么多时间，所以自己盖的总成本比直接买要少很多。
但是有麻烦和更麻烦之分。我们floor plan被city reject，后来重新改，又要赶
closing date，有几天我天天跑去建商那里和architect交流，我家要是没有我这个半
职妈妈，就不可能办到。ld时间也非常flexible，所以我们可以自己找建商盖。
盖房子不止30万的。所有的upcharge加上去总要35万-40万。

【在 n********n 的大作中提到】

: 自己盖房子啊? 手续麻烦吗?
: 偶也一直在想是不是不是自己盖更好些:偶这里好学区的五六十年代的老房都是米林
: house,感觉真是不值得.
: 看好的地大约在40-50万左右,好象盖房子在30万左右,所以一幢新屋的价格按照这么算
: 可能能控制在70-80万,不知道偶是不是忽略了哪些costs...
: 你们自己盖房子怎么找的builder啊?
: 谢谢.

n*n2018-05-04 07:05

72 楼

谢谢爱崽崽哦.
偶也觉得可能会比较麻烦,不过要求比较简单,就是希望找个builder用他们现成的floor
plan,这种情况下应该不会被city reject吧?
请问upcharge包括哪些啊? (偶知道一般报价都是不包括finished basement的,如果要
finished,可能要加价,但不知道还有哪些东东要加啊?)
再次感谢!

【在 q********m 的大作中提到】

: 总归是麻烦的，很多人不能花这么多时间，所以自己盖的总成本比直接买要少很多。
: 但是有麻烦和更麻烦之分。我们floor plan被city reject，后来重新改，又要赶
: closing date，有几天我天天跑去建商那里和architect交流，我家要是没有我这个半
: 职妈妈，就不可能办到。ld时间也非常flexible，所以我们可以自己找建商盖。
: 盖房子不止30万的。所有的upcharge加上去总要35万-40万。

q*m2018-05-04 07:05

73 楼

floor

【在 n********n 的大作中提到】

: 谢谢爱崽崽哦.
: 偶也觉得可能会比较麻烦,不过要求比较简单,就是希望找个builder用他们现成的floor
: plan,这种情况下应该不会被city reject吧?
: 请问upcharge包括哪些啊? (偶知道一般报价都是不包括finished basement的,如果要
: finished,可能要加价,但不知道还有哪些东东要加啊?)
: 再次感谢!

t*a2018-05-04 07:05

74 楼

现在利率只有1.x%? fixed么？10y or 20 y?
没有手续费?
any bank/link to suggest?
thanks!

【在 B********4 的大作中提到】

: 当然是买房的时候申请HELOC。HELOC就和普通的mortgage一样，是以房屋做抵押的。但
: HELOC比普通的mortgage好的地方是你还可以从里面再借钱，不需要任何手续，利率也
: 比一般的商业贷款低很多。

t*a2018-05-04 07:05

75 楼

或者有2个房子，假设第一个已经付清，那末应该可以从第一个带出80% appraisal
value (1.x% rate) 方到第二个房子(say 5%),从而剩下4%利息...
对否?

样。

【在 B********4 的大作中提到】

: 不是，可借的钱是你已经还的钱。
: 比如，房屋估价100k，你down pay 25k. 过了一年，你还了5k,欠银行70k,那么你可以
: 借5k。当你全部还清贷款，你可以不close HELOC，因为没有借款了，所以没有利息，
: 也没有管理费（我们银行是这样）。但当你需要钱时，可以最多借出75k,利率还是一样。