NLP sentiment analysis 有推荐吗 - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Programming - 葵花宝典

NLP sentiment analysis 有推荐吗

NLP sentiment analysis 有推荐吗# Programming - 葵花宝典

g*y2018-06-12 07:06

1 楼

先声明下，我的经验有点局限于少数几个大公司的software engineer的职位，如果你是想找local中小公司/startup或者非software engineer工作，就随便看看了。
大致的背景是,本科物理，物理Phd读了两年quit掉phd(phd期间的研究是做fabrication的，跟CS完全无关)，转行读EECS，还是在同一个学校(学校很普通，专业排名30-40几)。主要是觉得CS好找工作吧，我自己也比较喜欢这个，有一定的编程功底。我不知道从长远看这个决定如何，但是短期内看还是正确的决定了。
说说CS相关的背景吧:尽管我是物理出身，本科C和数据结构还是学的不错的，学过些基本的数据库但是忘干净了，微机原理汇编什么的也学过，学过一点的数值方法计算模拟的东西，大一参加过校内的ACM选拔赛入围不过没继续下去了，本科给几个实验室打工写过一些小软件(跟实验仪器通讯和数据采集处理)。不过来美国后就没怎么写过程序了。
可能有人要笑，你这个连OS，compiler，network都没学过的外行，也没有真正的软件开发经历不懂OOD不懂Software engineering，也没有个擅长

G*s2018-06-12 07:06

2 楼

【原文】
大学之道（1），在明明德（2），在亲民（3），在止于至善。知止（4）而
后有定；定而后能静；静而后能安；安而后能虑；虑而后能得（5）。物有本末，事有终
始。知所先后，则近道矣。古之欲明明德于天下者，先治其国；欲治其国者，先齐其家
（6）；欲齐其家者，先修其身（7）；欲修其身者，先正其心；欲正其心者，先诚其意
；欲诚其意者，先致其知（8）；致知在格物（9）。物格而后知至；知至而后意诚；意
诚而后心正；心正而后身修；身修而后家齐；家齐而后国治；国治而后天下平。自天子
以至于庶人（10），壹是皆以修身为本（11）。其本乱而未治者否矣（12）。其所厚者
薄，而其所薄者厚（13），未之有也（14）！
【注释】
（1）大学之道：大学的宗旨。“大学”一词在古代有两种含义：一是“博学
”的意思；二是相对于小学而言的“大人之学”。古人八岁人小学，学习 “洒扫应对进
退、礼乐射御书数”等文化基础知识和礼节；十五岁人大学，学习伦理、政治、哲学等
“穷理正心，修己治人”的学问。所以，后一种含义其实也和前一种含义有相通的地方
，同样有“博学”的意思。”道“的本义是道路，引申为规律、原则等，在中国古代哲
学、政治学里，也指宇宙万物的本原、个体，一定的政治观或思想体系等，在不同的上
下文环境里有不同的意思。（2）明明德：前一个“明”作动词，有使动的意味，即“
使彰明”，也就是发扬、弘扬的意思。后一个“明”作形容词，明德也就是光明正大的
品德。（3）亲民：根据后面的“传”文，“亲”应为“新”，即革新、弃旧图新。亲
民，也就是新民，使人弃旧图新、去恶从善。（4）知止：知道目标所在。（5）得：收
获。（6）齐其家：管理好自己的家庭或家族，使家庭或家族和和美美，蒸蒸日上，兴
旺发达。（7）修其身：修养自身的品性。（8）致其知：使自己获得知识。（9）格
物：认识、研究万事万物。。（10）庶人：指平民百姓。（11）壹是：都是。本：根本
。（12）末：相对于本而言，指枝末、枝节。（13）厚者薄：该重视的不重视。薄者
厚：不该重视的却加以重视。（14）未之有也：即未有之也。没有这样的道理（事情
、做法等）。
【译文】
大学的宗旨在于弘扬光明正大的品德，在于使人弃旧图新，在于使人达到最
完善的境界。知道应达到的境界才能够志向坚定；志向坚定才能够镇静不躁；镇静不躁
才能够心安理得；心安理得才能够思虑周祥；思虑周祥才能够有所收获。每样东西都
有根本有枝未，每件事情都有开始有终结。明白了这本末始终的道理，就接近事物发展
的规律了。古代那些要想在天下弘扬光明正大品德的人，先要治理好自己的国家；要想
治理好自己的国家，先要管理好自己的家庭和家族；要想管理好自己的家庭和家族，先
要修养自身的品性；要想修养自身的品性，先要端正自己的心思；要想端正自己的心思
，先要使自己的意念真诚；要想使自己的意念真诚，先要使自己获得知识；获得知识的
途径在于认识、研究万事万物。通过对万事万物的认识、研究后才能获得知识；获得知
识后意念才能真诚；意念真诚后心思才能端正；心思端正后才能修养品性；品性修养后
才能管理好家庭和家族；管理好家庭和家族后才能治理好国家；治理好国家后天下才能
太平。上自国家元首，下至平民百姓，人人都要以修养品性为根本。若这个根本被扰乱
了，家庭、家族、国家、天下要治理好是不可能的。不分轻重缓急，本末倒置却想做好
事情，这也同样是不可能的！
【读解】
这里所展示的，是儒学三纲八目的追求。所谓三纲，是指明德、新民、止子
至善。它既是《大学》的纲领旨趣，也是儒学“垂世立教”的目标所在。所谓八目，是
指格物、致知、诚意、正心、修身、齐家、治国、平天下。它既是为达到“三纲”而设
计的条目工夫，也是儒学为我们所展示的人生进修阶梯。纵览四书五经，我们发现，
儒家的全部学说实际上都是循着这三纲八目而展开的。所以，抓住这三纲八目你就等于
抓住了一把打开儒学大门的钥匙。循着这进修阶梯一步一个脚印，你就会登堂入室，领
略懦学经典的奥义。就这里的阶梯本身而言，实际上包括“内修”和“外治”两大方面
：前面四级“格物、致知，诚意、正心”是“内修”；后面三纲“齐家、治国、平天下
”是“外治”。而其中间的“修身”一环，则是连结“年修”和“外治”两方面的枢纽
，它与前面的 “内修”项目连在一起，是“独善其身”；它与后面的“外治”项目连在
一起，是“兼善天下”。两千多年来，一代又一代中国知识分子“穷则独善其身，达则
兼善天下”（《孟子·尽心下》），把生命的历程铺设在这一阶梯之上。所以，它实质
上已不仅仅是一系列学说怯质的进修步骤，而是具有浓厚实践色彩的人生追求阶梯了。
它铸造了一代又一代中国知识分子的人格心理，时至今日，仍然在我们身上发挥着潜移
默化的作用。不管你是否意识明确，不管你积极还是消极，“格、致、诚、正，修、齐
、治、平”的观念总是或隐或显地在影响看你的思想，左右着你的行动，使你最终发现
，自己的人生历程也不过是在这儒学的进修阶梯上或近或远地展开。事实上，作为中国
知识分子，又有几人是真正出道入佛的野鹤闲云、隐逸高士呢？说到底，依然是十人九
儒，如此而已。

b*u2018-06-12 07:06

3 楼

stanfordNLP 和 python nltk 的效果都不是太好。特别看了一下nltk的源代码，智能
水平是非常低的。
我很肯能有需求修改源代码，这样才能应用在特定的场合中。

k*e2018-06-12 07:06

4 楼

赞！
第一个回哈哈

fabrication
几)

【在 g*******y 的大作中提到】

: 先声明下，我的经验有点局限于少数几个大公司的software engineer的职位，如果你是想找local中小公司/startup或者非software engineer工作，就随便看看了。
: 大致的背景是,本科物理，物理Phd读了两年quit掉phd(phd期间的研究是做fabrication的，跟CS完全无关)，转行读EECS，还是在同一个学校(学校很普通，专业排名30-40几)。主要是觉得CS好找工作吧，我自己也比较喜欢这个，有一定的编程功底。我不知道从长远看这个决定如何，但是短期内看还是正确的决定了。
: 说说CS相关的背景吧:尽管我是物理出身，本科C和数据结构还是学的不错的，学过些基本的数据库但是忘干净了，微机原理汇编什么的也学过，学过一点的数值方法计算模拟的东西，大一参加过校内的ACM选拔赛入围不过没继续下去了，本科给几个实验室打工写过一些小软件(跟实验仪器通讯和数据采集处理)。不过来美国后就没怎么写过程序了。
: 可能有人要笑，你这个连OS，compiler，network都没学过的外行，也没有真正的软件开发经历不懂OOD不懂Software engineering，也没有个擅长

G*s2018-06-12 07:06

5 楼

格物、致知、诚意、正心、修身、齐家、治国、平天下
都很熟悉，好像有本物理书原名：格物致知
不过三纲八目的说法倒是第一次听说。以前只知道三纲五常

有终
其家
其意
天子
厚者

【在 G*******s 的大作中提到】

: 【原文】
: 大学之道（1），在明明德（2），在亲民（3），在止于至善。知止（4）而
: 后有定；定而后能静；静而后能安；安而后能虑；虑而后能得（5）。物有本末，事有终
: 始。知所先后，则近道矣。古之欲明明德于天下者，先治其国；欲治其国者，先齐其家
: （6）；欲齐其家者，先修其身（7）；欲修其身者，先正其心；欲正其心者，先诚其意
: ；欲诚其意者，先致其知（8）；致知在格物（9）。物格而后知至；知至而后意诚；意
: 诚而后心正；心正而后身修；身修而后家齐；家齐而后国治；国治而后天下平。自天子
: 以至于庶人（10），壹是皆以修身为本（11）。其本乱而未治者否矣（12）。其所厚者
: 薄，而其所薄者厚（13），未之有也（14）！
: 【注释】

n*32018-06-12 07:06

6 楼

want to know too...
try pytorch/tensorflow?

【在 b****u 的大作中提到】

: stanfordNLP 和 python nltk 的效果都不是太好。特别看了一下nltk的源代码，智能
: 水平是非常低的。
: 我很肯能有需求修改源代码，这样才能应用在特定的场合中。

t*o2018-06-12 07:06

7 楼

zan

fabrication
几)
了。

【在 g*******y 的大作中提到】

l*a2018-06-12 07:06

8 楼

老霍，具体解释一下明德

有终
其家
其意
天子
厚者

【在 G*******s 的大作中提到】

: 格物、致知、诚意、正心、修身、齐家、治国、平天下
: 都很熟悉，好像有本物理书原名：格物致知
: 不过三纲八目的说法倒是第一次听说。以前只知道三纲五常
:
: 有终
: 其家
: 其意
: 天子
: 厚者

m*o2018-06-12 07:06

9 楼

可以用spacy的textcat模块先来试一下，这个模块用的模型是LSTM+CNN+Attention，处
理的问题是文档分类、但我觉得处理sentiment分类应该也成。

G*s2018-06-12 07:06

10 楼

再次恭喜＋感谢你的分享精神

s*u2018-06-12 07:06

11 楼

这个你不读大学也知道，中学课本里都有

【在 G*******s 的大作中提到】

t*n2018-06-12 07:06

12 楼

赞，谢谢！

G*s2018-06-12 07:06

13 楼

没有三纲八目的说法

【在 s***u 的大作中提到】

: 这个你不读大学也知道，中学课本里都有

x*n2018-06-12 07:06

14 楼

Ding!!!

m*92018-06-12 07:06

15 楼

厉害

m*92018-06-12 07:06

16 楼

从量变总会到质变，你的成长真是超级快呀
好奇的问一下，你现在主要的算法功力和编程的能力，就是你在去年4~9月份之间累积
出来的么？

g*y2018-06-12 07:06

17 楼

本科有些数据结构的基本功，4-9月的功夫也是打个基础吧，我秋季学期还上了两门算
法课，算是复习巩固一下。10-11月是狂练题的日子我还没写到那里，呵呵

【在 m******9 的大作中提到】

: 从量变总会到质变，你的成长真是超级快呀
: 好奇的问一下，你现在主要的算法功力和编程的能力，就是你在去年4~9月份之间累积
: 出来的么？

m*92018-06-12 07:06

18 楼

呵呵，got it

f*02018-06-12 07:06

19 楼

关键是思维能力的训练
算法数据结构真的是益智训练思维的好东西
CS 里面的不动点智慧的结晶
内功啊内功。
所以大公司重视内力
小公司重视花哨
Programming Pearls 是Ever Lasting经典，值得看3遍以上的
Programming interview exposed: 泛而浅，可以看一遍
当然要混迹各大论坛, blogs： careercup， topcoder and many others.
像Careercup book 一样，自己总结50 – 100 道经典题目，套路基本就有了。
After each on-site, bring yourself to a higher level.
其实任何On-Site说到底就还是忽悠！注意，是和人的交流，不是机器，把没有情感的算法，生动的忽悠出来，揣摩好面试者的心理，说好话，人家想不喜欢你都难了。
Eventually, after many trials and failures, you will eventually mature and sing this song:
Toni