请问什么工具包可以做词频统计但是能略过无意义的虚词？ - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Programming - 葵花宝典

请问什么工具包可以做词频统计但是能略过无意义的虚词？

请问什么工具包可以做词频统计但是能略过无意义的虚词？# Programming - 葵花宝典

w*n2015-04-15 07:04

1 楼

如果签证过期是7月1日，但是入境是给了6个月，也就是到11月. 那7月1日前必须离境
么？多谢啦！

s*k2015-04-15 07:04

2 楼

电影版，把电影名字拼对是必须的。要不然，就不要在电影版发文。
剧情介绍
1911年冬，孙中山从海外归来，翌年1月1日就任临时大总统。与此同时毛泽东参加
了光复新军。很
快，袁世凯凭借强大的军事实力和在皇室中的威信，从孙文手中取得了大元帅之身份，
北洋民国政府成
立。同年10月，国民党成立。
1914年夏天第一次世界大战爆发，1915年袁世凯同日本定下密约二十一条并且更改
国体，自封为中
华帝国皇帝，自此走上了一条不归路。孙中山与蔡锷成立护国军，出师讨袁。很快袁世
凯便在举国声讨
中黯然死去了。
之后又随着张勋复辟的失败，中国进入了军阀割据的混战局面。而毛泽东、李大钊
、周恩来等人虽
身处不同地方，但都在内心思索着救国救亡之路，命运的相会即将到来。
1917年冬，俄国“十月革命”胜利。1918年冬，一战以同盟国的失败而告终，北洋
政府派遣使团出
席巴黎和会。但是英美等国为制约已赤化的俄国，将青岛以及胶州湾割让给了日本人，
完全无视中国的
利益。1919年夏天，轰轰烈烈的“五四运动”爆发了。经历了以上种种，中国的进步青
年们发现西方列强
完全靠不住，而列宁的成功如今却如同一盏明灯，为他们指引了方向。
1920年3月，维经斯基来到中国，准备在远东建立共产国际支部。1921年3月，陈独
秀、李大钊、
蔡和森等人彼此来往交流，誓要建立代表无产阶级的政党。1921年7月22日，十三位来
自全国各地的党
员代表集结在上海博文女校宿舍，“中国共产党”在众人齐声吟唱的《国际歌》中呼之
欲出！

K*g2015-04-15 07:04

3 楼

这样的日子，同样的心情，遥祝远方的你。

n*r2015-04-15 07:04

4 楼

最好是python的
比如a, an, of, the这些都能自动跳过
如果做NLP的话这是经常需要的功能吧
其实说白了如果有一个常见的虚词的词表的话，其他的自己都能做
但是就是不知道哪里有

a*n2015-04-15 07:04

5 楼

VISA是说你什么时候内可以合法入境，呆多久由入关的海关决定，什么时候
离境写着I94上

【在 w******n 的大作中提到】

: 如果签证过期是7月1日，但是入境是给了6个月，也就是到11月. 那7月1日前必须离境
: 么？多谢啦！

D*r2015-04-15 07:04

6 楼

这个故事告诉我们，病急乱投医终成大错

【在 s**k 的大作中提到】

: 电影版，把电影名字拼对是必须的。要不然，就不要在电影版发文。
: 剧情介绍
: 1911年冬，孙中山从海外归来，翌年1月1日就任临时大总统。与此同时毛泽东参加
: 了光复新军。很
: 快，袁世凯凭借强大的军事实力和在皇室中的威信，从孙文手中取得了大元帅之身份，
: 北洋民国政府成
: 立。同年10月，国民党成立。
: 1914年夏天第一次世界大战爆发，1915年袁世凯同日本定下密约二十一条并且更改
: 国体，自封为中
: 华帝国皇帝，自此走上了一条不归路。孙中山与蔡锷成立护国军，出师讨袁。很快袁世