close

Stop Words (停用詞)指的是語言中最常用的詞彙,在建立 Language Model 或是其他 Statistical Machine Learning時常會把 Stop Words 濾掉,因為這些詞彙通常沒有鑑別力。

以下羅列英文的 Stop wrods:

a, aboard, about, above, across, after, again, against, all, almost, alone, along, alongside, already, also, although, always, am, amid, amidst, among, amongst, an, and, another, anti, any, anybody, anyone, anything, anywhere, are, area, areas, aren't, around, as, ask, asked, asking, asks, astride, at, aught, away, back, backed, backing, backs, bar, barring, be, became, because, become, becomes, been, before, began, behind, being, beings, below, beneath, beside, besides, best, better, between, beyond, big, both, but, by, came, can, can't, cannot, case, cases, certain, certainly, circa, clear, clearly, come, concerning, considering, could, couldn't, daren't, despite, did, didn't, differ, different, differently, do, does, doesn't, doing, don't, done, down, down, downed, downing, downs, during, each, early, either, end, ended, ending, ends, enough, even, evenly, ever, every, everybody, everyone, everything, everywhere, except, excepting, excluding, face, faces, fact, facts, far, felt, few, fewer, find, finds, first, five, following, for, four, from, full, fully, further, furthered, furthering, furthers, gave, general, generally, get, gets, give, given, gives, go, goes, going, good, goods, got, great, greater, greatest, group, grouped, grouping, groups, had, hadn't, has, hasn't, have, haven't, having, he, he'd, he'll, he's, her, here, here's, hers, herself, high, high, high, higher, highest, him, himself, his, hisself, how, how's, however, i, i'd, i'll, i'm, i've, idem, if, ilk, important, in, including, inside, interest, interested, interesting, interests, into, is, isn't, it, it's, its, itself, just, keep, keeps, kind, knew, know, known, knows, large, largely, last, later, latest, least, less, let, let's, lets, like, likely, long, longer, longest, made, make, making, man, many, may, me, member, members, men, might, mightn't, mine, minus, more, most, mostly, mr, mrs, much, must, mustn't, my, myself, naught, near, necessary, need, needed, needing, needn't, needs, neither, never, new, new, newer, newest, next, no, nobody, non, none, noone, nor, not, nothing, notwithstanding, now, nowhere, number, numbers, of, off, often, old, older, oldest, on, once, one, oneself, only, onto, open, opened, opening, opens, opposite, or, order, ordered, ordering, orders, other, others, otherwise, ought, oughtn't, our, ours, ourself, ourselves, out, outside, over, own, part, parted, parting, parts, past, pending, per, perhaps, place, places, plus, point, pointed, pointing, points, possible, present, presented, presenting, presents, problem, problems, put, puts, quite, rather, really, regarding, right, right, room, rooms, round, said, same, save, saw, say, says, second, seconds, see, seem, seemed, seeming, seems, seen, sees, self, several, shall, shan't, she, she'd, she'll, she's, should, shouldn't, show, showed, showing, shows, side, sides, since, small, smaller, smallest, so, some, somebody, someone, something, somewhat, somewhere, state, states, still, still, such, suchlike, sundry, sure, take, taken, than, that, that's, the, thee, their, theirs, them, themselves, then, there, there's, therefore, these, they, they'd, they'll, they're, they've, thine, thing, things, think, thinks, this, those, thou, though, thought, thoughts, three, through, throughout, thus, thyself, till, to, today, together, too, took, tother, toward, towards, turn, turned, turning, turns, twain, two, under, underneath, unless, unlike, until, up, upon, us, use, used, uses, various, versus, very, via, vis-a-vis, want, wanted, wanting, wants, was, wasn't, way, ways, we, we'd, we'll, we're, we've, well, wells, went, were, weren't, what, what's, whatall, whatever, whatsoever, when, when's, where, where's, whereas, wherewith, wherewithal, whether, which, whichever, whichsoever, while, who, who's, whoever, whole, whom, whomever, whomso, whomsoever, whose, whosoever, why, why's, will, with, within, without, won't, work, worked, working, works, worth, would, wouldn't, ye, year, years, yet, yon, yonder, you, you'd, you'll, you're, you've, you-all, young, younger, youngest, your, yours, yourself, yourselves

 

接下來在羅列中文的stop words:

一下

一些

一切

一则

一天

一定

一方面

一旦

一时

一来

一样

一次

一片

一直

一致

一般

一起

一边

一面

万一

上下

上升

上去

上来

上述

上面

下列

下去

下来

下面

不一

不久

不仅

不会

不但

不光

不单

不变

不只

不可

不同

不够

不如

不得

不怕

不惟

不成

不拘

不敢

不断

不是

不比

不然

不特

不独

不管

不能

不要

不论

不足

不过

不问

与其

与否

与此同时

专门

两者

严格

严重

个人

个别

中小

中间

丰富

为主

为了

为什么

为什麽

为何

为着

主张

主要

举行

乃至

之一

之前

之后

之後

之所以

之类

乌乎

也好

也是

也罢

了解

争取

于是

于是乎

云云

互相

产生

人们

人家

什么

什么样

什麽

今后

今天

今年

今後

仍然

从事

从而

他人

他们

他的

代替

以上

以下

以为

以便

以免

以前

以及

以后

以外

以後

以来

以至

以至于

以致

任何

任凭

任务

企图

伟大

似乎

似的

但是

何况

何处

何时

作为

你们

你的

使得

使用

例如

依照

依靠

促进

保持

俺们

倘使

倘或

倘然

倘若

假使

假如

假若

做到

允许

充分

先后

先後

先生

全部

全面

共同

关于

其一

其中

其二

其他

其余

其它

其实

其次

具体

具体地说

具体说来

具有

再者

再说

决定

况且

准备

几乎

几时

凭借

出去

出来

出现

分别

别的

别说

前后

前者

前进

前面

加之

加以

加入

加强

十分

即令

即使

即便

即或

即若

却不

原来

及其

及时

及至

双方

反之

反应

反映

反过来

反过来说

取得

受到

变成

另一方面

另外

只是

只有

只要

只限

叫做

召开

叮咚

可以

可是

可能

可见

各个

各人

各位

各地

各种

各级

各自

合理

同一

同时

同样

后来

后面

向着

否则

吧哒

呜呼

周围

呼哧

咱们

哈哈

哎呀

哎哟

哪个

哪些

哪儿

哪天

哪年

哪怕

哪样

哪边

哪里

哼唷

啪达

喔唷

嗡嗡

嘎登

因为

因此

因而

固然

在下

坚决

坚持

基本

处理

复杂

多少

多数

多次

大力

大多数

大大

大家

大批

大约

大量

失去

她们

她的

好的

好象

如上所述

如下

如何

如其

如果

如此

如若

存在

宁可

宁愿

宁肯

它们

它们的

它的

安全

完全

完成

实现

实际

宣布

容易

密切

对于

对应

少数

尔后

尚且

尤其

就是

就是说

尽管

属于

岂但

左右

巨大

巩固

已经

帮助

常常

并不

并不是

并且

并没有

广大

广泛

应当

应用

应该

开外

开始

开展

引起

强烈

强调

当前

当时

当然

当着

形成

彻底

彼此

往往

後来

後面

得出

得到

心里

必然

必要

必须

怎么

怎么办

怎么样

怎样

怎麽

总之

总是

总的来看

总的来说

总的说来

总结

总而言之

恰恰相反

意思

愿意

慢说

成为

我们

我的

或是

或者

战斗

所以

所有

所谓

扩大

抑或

按照

换句话说

换言之

掌握

接着

接著

故此

整个

方便

方面

旁人

无宁

无法

无论

既是

既然

时候

明显

明确

是否

是的

显然

显著

普通

普遍

更加

曾经

最后

最大

最好

最後

最近

最高

有些

有关

有利

有力

有所

有效

有时

有点

有的

有着

有著

朝着

本着

来着

极了

构成

果然

果真

某个

某些

根据

根本

欢迎

正在

正如

正常

此外

此时

此间

毋宁

每个

每天

每年

每当

比如

比方

比较

毫不

没有

沿

沿着

注意

深入

清楚

满足

漫说

然则

然后

然後

然而

照着

特别是

特殊

特点

现代

现在

甚么

甚而

甚至

由于

由此可见

的话

目前

直到

直接

相似

相信

相反

相同

相对

相对而言

相应

相当

相等

省得

看出

看到

看来

看看

看见

真是

真正

着呢

知道

确定

积极

移动

突出

突然

立即

等等

紧接着

纵令

纵使

纵然

练习

组成

经常

经过

结合

结果

绝对

继续

继而

维持

综上所述

罢了

考虑

而且

而况

而外

而已

而是

而言

联系

能否

能够

自个儿

自从

自各儿

自家

自己

自身

至于

良好

若是

若非

范围

莫若

获得

虽则

虽然

虽说

行为

行动

表明

表示

要不

要不是

要不然

要么

要是

要求

规定

觉得

认为

认真

认识

许多

设使

设若

说明

诸位

谁知

起来

起见

趁着

越是

转动

转变

转贴

较之

达到

迅速

过去

过来

运用

还是

还有

这个

这么

这么些

这么样

这么点儿

这些

这会儿

这儿

这就是说

这时

这样

这点

这种

这边

这里

这麽

进入

进步

进而

进行

连同

适应

适当

适用

逐步

逐渐

通常

通过

造成

遇到

遭到

避免

那个

那么

那么些

那么样

那些

那会儿

那儿

那时

那样

那边

那里

那麽

部分

鄙人

采取

里面

重大

重新

重要

鉴于

问题

防止

附近

限制

除了

除此之外

除非

随着

随著

集中

需要

非但

非常

非徒

顺着

首先

高兴

是不是

说说

 

Reference:

[1]http://www.clips.ua.ac.be/pages/stop-words

[2]http://www.cnblogs.com/ibook360/archive/2011/11/23/2260397.html

arrow
arrow
    全站熱搜

    葛瑞斯肯 發表在 痞客邦 留言(0) 人氣()