remove very common words and nsfw words

This commit is contained in:
ThomasV 2011-11-08 17:31:42 +01:00
parent ecd144b625
commit d03dd0be8e
1 changed files with 1 additions and 37 deletions

View File

@ -22,12 +22,10 @@
words = [
"like",
"have",
"just",
"love",
"one",
"know",
"from",
"never",
"want",
"see",
@ -38,20 +36,12 @@ words = [
"there",
"life",
"make",
"how",
"would",
"look",
"eye",
"because",
"say",
"day",
"who",
"get",
"had",
"were",
"down",
"only",
"our",
"think",
"heart",
"back",
@ -59,20 +49,16 @@ words = [
"into",
"come",
"about",
"him",
"more",
"away",
"still",
"their",
"way",
"them",
"why",
"take",
"thing",
"even",
"through",
"long",
"let",
"always",
"world",
"too",
@ -80,16 +66,13 @@ words = [
"tell",
"try",
"hand",
"has",
"face",
"did",
"thought",
"over",
"here",
"word",
"other",
"where",
"every",
"need",
"smile",
"again",
@ -97,7 +80,6 @@ words = [
"cry",
"been",
"night",
"its",
"ever",
"little",
"said",
@ -168,7 +150,6 @@ words = [
"body",
"hate",
"after",
"until",
"close",
"talk",
"hard",
@ -186,7 +167,6 @@ words = [
"new",
"many",
"two",
"told",
"inside",
"should",
"true",
@ -262,7 +242,6 @@ words = [
"sound",
"red",
"everyone",
"fuck",
"hide",
"kiss",
"truth",
@ -365,7 +344,6 @@ words = [
"learn",
"three",
"gave",
"set",
"floor",
"promise",
"breathe",
@ -532,7 +510,6 @@ words = [
"four",
"leg",
"ring",
"ago",
"course",
"goodbye",
"lead",
@ -541,7 +518,6 @@ words = [
"corner",
"desire",
"fine",
"gonna",
"known",
"problem",
"ran",
@ -591,14 +567,12 @@ words = [
"also",
"create",
"lonely",
"onto",
"safe",
"cross",
"dress",
"evil",
"silent",
"bone",
"brought",
"fate",
"perhaps",
"anger",
@ -682,7 +656,6 @@ words = [
"echo",
"figure",
"gold",
"golden",
"grew",
"herself",
"laughter",
@ -785,11 +758,9 @@ words = [
"imagine",
"important",
"nobody",
"none",
"shatter",
"warmth",
"became",
"below",
"bore",
"fat",
"feed",
@ -871,7 +842,6 @@ words = [
"suck",
"sweat",
"tale",
"bitch",
"box",
"chill",
"clothes",
@ -1162,7 +1132,6 @@ words = [
"exactly",
"explode",
"familiar",
"flew",
"fold",
"further",
"lit",
@ -1171,7 +1140,6 @@ words = [
"scent",
"selfish",
"sell",
"sex",
"sharp",
"sink",
"spring",
@ -1198,7 +1166,6 @@ words = [
"palm",
"perfectly",
"pillow",
"piss",
"pity",
"poison",
"roar",
@ -1592,7 +1559,6 @@ words = [
"blossom",
"bounce",
"bridge",
"bye",
"cheap",
"crumble",
"decision",
@ -1751,7 +1717,6 @@ words = [
"fur",
"giggle",
"glorious",
"hers",
"ignorance",
"law",
"lifeless",
@ -1771,7 +1736,6 @@ words = [
"possibly",
"practice",
"slice",
"slut",
"spell",
"stock",
"strife",
@ -1815,7 +1779,6 @@ words = [
"gut",
"hook",
"hurl",
"ill",
"invite",
"juice",
"manage",
@ -1950,6 +1913,7 @@ def mn_decode( wlist ):
if __name__ == '__main__':
import sys
print len(words)
key = '6a8657c1f2566290be460fd51bb9f7fc'
ss = mn_encode(key)
print key