Cambio de 4-gram a 3-gram

language_model/{4gram.bin → 3gram.bin}

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:3967d4def681ddee39bf356833361e907aa61ee2393088c6a586a40a43c6dea5
-size 8844701
+oid sha256:c6b4c6c36306b53804e5ae50e82489845e7e380b9c052503a71ab4b2aea6e03f
+size 6641013

language_model/unigrams.txt

@@ -26,7 +26,6 @@
 あいう
 あいうえ
 あいうえお
-あいうえおかきくけこ
 あいうえおかきくけこさしすせそ
 あいうえおかきくけこさしすせそた
 あいうえおとこんにちは
@@ -503,7 +502,6 @@
 あたえられたものはつくられたものである
 あたえられるものはれきしてきこじんてきにあたえられるのである
 あたしえびだいすきなんだ
-あたしにどうしろっていうのよ
 あたしほれっぽいから
 あたしらはしにむかっていきてるんだよ
 あたたかいきせつのあいだえんてんいのぐるりにあるわきまどがひらけほうったれしんせんなかぜといっしょにたいようのひかりがつよくこのぼうっとかすんだようなかんないにいりこんでくると
@@ -714,7 +712,6 @@
 あなたはまだちゅうしょくにしょくどうへいらっしゃっていないのでうちのちゅうしょくのおきゃくさんがたをごぞんじないのですあのころはもっとおおかったんです
 あなたはもうじぶんをたすけることはできません
 あなたはりゅうかんになりかけているかもっとおもいびょうきかもしれません
-あなたはわかろうとしてくれていたのに
 あなたはわたしにかれらをころさせようとしていますか
 あなたはわたしのもとからいなくなった
 あなたはわたしをとくべつにしてくれる
@@ -1025,7 +1022,6 @@
 ありがとうおりごとう
 ありがとうこれでけっこうです
 ありがとうございました
-ありがとうございます
 ありがとうそれしかいうことばがみつからない
 ありがとうといってからあくたいをつく
 ありがとよ
@@ -1233,7 +1229,6 @@
 いいからだまってついてきて
 いいきぶんになんてなれないよ
 いいきもちがするものではないかもしれませんが
-いいさ
 いいさべつに
 いいしょくにんはしごとというものはおぼえればおぼえるほどむずかしくなるといいます
 いいたいことがあるならはっきりいってくれ
@@ -1257,11 +1252,9 @@
 いいんをでたあときづいてうでどけいをみるとちょうどごじはんであった
 いうほどきれてないじゃん
 いうまでもなくろんりがまことのろんりとなるにはみとすてきなものはひていせられていかなければならない
-いうよ
 いぇむとらんどけんのけんとはえすてるすんどである
 いぇーがーはめっせんじゃーとなりえいぞうせいさくではばーどをしえんした
 いえい
-いえいえいいんですよそんな
 いえからがっこうまででんしゃでいちじかんかかります
 いえからちかいからようすでもみにいってくる
 いえがらようしにめぐまれたさいえんであるがりょうりはにがてでひとなみみいかといえる
@@ -1717,7 +1710,6 @@
 いっぽうどこまでもかんきょうからげんていされながらどうじにたほうどこまでもじこがじこをげんていするというすなわちじりつてきであるというところにせいめいはある
 いっぽうのてでさるはなんどもやさしげにわたしのかおをなでてくれますてっきりわたしをおなじさるのこだとかんちがいしてるのでしょう
 いっぽうははもむすめをなくしたことでこころをやむがこじへのじぜんじぎょうをとうしてゆたかなせいかつのなかでみうしなっていたものをみつけていく
-いっぽぉん
 いっぽでもうごいてごらんがけからおちてしまうよ
 いっぽんにほんさんぼんたばこはみるみるはいになってむらさきいろのけむりとえじぷとたばこのかおりとがへやいっぱいにただよいました
 いっぽんのたかいきがすいめんにながいかげをうつしている
@@ -1984,7 +1976,6 @@
 いまどきねんこうじょれつだなんていってもわかいやつのはんぱつをくうだけですよ
 いまなにがおこっているのかりかいしているにんはいなかった
 いまなにしてる
-いまなんじ
 いまなんじなんぷんですか
 いまにじゅうめんそうはそのてつのふたをひらいたのですそしてひょいとそこへとびこむとすばやくなかからふたをもとのとおりにしめてしまいました
 いまにだれもあいてにしてくれなくなるぞ
@@ -2113,7 +2104,6 @@
 いればにするのですかそれともくらうんにするのですか
 いろあかとごーるど
 いろあせたほしと
-いろいろありがとうございました
 いろいろしゅるいがある
 いろいろしらべているのですがどうもあまりのこっていないようです
 いろいろちゅうもんがおおくてうるさかったでしょうおきのどくでした
@@ -2364,7 +2354,6 @@
 うちをでるまえににもつをかくにんします
 うっかりあるけばあしのしたにふみつぶしてしまいそうなこどもがうじょうじょしているではありませんか
 うっかりしてたらしょくざいをくさらせてしまった
-うっすらかーげおれたちのおっかーげー
 うったときをうめあわせるのはむずかしい
 うったものばかりかぞえるな
 うったらーかんどしゅうのかきにおけるしゅうとはげーるせーんである
@@ -2556,7 +2545,6 @@
 えいようふそくはじすいすればわりとかいけつする
 えうりゅでぃけーのせいじかつどうはまけどにあのれきしにおけるてんかんてんをしるしました
 ええいいですよ
-ええええ
 ええええええええ
 ええすきです
 ええでもそれはじゅうようではありません
@@ -3006,7 +2994,6 @@
 おかげでもくひょうはいぜんとおいままだ
 おかしいって
 おかしいなきのうはうまくいったのに
-おかしいよね
 おかしたべたい
 おかしなことにはぼうしもかぶらずきものもきていないそのくせあたまのてっぺんからあしのさきまですみのようにまっくろなにんのすがたです
 おかしのとくばいをみつけてついかってしまう
@@ -3321,7 +3308,6 @@
 おどろくべきていりがありますそれはかんぜんへいさのゆうこうぐるーぷはどれもあーべるぐんです
 おなかがいたいのでびょういんへいきます
 おなかがすきました
-おなかすいた
 おなさけんらっとはしんがくこうがげんじゅうみんをさくしゅしいとてきにひんこんにおちいらせているとひなんした
 おなじいいまわしでもかいしゃによっていみがびみょうにちがう
 おなじいんたびゅーのなかでかれはきょうこうがふりーめーそんであるともしゅちょうした
@@ -3374,7 +3360,6 @@
 おはよう
 おはようきもちのよいあさですね
 おはようこんにちはこんばんは
-おはようございます
 おはようございますこんにちは
 おはようございますこんにちはえきでまちあわせのよていです
 おはようしょくん
@@ -3512,7 +3497,6 @@
 おもにふたつのたいぷのぷろでゅーさーがいるがそれはおーでぃおあるいはくりえいてぃぶぷろでゅーさーとこんてんつぷろでゅーさーである
 おもやのもんぴはかたくとざしたままだった
 おもわぬてんかいにしくはっくする
-おや
 おやおもいのむすめさんであることはわかります
 おやおやしょくじのとちゅうにせきをたつとはまなーにはんしますね
 おやかたがもうなふきんをかけてないふをもって
@@ -3577,7 +3561,6 @@
 おれさいきょう
 おれさんじょう
 おれたちがかえってきたらいちぺーじのこらずきくからなもしちょっとでもとばしていたらしょうちしないぞ
-おれたちこれからどうなるというんだかわいそうにこどもらをどうやってくわしていくか
 おれたちのいのちくらいいっしょにかけてみろなかまだろうが
 おれたちはいくのにおまえたちはいかぬ
 おれたちはけつえきだ
@@ -3680,7 +3663,6 @@
 おーぷんわーるどはたのしいけどつかれる
 おーめんはおうしゅうぎかいのもとぎいんです
 おーるでぃーずやえすにっくぷろぐらみんぐはそのままでした
-おーんそらそうよ
 かあさんはろっくはぴんとこないという
 かいいんとうろくはこちらから
 かいえんにちにはやおきするもせいそうちゅうでがっかり
@@ -3934,7 +3916,6 @@
 かきかたがこのきじではずっとふくざつじゃなくなっている
 かきくう
 かきくけこ
-かきくけこといえ
 かきこおりはいつもめろんあじをえらぶ
 かきしぶのぬられたかみをしぶがみとよぶ
 かきにりんくしゅうがあります
@@ -4172,7 +4153,6 @@
 かたほうのあしでばらんすをとりもうかたほうのあしをくうちゅうにもちあげているちゃいろいかみのおんなのこ
 かたまるまでそのままにしておくかれいぞうこでひやしてください
 かためのぱいきじでどうだろ
-かたや
 かたろぐすぺっくでははかれないはやさをたたきだす
 かたろぐとかかくにかんするじょうほうをおおくりください
 かたわらかれはむすめのじぇるめーぬをりんじんでぽるせれこうしゃくという
@@ -7295,7 +7275,6 @@
 こいびととてーまぱーくにでーとにいくとわかれるというとしでんせつがある
 こいみどりのはがまっすぐぐならびところどころぴんくのはながさく
 こいやますのようなさかなはたんすいにすんでいる
-こいよ
 こいるのかぞくはうぃがんとながいつきあいがあります
 こいんのおもてにはやりなげせんしゅがえがかれている
 こうあつでんりゅうえねるぎーをきょくちょうたんぱにへんかんしそこからはっせいするびしんどうでがんせきをくだく
@@ -7825,7 +7804,6 @@
 こっくはじぶんのれすとらんでしょくじするきゃくのためにりょうりをします
 こっけいなはなしをしているまっさいちゅうにかれにでんわがかかってきたのではなしをちゅうしした
 こっそりかくしてもじぶんでみつけられないんじゃいみないじゃん
-こっちくんな
 こっちはすわれないのであっちにすわります
 こっちはのぞみとうりのてんかいだ
 こっちをたてればむこうがたたぬせんばんにいちばんのかねあい
@@ -8642,7 +8620,6 @@
 これからあたたかくなってくるきせつにちょうどいいふくそう
 これからいろいろとにゅうようになるからせつやくしないと
 これからおせわになるね
-これからどうするんだ
 これからどうすればいいのか
 これからなにかてじょくをみにつけたいとおもうかたはぜひおよみになることをおすすめします
 これからのしょうらいはすべてあなたとすごしたい
@@ -9105,7 +9082,6 @@
 こんなんでわなにかかるのかなあ
 こんなんにきんつかうなんてばかみたいじゃない
 こんなんをきりぬけられたのはすみすさんのおかげだ
-こんにちは
 こんにちはあかちゃん
 こんにちはあつかったのであいすをたべてからだをひやしました
 こんにちはあめがふるからかさをもっていかなくてはいけない
@@ -9310,7 +9286,6 @@
 ごそんぷのしにつつしんであいとうのいをあらわします
 ごぞんじのとうりふりょうくらっちにかんするほしょうはせいぞうがわにげんいんがあるばあいのみにかぎられています
 ごちそうがでるからおなかをすかせておきなさい
-ごちそうさま
 ごちそうのあとではかわいいきれいなべっどふたつにしろいきれがかかっていました
 ごちゅういください
 ごちゅうもんをうけとりしだいせいひんをきしゃにおおくりします
@@ -9354,7 +9329,6 @@
 ごめんくんのいったことよくきこえなかった
 ごめんね
 ごゆうじんはわたしにはたいそうとうといものです
-ごゆっくりどうぞ
 ごようなのにていちゃくしてしまった
 ごらくというてんではほとんどなにもありませんでした
 ごりおしですすめてつごうがわるくなったらひっこめるやりくち
@@ -9770,7 +9744,6 @@
 さっこんこじんてきじゆうはすくなくなっている
 さっそくきょうとだいがくきょうじゅとしてきょうだんにたつはずでしたが
 さっそくむじゅんがでてきてる
-さっぱりしたか
 さっぽろしあつべつく
 さっぽろしきたく
 さっぽろしきよだく
@@ -11615,7 +11588,6 @@
 じもとみっちゃくだからできるさーびす
 じゃあおねがいします
 じゃあとくんはいいうみがわのでんせんがどうなっているのかしっているかとおじさんにきく
-じゃあな
 じゃあばすでびょういんへいきます
 じゃあまた
 じゃいるずはかのきゃりあではじめておーるすたーちーむににんめいされた
@@ -12945,7 +12917,6 @@
 そうなりな
 そうなるとあとはじかんのもんだいだった
 そうなるりゆうはわかっていた
-そうなんです
 そうのこうこうじだいのおんしでありけがをしたそうにこーちになることをすすめた
 そうばしのなかにはろうじんのむちとさびしさにつけこむやつがいる
 そうばんわたしたちはそのもんだいにほんきでとりくまざるをえなくなるだろう
@@ -14958,7 +14929,6 @@
 だけどかれはでてこなかったまっしろでどろどろしたえきたいとこたいのちゅうかんのぶっしつのなかにうもれはなれようとしなかった
 だけどくんはずいぶんかわっていた
 だけどしったかおはみあたらない
-だけどそれじゃあだめだよね
 だけどどこかにていたおなじにみえた
 だけどなんどもなんどもくりかえすことでぼくらはあなほりのぷろになった
 だけどはんのうはないふったりかるくたたいたりもしてみたでもやっぱりはんのうはなかった
@@ -16108,7 +16078,6 @@
 でもじっとめをくらってにじゅうどほどあたまをさげてきおくのなかをさがっても
 でもすきーりょこうはあしただというのにふおんなくうきがながれている
 でもせけんからひょうかされているのでわたしはめをふせるのだ
-でもそうじゃないよね
 でもそのまどはちょうどあけちたんていのまうしろにあったものですからたんていはそんなきみょうなにんのかおがあらわれたこと��どすこしもしりませんでした
 でもそれにはまたむちなものはかえっておおくのことをやってのけるというりてんもあります
 でもそれはあきらかにそういったけーすでしたよね
@@ -16866,7 +16835,6 @@
 どうしてこんなちんみょうななまえをつけたのか
 どうしてこんなにたくさんこがあるのだろう
 どうしてじゅぎょうをやすんだのですか
-どうしてそんなこともわからないの
 どうしてそんなにいかるんですか
 どうしてそんなにむずかしいのでしょうね
 どうしてですか
@@ -16889,7 +16857,6 @@
 どうじょうやくはどくりつしたはんがりーこっかのちいをきせいしこっきょうをさだめた
 どうじょうをさそうさくせんにでたみたいだ
 どうするのかぼくはくんにきいた
-どうすればいいんだろう
 どうすればかんじをおぼえることができますか
 どうすればろくおんできるの
 どうすんだこのじょうきょう
@@ -16962,7 +16929,6 @@
 どうも
 どうもあたらしいきゃくがながくはいないとおもっていたらしくきゃくをひきとめるためになにひとつやってはなかった
 どうもありがとう
-どうもありがとうございました
 どうもありがとうございます
 どうもありがとうございますまたおまちしております
 どうもうまくかけないものだね
@@ -17675,7 +17641,6 @@
 なんじじしんにしんじつであれなんじみずからたにんにいつわりなきごとく
 なんじにでてくの
 なんじはわれにたいしてどくりつなものである
-なんじゃあ
 なんせいにみえけんとのみじかいけんざかいがあります
 なんせいのへいしをきょうりにかえしせんししゃをとむらうようじょうそうしてききいれられた
 なんせいぶうぉーれんはべいあーまんふぁーむずとふぃっつじぇらるどのちくでこうせいされる
@@ -17728,7 +17693,6 @@
 なんでそんなにじしんにみちあふれてるの
 なんでそんなむちゃすんの
 なんでためくち
-なんでだよ
 なんでとちゅうにらっぷいれんの
 なんでなんだ
 なんでなんだよ
@@ -17798,7 +17762,6 @@
 なんらかのぎじゅつてきもんだいによりよこくされたばんぐみのかわりにえいががほうえいされた
 なんらかのむじゅんがありそのたいみんぐをちょうせいしてほせいするひつようがあります
 なーしぇんがだすはずだったりゅうきしのえんぐんがこなかったためたちおうじょうしていた
-に
 にいがたけんいずもざきまち
 にいがたけんいといがわし
 にいがたけんおじやし
@@ -18668,7 +18631,6 @@
 はやくからこせんきょうけんせつのちんじょうはなされていたがげんじつまでにはかなりながいじかんをようした
 はやくきのしるはふらのくまりんをふくむためこうせんかびんをひきおこす
 はやくしてください
-はやくしてね
 はやくだせ
 はやくちことばではありませんのでおちついてはつおんしてください
 はやくなるのはきづかないがおそくなるとすぐわかる
@@ -18912,7 +18874,6 @@
 ばはまのしゅとはなっそーである
 ばばふみか
 ばみゅーだはべんぎてきなせんせきです
-ばもす
 ばら
 ばらかのおちばたかぎはるしらまたはうすべにのはながさく
 ばらがとからかたんぎまでにしにはこうきろせんがはしっている
@@ -21174,7 +21135,6 @@
 まされたきょういくのかちはきんせんでははかれない
 ましゅーはけいさつをいかめしくさけしょうがくきんじゅよしきのゆうしょくにいそいでいきます
 ましょうめんにこちらをむいているのですまっくろなかおのなかにしろいめとしろいはとがみえるからにはこちらをむいているのにちがいありません
-まじかよ
 まじっくはんどとべるとこんべあーそれにぷれすきでりょうさんしたようなへいぼんなでざいん
 まじで
 まじであたまおかしくなりそう
@@ -21195,7 +21155,6 @@
 ますぞえしはいつもほんをいっぱいかかえている
 ますますおおくのにんがそのばいたいのそうほうこうてきなせいしつをりようしようとやっきになっている
 まずいぱすたをそーすでごまかしてたべる
-まずいよよ
 まずおれはあいつにふくつうをおこさせてやろうとおもってあいつのおちゃのなかにつばをはきこんでやった
 まずかがくはげんいんのちしきであった
 まずくなるまえにのみきってしまう
@@ -21821,7 +21780,6 @@
 みてないけどかんどうをありがとうせーるでやすくかう
 みてはいけないざっしわかっている
 みてまなぶ
-みてみてこっちこっち
 みてよんだものだとわかりいささかしつぼうしたしだいです
 みであむれあにしてぽてとをひとつつけてください
 みでぃあむてんぽのぽっぷぱんくそんぐはほっぱすがこじんてきけいけんをもとにかいた
@@ -22466,8 +22424,6 @@
 もうもとのとうりになおりませんでした
 もうやきゅうはやめてほかのことをするのもわるくないな
 もうやめたいんだが
-もうやめていいだろ
-もうやめようよこんなこと
 もうゆうぐれのようである
 もうよくわからなくなってきた
 もうよびににんをよこさないもののことはそのもののかこについてかんぜんにわすれてしまったばかりでなくすっかりそのもののみらいについてもわすれてしまった
@@ -22851,7 +22807,6 @@
 やっぱりなっとうはおいしいですね
 やっぱりめいじがなんばーわん
 やっぱりよいものくっってるな
-やっぱりわかりません
 やっほー
 やつがおれをわなにはめてすきゃんだるにおとしいれた
 やつがたけでゆうきやさいのさいばいはいたつのじぎょうをしている
@@ -23239,7 +23194,6 @@
 よくちょういちぎょうはろうぼくがきりたおされているのをはっけんした
 よくちょうかれはわたしをばしゃにのせてしないけんぶつにつれていってくれました
 よくちょうゆきだるまはあとかたもなくきえうせていた
-よくなっていますよ
 よくねんだいいちじせかいたいせんがはじまりました
 よくねんちちのせんきょをてつだってゆうぜいあんぎゃのまねーじゃーをつとめた
 よくねんどうけんきゅうしょのじちょうにしゅうにんしました
@@ -23982,7 +23936,6 @@
 わさびがうまみをひきだします
 わさびのかたまりがつんときた
 わざともっていかなかったのかもしれない
-わざわざありがとうございます
 わざわざいってみたいかといわれるとそこまでじゃないからにんきがでない
 わざわざかくひつようある
 わざわざでんわをかけてくださらなくてけっこうです
@@ -24569,7 +24522,6 @@
 わんがんせんそうをはじめおーすとらりあかいぐんかんていのさんかするさくせんやえんしゅうにずいはんしている
 わんのなんぶはへりごらんどわんとしてもしられています
 わんぴーすはじつざいする
-わんわん
 わーい
 わーぐなーはだいほんをはきした
 わーなーぶらざーずはがっぺいしたふぁんどんごをふくむしょうすうかぶぬしをほじしました