傀儡師の館.Python

傀儡師の館.Python

PR

×

Calendar

Keyword Search

▼キーワード検索

Archives

2026.07
2026.06
2026.05
2026.04
2026.03
2026.02
2026.01
2025.12
2025.11
2025.10

Profile

kugutsushi

kugutsushi

Free Space

設定されていません。
2003.03.26
XML
カテゴリ: ことばの処理
ときどき、無性に餡こ(アンコ)が食べたくなる。そうすると、コンビニで安っぽいあんこが入ったものを買ってきて食べる。でも、これだってものがないのだよな。おいしいアンコが食べたい。あんまりおいしくないものを食べると、満足感がなくて、もっと食べたくなるのだ。やっぱ、デパ地下でも行って買ってこようかな・・・。

ちなみに「あんころ餅」は、日本語形態素解析器の MeCab や ChaSen の辞書にちゃんと載っているのだな。でも「あんころもち」だと、ぜんぜんだめだめの結果になる。トーくんの辞書を作ろうかと思ってちょっと、いろいろ調べながら、やっぱり、たとえば「食べ物」という属性を形態素解析の結果にも入れてやりたい気がしてきた。辞書を改良するときに、属性ベースで、たとえば、「食べ物」に焦点を当てて、がーっと、これに対してまず属性をつけてしまうとかやりたいと思い始める。そうすると、属性のファイルを作って、ここにどんどんと食べ物の名前を書き込んで、そのファイルを今度は、形態素解析器の辞書の方にがーっとまとめて反映させるという方向性がメンテナンスしやすいんじゃないかなと。

それにしても、「あんころもち」とひらがなにすると、辞書に載っていないから、解析がこけてしまうのはしょうがないとして、ここまでグチャグチャになるのか・・・。これはいくらなんでもなんだなぁ。「あ」「ん」「ころ」がそれぞれ非自立になっているところは、立派といえば立派なんだろうけど、ひらがな文字列の非自立語が連続している場合は、もしかして解析がこけている確率が高いのかな。大量にやってみると何かおもしろいことが分かるかもしれない。こけている確率が高いのであれば、一定の条件でつないでしまって未知語にしてもいいだろうし。



あんころもちを食べる。
あ 動詞,非自立,*,*,五段・ラ行,体言接続特殊2,ある,ア,ア
ん 名詞,非自立,一般,*,*,*,ん,ン,ン
ころ 名詞,非自立,副詞可能,*,*,*,ころ,コロ,コロ
もち 名詞,一般,*,*,*,*,もち,モチ,モチ
を 助詞,格助詞,一般,*,*,*,を,ヲ,ヲ
食べる 動詞,自立,*,*,一段,基本形,食べる,タベル,タベル
。 記号,句点,*,*,*,*,。,。,。



「ころ」の名詞,非自立,副詞可能っていうのは、何なのだろう。「4月ころ」とかの「頃」なのかな。「いちころ」とかの「ころ」ではないだろうな。やっぱり、ひらがなには弱い。あー、でも人工無能とかで会話していたら、けっこうひらがなにはつよくないとつらいときもあるんだよな。「アルジャーノンに花束」をプロジェクトとして、ひらがな文字列に強い形態素解析器も欲しいかもしれない。



いちころ
い 動詞,非自立,*,*,一段,連用形,いる,イ,イ
ち 動詞,自立,*,*,五段・ラ行,体言接続特殊2,ちる,チ,チ
ころ 名詞,非自立,副詞可能,*,*,*,ころ,コロ,コロ




まあ、何にせよ、一応、「餅を食べる」ということ自体は、この解析結果からでも分からんことはないな。どうでもいいが、うまいアンコが入ったものが食べたい。





お気に入りの記事を「いいね!」で応援しよう

Last updated  2006.09.12 19:59:32
コメントを書く


【毎日開催】
15記事にいいね!で1ポイント
10秒滞在
いいね! -- / --
おめでとうございます!
ミッションを達成しました。
※「ポイントを獲得する」ボタンを押すと広告が表示されます。
x
X

© Rakuten Group, Inc.
X
Design a Mobile Website
スマートフォン版を閲覧 | PC版を閲覧
Share by: