Skip to main content

[mecab] タグが付いた質問

MeCabはオープンソースの形態素解析エンジンで、言語、辞書、コーパスに依存しない汎用的な設計を基本方針としています。 平均的にChaSen, Juman, KAKASIより高速に動作します。 名称は開発者の好物「和布蕪(めかぶ)」から取られた。

絞り込み
並べ替え
タグ付けされた
0
1 回答
152 閲覧数

MeCabのユーザ辞書作成後、RMeCabで登録した内容が反映されない

環境はWIndows10です。 MeCabのユーザ辞書を作成するために、以下のようなcsvファイルをutf-8で作成し、"C:\95CI.csv" に保存しました。 95%信頼区間,1285,1285,5000,名詞,一般,*,*,*,*,95%信頼区間,キュウジュウウゴパーセントシンライクカン,キュージューゴパーセントシンライクカン その後コマンドプロンプトにて以下を実行 ...
c o Q's user avatar
  • 3
0
1 回答
3,568 閲覧数

mecab-python3 のエラーの理由を教えて欲しい

C:\Users\user>pip install mecab-python3 Collecting mecab-python3 Using cached mecab-python3-1.0.8.tar.gz (78 kB) Installing build dependencies ... done Getting requirements to build wheel ... ...
統志郎田渕's user avatar
0
1 回答
100 閲覧数

MeCabで二つ以上のAlphabet記号をグルーピングしたい

MeCabのchar.defは未知語処理のルールを定義します。その中、Alphabet記号のグルーピング方法も書かれています。私の理解が正しいのなら、その意味は「いつもAlphabet記号が連鎖する」です。 # CATEGORY_NAME INVOKE GROUP LENGTH ALPHA 1 1 0 でも、実際にやってみると、記号の数が少ない場合(2〜4)、...
Sophiefy's user avatar
3
2 回答
379 閲覧数

OpenJTalkの辞書エントリのフォーマットがよくわかりません

日本語自然言語処理に興味を持つ中国の大学生です。最近はopenjtalkでg2pを行なっています。デフォルトのnaist-jdicに登録された単語は少ないので、ユーザー辞書を構造したいと考えています。でもこのnaist-jdicのエントリを見てみると、一般のMeCabスタイルのエントリとはちょっと違って、2項目の余計な情報が追加されています。 具体的に、一般のMeCab辞書のエントリは以下ように。 ...
Sophiefy's user avatar
0
2 回答
681 閲覧数

MeCab 使用時にエラー TypeError: in method 'Tagger_parse', argument 2 of type 'char const *'

表題の通り、MeCabを用いてPythonでリストからStopwordsを削除したいと思います。 しかしながら TypeError: in method 'Tagger_parse', argument 2 of type 'char const *' というエラーが出てしまいます。 環境は Python 3.9.7 mecab-python3 コードの例: import urllib from ...
user236381's user avatar
1
1 回答
1,386 閲覧数

UniDic-2.3.0でMeCabのユーザー辞書をコンパイルする時、左と右の文脈IDの選択方法をお教えください。

Ubuntu 20.10の環境で、最新バージョンのUniDic-CWJ-2.3.0でMeCab 0.996のユーザー辞書を作成したいですが、エラーが出ます。 下記を実行しました。 $ /usr/local/libexec/mecab/mecab-dict-index -d /usr/local/lib/unidic/unidic-cwj-2.3.0 -u ~/foo/bar/foo.dic -f ...
tyknkd's user avatar
  • 113
0
0 回答
219 閲覧数

AnacondaでMeCabを使う際、printで結果が表示されません

初めまして 最近WindowsのパソコンにAnaconda及びMeCabをインストールしましたがいざjupyter notebookで以下のコードを実行しようとすると結果が出ません。 import MeCab mecab = MeCab.Tagger() print(mecab.parse("すもももももももものうち")) コードの左隣の箱に実行が完了したサイン(数字)...
Hiros Horikawa's user avatar
0
1 回答
1,778 閲覧数

MeCabを用いたPythonの品詞抽出について

表題の通り、MeCabを用いたPythonでの品詞抽出に取り組んでいます。 しかしながら TypeError: in method 'Tagger_parse', argument 2 of type 'char const *' というエラーが出てしまいます。 環境は Python 3.7 mecab-python-windows0.996.3 ...
万年酔い太郎's user avatar
0
0 回答
721 閲覧数

pythonでMeCab、neologdで形態素解析すると結果が文字化け(ユニコードエスケープ)する

初めまして。表題の通り、PythonにてMeCab、NEogold辞書で形態素解析をしたいのですが、結果が上手く出せません。 環境:Windows10 64bit、Anaconda3、jupyter notebook ※辞書はコード中のフォルダにインストールしてあります。 以下のコードは実行すると正しく結果が出力されているように見えます。 import MeCab # ipadic tagger =...
matsu's user avatar
  • 1
0
1 回答
275 閲覧数

pythonモジュールswemのimport方法

https://github.com/yagays/swem ↑このモジュールをimportしようとすると、以下画像のようなエラーになります。 こちらの解消方法を教えてください。 ----------------------------------------------------------- ImportError Traceback (most recent ...
Takk's user avatar
  • 13
0
0 回答
299 閲覧数

WindowsでMecabをHerokuにデプロイできない

WindowsでMeCabを使ったアプリをherokuにデプロイしたいのですが、エラーが出ます。 remote: Collecting mecab-python-windows==0.996.3 (from -r /tmp/build_beb169f7c63c4d7023b0ec6888f38c1f/requirements.txt (line 5)) remote: ...
tk_0709's user avatar
0
1 回答
131 閲覧数

tsvファイルに書かれている文章を分かち書きし、文章ごとに単語を入れ子構造リストとして格納したい

tsvファイルを読み込み、IDと単語を各行ごとに紐づけて分かち書きをしました。 このうち、単語のみを文章ごとにリストに格納するコードが分かりません。 したいアウトプットの形としては[['単語','単語'],['単語'.....]...] という形です。 どなたかコードのご教授お願い致します。 from gensim.models.doc2vec import Doc2Vec from ...
jumpei manai's user avatar
0
2 回答
669 閲覧数

tsvファイルを分かち書きし、特定の品詞を基本形で出力したい

tsvファイルをmecabを用いて分かち書きを行い、名詞・形容詞・動詞のみを基本形でリスト化したいです。 tsvファイルを読み込み、mecabを用いて分かち書きし、ストップワードを除外するコード/名詞・形容詞・動詞のみを基本形で分かち書きするコードはそれぞれあるのですが、2つを組み合わせる方法が分かりません。 どなたかご教授いただけると幸いです。 使用環境 jupyternotebook ...
jumpei manai's user avatar
0
1 回答
248 閲覧数

MeCab 形態素解析の結果が意図した通り表示されない

MeCabでリスト形式のデータを形態素解析したいのですが、頭の一文字だけ表示されてしまいます。 test = ['国語が得意です。','算数が得意です。','理科が苦手です。','社会が苦手です。','英語が苦手です。'] words_list = [] #形態素解析(名詞・動詞に絞る) t = MeCab.Tagger() for s in test: s_parsed = t....
sayuri m's user avatar
3
2 回答
1万 閲覧数

PythonでMeCabを使うと出力が文字化けしてしまいます。

一日中詰まっています...アドバイスいただきましたら幸いです。 Windows10 64bit版 でMeCabをUTF8指定でインストールし、anaconda3上のpython3.6.5で使用しようとしています。 一通りpathを通し、ラッパーとしてmecab-python-windows0.996をpipインストールしました。 MeCabそのものは正常に動いていて、...
glass's user avatar
  • 179
1
1 回答
419 閲覧数

長めの固有名詞が分割されてしまう

分かち書きや形態素解析をする際、長めの固有名詞が2つに分割されてしまいます。 例)外国人 → 外国 / 人 これらをくっつけて出力する方法はありますでしょうか。 ユーザー辞書などに追加するしかないのでしょうか。 できればですが、基本的なMecabを使った以下のコードから改変したいです。 *コード* import MeCab m = MeCab.Tagger ("-Owakati") print(...
user avatar
1
1 回答
1,243 閲覧数

AttributeErrorに対しどう修正すればいいのかわかりません

マルコフ連鎖を使って〇〇っぽい文章を自動生成してみた 上記サイトを参考に、マルコフ解析と形態素解析を使い適当なテキストファイルを与えたらそれを材料に自動で文章を生成するものを作りたく、python3.7.2、mecab-0.996.exeをインストールした後コマンドプロンプトで learn.py を実行したところこのようなエラーが出ました。 C:\Users\Desktop>python ...
Kentaro Ikeda's user avatar
1
1 回答
466 閲覧数

除外した品詞が除外できていない

pythonでMeCabで文章の処理をかけています。 for text in df["msg_body"]: for line in mecab.parse(text).rstrip().splitlines(): items = line.split("\t") if len(items) == 2: surface, ...
user9191983's user avatar
0
1 回答
846 閲覧数

MecabをWindows10にインストール後、コマンドラインから使うと漢字だけが表示される

Linux Subsystem UbuntuのBashからmecabを起動すると正常: nyck33@DESKTOP-9JIJ7R7:/mnt/c/Users/nick/Downloads$ mecab 面白い 面白い 形容詞,*,イ形容詞アウオ段,基本形,面白い,おもしろい,代表表記:面白い/おもしろい 反義:形容詞:つまらない/つまらない EOS ...
mLstudent33's user avatar
1
2 回答
2,231 閲覧数

WSL(Ubuntu 18.04)にMeCabをインストールできない

64bit版Windows10にWindows Subsystem for LinuxとUbuntu 18.04を導入して、MeCabとIPA辞書をインストールしようとしましたが、IPAの辞書インストール途中にエラーが出てうまくいきませんでした。 http://taku910.github.io/mecab/#install-unix 行った手順としては、mecab-0.996.tar....
Haruo Wakakusa's user avatar
0
1 回答
771 閲覧数

mecab-python3 をインストールする上での swig コマンドの必要性

私は現在以下のようにコマンドで mecab-python3 をインストールしようとしているのですが、エラーが出てしまいます。 これは swig をインストールすれば、解決するという意味でしょうか...? もし、そうでなければ mecab-python3 をインストールする上での対処法を教えて頂けると助かります。 コマンド $ pip install mecab-python3
lightning070's user avatar
1
0 回答
1,204 閲覧数

windows環境でCaboChaをPython3にバインディング出来ません。

表題の通り、windows7(64bit)でCaboChaをどうしてもバインディングできません。関連Qiita記事を何度も読み直し、必要なVisual Studio(14.1)を導入するなどをして何度もトライしていますが、画像の通りエラーが出て一向に成功しません。 環境は下記の通りです。 Python3.7.1(32bit) MeCab0.996(公式の32bit) CaboCha0.69 ...
馬場亮介's user avatar
3
0 回答
370 閲覧数

PostgreSQL + MeCab 全文検索での単語区切りについて

PostgreSQL + MeCab の全文検索でデータベースのフィールドを検索しようとしています。そこで、あることに気がつきました。 大阪市生野区 を 大阪 で検索するとヒットします。 大阪市生野区 を 大阪市 で検索するとヒットしません。 実験した SQL とその結果です。 dd=> select to_tsquery('大阪') @@ to_tsvector('japanese':...
kenjiuno's user avatar
  • 133
0
2 回答
200 閲覧数

スクレイピングでmecabが動きません

スクレイピングで以下のコードを動かしたいのですが、以下のエラーが出てしまいます。 もしよろしければ、ご教授お願いいたします。 実行時のエラーメッセージ fetching data... http://www.haiku-data.jp/work_detail.php?cd=9 result: SUCCESS Traceback (most recent call last): File "/...
yudai tonoyama's user avatar
3
1 回答
487 閲覧数

Dockerコンテナに mecabの辞書、NEologdをインストール中、ファイルが存在しないと言われる。

local環境 Macos HighSierra Docker環境 CentOS です。 Dockerfileに、NEologdのインストールコマンドを記載してDockerコンテナに反映させようとしています。 手順としては、 git cloneでNEologdをダウンロード。 NEologdがあるフォルダに移動し、そこで RUN ./bin/install-mecab-ipadic-neologd ...
training_boy's user avatar
0
0 回答
730 閲覧数

Heroku mecabインストール時にエラー

発生している問題・実現したいこと requirements.txtに mecab-python-windows==0.996 と記述して git push コマンドで mecab のインストールを試みたものの、 Could not find a version that satisfies the requirement mecab-python-windows==0.996 ...
user30138's user avatar
  • 321
7
1 回答
246 閲覧数

Mecabで日本語を分割した結果、エラーが出る

Mecabでこのように日本語を分割したいのですが、 m = MeCab.Tagger("-d /usr/local/lib/mecab/dic/mecab-ipadic-neologd") c = m.parse('小林製薬 ヒフミド 公式 !本気の潤い肌には。小林製薬初回980円').splitlines() for s in c: print(s) 結果は: ...
tktktk0711's user avatar
2
1 回答
447 閲覧数

MeCabを用いたSinatraアプリをHerokuにデプロイする方法をご教示ください。

類似の質問がありましたが、回答がありませんでしたので質問させていただきます。 タイトルの通り、MeCabを用いたSinatraアプリをHerokuにデプロイしようとしています。 環境 ローカルPC:Mac OSX $heroku -v heroku/7.6.0 darwin-x64 node-v10.6.0 # homebrewで入れました $ruby -v ruby 2.4.0p0 (...
ayumitamai97's user avatar
0
2 回答
241 閲覧数

Mecabが文字化けとUnicodeDecodeErrorが発生

OS:Ubuntu 16.04 LTS、Mecabバージョン0.996にての質問です。 最初にここの説明通りにインストールしました:http://taku910.github.io/mecab/#install-unix しかし、上記の問題が発生したためにここの説明を参考にしてやり直しました: https://qiita.com/junpooooow/items/...
mLstudent33's user avatar
1
1 回答
565 閲覧数

さくらレンタルサーバーにおけるPythonでのMeCabのimport方法

とりあえずshellをbashに変更しました。 Flaskのファイルを実行したいのですが、うまく行きません。 追記: 現状Pythonファイルを実行するとこのような感じになっています。 import MeCab ModuleNotFoundError: No module named 'MeCab' type mecab : mecab is /usr/local/bin/mecab ...
yoshi's user avatar
  • 21
0
1 回答
2,131 閲覧数

mecabをJavaScriptから実行したい

mecabをコマンドプロンプトから実行はできるのですが、他の言語から実行する方法がわかりません。javascriptから実行したいと考えております。 最終的には、javascriptからmecabを実行し、htmlを形態素解析して他のファイルに出力する、ということをやりたいです。 windows10(x64)です。 よろしくお願いいたします。
kooooji's user avatar
  • 260
1
1 回答
3,524 閲覧数

mecabのユーザー辞書追加をしても反映されません。

環境はMac OS High Sierraです。 mecabで辞書を新しく登録するために、下記のようなcsv(utf-8)をつくり、ユーザー辞書として追加しました。 肝機能障害,,,0,名詞,一般,*,*,*,*,*,*,* 下記のような形で実行しています。 ➜ userdic /usr/local/libexec/mecab/mecab-dict-index \ -d /usr/...
Hideki Ninomiya's user avatar
1
1 回答
1,170 閲覧数

mecab-python-windowsを使ってpysummarizationをインストールしたい

(base) C:\...>pip install pysummarization Collecting pysummarization Using cached pysummarization-1.0.5.tar.gz Requirement already satisfied: numpy in c:\...\appdata\local\continuum\anaconda3\lib\...
seiko_mac's user avatar
4
1 回答
5,741 閲覧数

MeCabをpython3で使いたいが 'utf-8' codec can't decode 'utf-8' codec can't decodeというエラーが出てしまう

MeCabをMacにインストールする手順 上記リンク先の手順通りにMeCabをインストールして、pip3 install mecab-python3をpython3で import MeCab mecab = MeCab.Tagger("-Ochasen") print(mecab.parse("ダックスフンドが歩いている。")) としたところ'utf-8' codec can't ...
Ryosuke Yokota's user avatar
3
1 回答
3,948 閲覧数

Pandasのapplyメソッドを使って列の文字列に対してMeCabで形態素解析をしたい。

英語版で質問しましたが回答が得られそうにないので、こちらで質問させていただきます。 https://stackoverflow.com/questions/48286364/pandas-series-apply-doesnt-work-consist-of-strings/48292467?noredirect=1#comment83570234_48292467 ...
YOSUKE's user avatar
  • 321
2
1 回答
705 閲覧数

Herokuにmecabをインストールできない

https://github.com/diasks2/heroku-buildpack-mecab を用いてHerokuにmecabを入れようとしましたが、できませんでした。 mecabを入れたい理由は、nattoを使うためです。もし、herokuでnattoを使っている方で、herokuのイントール方法が分かる方がいらっしゃれば教えていただきたいです。 エラーログ Counting ...
y-temp4's user avatar
  • 21
0
1 回答
510 閲覧数

Python MeCab バインディング

PythonからMeCabを弄ろうと環境を設定しているのですが、以下のコードの最終行のparse部分で UnicodeDecodeError: 'utf-8' codec can't decode bytes in position 0-1: invalid continuation byte というエラーが発生してしまいます。 import MeCab tagger = MeCab....
shugo's user avatar
  • 11
1
0 回答
246 閲覧数

MeCabで短単位かつ最新の語彙が収録された辞書を使う方法

お世話になっております。 MeCabには多数の辞書がありますが、IPADICとUniDicは長い間メンテナンスされていません。また人手によってチェックされている面もあるので、語彙数は多くありません。 NEologdは今でも週に2回更新されていて語彙数はとても多いのですが、私の用途では分割が長すぎて不適なケースがあります。 「国立オリンピック記念青少年総合センター」...
Keisuke Ueda's user avatar
12
1 回答
1,123 閲覧数

日本語のステミング(「よい」と「良い」が同じであるか判定する)方法

お世話になっております。 日本語の文章を分割する際にMeCabを使っています。ここで非常によく似た2つの文を入力します。 私たちは寿司屋に行った 私達はすし屋に行った 結果 私 たち は 寿司 屋 に 行っ た 私 達 は すし 屋 に 行っ た 使用した辞書はIPADICです。この2つは声に出して日本語話者が聞いたところ同じ文ですが、...
Keisuke Ueda's user avatar
0
1 回答
1,392 閲覧数

Word2vecのKeyerror

下記参考URLをもとに、word2vecを動かしてみたいと思いました。 以下train.py,similars.pyのファイル、作業手順は全てこのサイトからの転用です。 作業手順 mecabで青空文庫のファイルを分かち書きしたのち、以下のファイルで学習させました。 生成したmodelはdata22.modelとして保存。 train.py -*- coding: utf-8 -*- ...
Yukio Ueda's user avatar
0
1 回答
3,060 閲覧数

Python3 - MeCabで日本語をエンコードする方法

環境:Python 3.5.2, MacOS Sierra エクセルのデータを読み込んで文字列を作り、ReCabを使って名詞と出現回数を出すコードが以下にあります。 import pandas as pd import MeCab import sys df = pd.read_excel("filename.xls", sheetname=0) df = df.dropna() m = ...
Ryo's user avatar
  • 31
0
1 回答
3,364 閲覧数

Python3 - MeCabで日本語文字列の名詞出現数の出し方について

環境:Python 3.5.2, MacOS Sierra エクセルからデータを読み込んで文字列のデータを作りました。 [In] import pandas as pd import MeCab import sys df = pd.read_excel("filename.xls", sheetname=0) df = df.dropna() print(df) [Out] 5 ...
Ryo's user avatar
  • 31
0
1 回答
463 閲覧数

mecab 中国語の辞書を作成について [クローズ済み]

中国語の辞書を作成をしたいですが、上手くいきません。 単語辞書から作成したいですが、何をどうして処理したらいいのかわかりません。 アドバイスを頂けませんか。 辞書作成 編集 [root@localhost ~]# cd /usr [root@localhost usr]# cd local [root@localhost local]# cd etc [root@localhost etc]# ...
幸589's user avatar
  • 455
0
0 回答
771 閲覧数

USBメモリにあるmecab-ipadic-neologdの利用

Python 3.5でMeCabを利用しようと考えております。辞書として、mecab-ipadic-neologdを利用したいのですが、sudoとPCの容量制限の関係で本体にインストールすることができないため、こちらを参考にsudoの必要ないUSBメモリにmecab-ipadic-neologdを保存しています。 しかし、PythonのMeCabライブラリで使うと、mecab = MeCab....
user51966's user avatar
  • 226
1
1 回答
1,079 閲覧数

sudoが使えない環境下へのMeCabのインストール

管理者権限がない環境で、MeCabをインストールしています。 こちらと、こちらの記事を参考に(特に後者)、Mecab本体に関しては $ ./configure --prefix=/home/S/usr/local --with-charset=utf8 --enable-utf8-only ; make ; make install 辞書に関しては、 $ ./configure --with-...
user51966's user avatar
  • 226
0
1 回答
2,205 閲覧数

MeCabでのユーザー辞書が生成できない。

MeCabでユーザー辞書の追加を行っていますがうまくいかず、困っています。 いくつかのサイトを参考にし下記を実行してdoneまで表示されるのですが dicファイルが生成されません。 なにか修正点などあればご教示ください。 C:\Program Files (x86)\MeCab\bin>mecab-dict-index -d "C:\Program Files (x86)\MeCab\...
Wataru Harakita's user avatar