textmining

Macでmecabを使うまで

% brew install mecab % brew install mecab-ipadic ターミナルで使用できることを確認 % mecab condaで利用できるようにするため % conda install -c anaconda swig % pip install mecab-python3 pythonで利用できることを確認 condaの環境で、以下のコマン…

fastTextで文章分類(python)

文章を分類したくなったので、fastTextを用いて分類することにしました。[ポイント] ・pythonでfastTextを利用 ・テキスト分類 データ 今回は元々収集していたtweetデータを用いて分類していきます。今回私は、3つのカテゴリに分割しました。 ラベル1:人が呟…

ちょっとだけテキストマイニング-形態素解析

例えばチャットbotを作るとき、どの単語をどの文章ラベルとして登録すればいいのか迷ったりしませんか? 最近はなんとなくで教師データを入れておけば、自動的に学習してくれますが、一度自分で分析しておくことで、なんとなく関係性を確認することができる…