【Python】日本語に対応したワードクラウドの作り方

Pythonではwordcloudライブラリを使うと、簡単にワードクラウドを作成することができますが、日本語の場合は文章を単語に区切る必要があります。ここではMecabよりもインストールが簡単なJanomeを形態素解析に利用して日本語ワードクラウド作成する方法を解説します。

ワードクラウドって何？

ワードクラウド（Word Cloud）は、単語の出現頻度に応じて大きさを変えて並べたものです。

一時期流行ったことがあるので知っている人も多いのではないでしょうか。

最近、ワードクラウドを作る機会があったので、Pythonでのワードクラウドの作り方を紹介したいと思います。

下の図は、このブログのトップページのワードクラウドです。YOLO一番多いみたいです。また、AI系の記事が多いので、機械学習関連の記事が並んでいます。

使い方は？

例えば、TeamsやSlackの記事から作って会議のネタとして利用することができます。また、アンケートの自由記述欄から作れば、話題に上がったキーワードを可視化できます。

ワードクラウドは、プレゼンテーション資料でのテキストの可視化手段として有効に利用できます。

Pythonでの作り方

wordcloudライブラリを使えば、Pythonでワードクラウドを作るのは簡単です。以下、手順を説明します。

インストール

wordcloudライブラリをインストールします

pip3 install wordcloud 

英語の場合

英語の場合は、テキストを入力するだけで簡単にワードクラウドを作成することが可能です。

入力はなんでも良いですが、とりあえずsample.txtを読み込んでワードクラウドを作成してみます。ちなみに、今回用意したsample.txtは、英語版Wikipediaのpythonの項目です。

from wordcloud import WordCloud

with open('sample.txt', 'r', encoding='UTF-8') as f :
    text = f.read()

wc = WordCloud(width=640, height=480)
wc.generate(text)
wc.to_file('result.png')

日本語の場合

形態素解析（Janome）

形態素解析ライブラリと言えばMeCabが人気ですが、ここではJanomeを利用します。

JanomeはMeCabと比べて、Pythonのパッケージ管理ツールpipだけでインストールできます。

ワードクラウドを作るだけなので、どちらでも良いと思いますが、手軽さでJanomeを選びました

pip install janome

janomeの使い方は以下のようになります。

tokenize()を実行すると、tokenが切り出されます。tokenには、切り出された単語（token.surface）と、品詞（token.part_of_speech）が格納されています。

from janome.tokenizer import Tokenizer

t = Tokenizer()
text = 'Janomeは人気の形態素解析ライブラリです'
for token in t.tokenize(text):
    print(token.surface, "->",  token.part_of_speech)

Janome -> 名詞,固有名詞,組織,*
は -> 助詞,係助詞,*,*
人気 -> 名詞,一般,*,*
の -> 助詞,連体化,*,*
形態素 -> 名詞,一般,*,*
解析 -> 名詞,サ変接続,*,*
ライブラリ -> 名詞,一般,*,*
です -> 助動詞,*,*,*

名詞のみを抽出

ワードクラウドを作る場合、「は（助詞）」「の（助詞）」「です（助動詞）」などは入れたくありません。ここでは、名詞のみを取り出すようにしています。

以下のコードはsample-j.txtを読み込んで、品詞が名詞のものだけ取り出すコードです。8~9行目が名詞を取り出す部分です。品詞を,でsplitして、その中に名詞が含まれているかチェックしています。

with open('sample-j.txt', 'r', encoding='UTF-8') as f :
    text = f.read()

t = Tokenizer()

s = []
for token in t.tokenize(text):
    p = token.part_of_speech.split(",")
    if "名詞" in p:
        s.append(token.surface)

ワードクラウドを作成

以下がsample-j.txtを読み込んでワードクラウドを作成するコードになります。

なお、" ".join(s)は、名詞を連結する処理になります。

from janome.tokenizer import Tokenizer
from wordcloud import WordCloud



with open('sample-j.txt', 'r', encoding='UTF-8') as f :
    text = f.read()

t = Tokenizer()

s = []
for token in t.tokenize(text):
    p = token.part_of_speech.split(",")
    if "名詞" in p:
        s.append(token.surface)

wc = WordCloud(width=640, height=480,
            font_path="/System/Library/Fonts/Arial Unicode.ttf")


wc.generate(" ".join(s))
wc.to_file('result-j.png')

今回のサンプルに利用したテキストは、日本語WikipediaのPythonの項目です。

実行すると以下のようなワードクラウドができますが、赤丸で囲んだ「もの」「ため」「これ」などは除外したいです。

ワードクラウドからこれらのワードを除外するには、引数stopwordsに除外したいキーワードを列挙しておきます。とりあえず、上記の３つ＋いくつかのワードを除外する対象に入れておきます。コードは以下のようになります。

from janome.tokenizer import Tokenizer
from wordcloud import WordCloud



with open('sample-j.txt', 'r', encoding='UTF-8') as f :
    text = f.read()

t = Tokenizer()

s = []
for token in t.tokenize(text):
    p = token.part_of_speech.split(",")
    if "名詞" in p:
        s.append(token.surface)

wc = WordCloud(width=640, height=480,
            stopwords={"ため","こと","もの", "よう", "これ", "あれ"},
            font_path="/System/Library/Fonts/Arial Unicode.ttf")


wc.generate(" ".join(s))
wc.to_file('result-j.png')

このコードを実行した結果が以下になります

日本語フォントについて（Mac/Windows）

ここまでのコードはMacOSで実行することを想定していました。これは、font_pathが理由です。

Macは/System/Library/Fonts/にフォントが格納されていますが、Windowsの場合は、C:/Windows/Fonts/に格納されています。

また、フォント名も異なります。

とりあえず、フォント名を以下に変更すればWindowでも動作するはずです。

手元にWindows環境がないので試してませんがおそらく動作すると思います。

IPAフォントを利用する

「フォントの問題があるなら、フォントを別途用意すれば良い」ということで、ここでは、IPAフォントを利用してワードクラウドを作成する方法を紹介します。

といっても、難しいことはなく、まずフォントを以下のリンクからダウンロードしてきます。

上記のリンクからダウンロードページに飛べばダウンロードできます。IPAexフォント Ver.001.03（ipaexg00102.zip）をダウンロードした場合で説明します。

ダウンロードしたzipファイルを展開すると、ipaexg.ttfというファイルがあるので、これを、.pyファイルのあるフォルダ（カレントディレクトリ）にコピーします。

その後、以下のpythonコードを実行すれば、ダウンロードしたIPAフォントを利用してワードクラウドを作ることができます。

この方法であれば、Windows/MacOS/Linux関係なく、ワードクラウドを作成することができます。

日本語フォントの問題は面倒なので、IPAフォントなどを使うのも１つの解決策です

from janome.tokenizer import Tokenizer
from wordcloud import WordCloud



with open('sample-j.txt', 'r', encoding='UTF-8') as f :
    text = f.read()

t = Tokenizer()

s = []
for token in t.tokenize(text):
    p = token.part_of_speech.split(",")
    if "名詞" in p:
        s.append(token.surface)

wc = WordCloud(width=640, height=480,
            stopwords={"ため","こと","もの", "よう", "これ", "あれ"},
            font_path="./ipaexg.ttf")

wc.generate(" ".join(s))
wc.to_file('result-j.png')

IPAフォントを使ったので、フォントが若干違うことがわかります。

背景と文字色

WordCloud()に以下の引数を指定することで、背景色と文字色を変更できます。

background_color

background_color="white"または、background_color="black"を設定できます。

colormap

colormap="文字列"の形式で指定できます。

文字列には、以下が設定できます。

カラーマップのサンプルはこちらの記事にありました。

まとめ

以上、Pythonでワードクラウドを作成する方法について説明しました。

ワードクラウド作成用のWebツールなどもいくつか存在していますが、テキストデータをアップロードしたくない場合などは、ローカルな環境で実行できるPythonのコードは役に立つと思います。