問い合わせチャットボットを開発するには?

先月も、中外製薬でAIを用いた医療従事者向け製品情報問い合わせチャットボット「MI chat（エムアイチャット）」の運用が開始されたというニュースがありました。

問い合わせチャットボットは、お客様（ユーザー）から入力された質問に対して、自動で回答を返します。すなわち通常の対話とは異なり、入力は常に「質問」であり、出力は常に「回答」であることを想定しているわけです。

今回は、こうした問い合わせチャットボットを開発する方法について考えてみましょう。

「開発する前」に必要なコト

問い合わせチャットボットの開発に欠かせないものは、質問と回答のペア（のデータ）です。仮に、何もデータがない状態から問い合わせチャットボットを開発する場合、まず想定される質問と回答を書き出さなければなりません。しかし、質問と回答をゼロから記述していくことは、想像以上に大変で、時間とコストがかかる作業です。

問い合わせチャットボットを作りたいと思った場合は、どんなチャットボットを開発するかという手法を検討する前に、近くに使用可能な質問／回答ペアのデータがないかどうかを探してみることが重要です。

チャットボットを導入しようとしているWebサイトに「よくある質問」のページがあるのならば、そこに質問／回答ペアがたくさんあるかもしれません。質問／回答ペアさえ大量にあれば、後は好きな手法で問い合わせチャットボットを開発することができます。

「検索」に基づく開発手法

例として、次のような質問と回答のペアがあることを想像してみてください（ここには4つのペアのみしか記載していませんが、このような質問／回答ペアがたくさんあると想定してください）。

このようなデータがある場合に、問い合わせチャットボットを開発する際によくとる手法の1つが、検索に基づいたものです。例えば、この質問／回答ペアを保持した状態で、ユーザーから次のような入力があったとします。

検索に基づく問い合わせチャットボットは、入力された文（質問）に対して、最も似ていると思われる質問文を手持ちの質問／回答ペアのなかから探します。

上記のうち、「新しい口座の作り方は？」と最も似ている質問文は「新規で口座を作りたい」でしょう。最も似ている質問文が特定できれば、その質問文に対応する回答文「本人確認ができるものを持ってご来店ください」を出力することで、問い合わせチャットボットとしての役目を果たせます。

それでは、”最も似ている質問文”はどのようにして探したら良いのでしょうか。

最も似ている文を探す方法はいろいろありますが、その1つは本連載の第28回でご紹介した「tf-idf」を用いる方法です。tf-idfでは、単純に単語の一致を見るよりも、よりその文にとって特徴的な単語を見つけることができます。すなわち、そのような特徴的な単語が多く一致している文を、最も似ている文だと判定すれば良いわけです。

tf-idfは第28回ではレコメンド（推薦）のために紹介した技術ですが、使い方次第では問い合わせチャットボットにも使えます。このように、技術はアイデア次第でさまざまな活用方法があるわけです。

「同義語の扱い」をどうするか

また、実際に問い合わせチャットボットを開発しようという場合、「同義語（類義語）をどう扱うか」も大きな課題となります。同義語とは、よく似た意味を持つ単語のことです。例えば、次の2文のなかにある「新規」と「新しい」は同義語と言えるでしょう。

• 新規で口座を作りたい
• 新しい口座の作り方は?

あらかじめコンピュータに「新規」と「新しい」は同じ意味だということを教えておかなければ、両者は別物として扱われてしまいます。同義語を扱う最も簡単な方法は、同義語を大量に集めた辞書データを作成し、それをコンピュータに与えておく方法です。

このようなデータを作成するのは大変ですが、一度作ってしまえばさまざまなところで活用することができるので、思い切って作成してしまうのも手でしょう。

機械学習を使った開発手法

機械学習を使って問い合わせチャットボットを作りたいのであれば、分類問題に落とし込んでも良いかもしれません。そのためには、質問と回答のペアだけでなく、そこに含まれる質問文と同じ意図で発話される別の文（言い換え文）を大量に集める必要があります。

こうしたデータがあれば、「問い合わせチャットボットの開発」は「入力された文を質問文のいずれかに分類する」という課題に落とし込むことができるでしょう。

この方法のメリットは、同義語の辞書をあえて作成する必要がないというところにあります。一方で、データを十分に集めることは非常に大変です。反対に、もしこのようなデータをすでに持っているのであれば、それは大きな財産だと言えます。

問い合わせチャットボットに限った話ではありませんが、何かを開発したいと思ったときは、まず身近にどのようなデータがあるかをよく確認してから、用いる手法を検討するようにしましょう。手法から考え始めてしまうと、せっかくの既存データを無駄にしたり、無駄なデータを作成したりと、不要なコストがかさんでしまう恐れがあるのです。