WEBマガジン

「＜オージス総研をとりまく＞人工知能技術の過去と現在（４）」

2017.07.20 株式会社オージス総研　　乾　昌弘

１．はじめに

（１）4月号にある「２．人工知能技術の変遷」でも触れた、第２次ＡＩブームが去った冬の時代について、まず解説します。
（２）次に、長い歴史を持つ統計解析の一分野でもある機械学習の概要について述べます。この種の機械学習は、ビッグデータの時代を迎えて、ディープラーニングに先んじて注目されるようになりました。
（３）最後に、機械学習の一種でもあり、「教師あり学習」ディープラーニングの基になるニューラルネットワーク（Back Propagation）について説明します。
（４）図1に上記のキーワードの関係を示します。範囲が広いキーワードほど、定義も厳密さを欠く内容となってしまいます。

図１．キーワードの関係図

２.第２次ＡＩ冬の時代

第2次AIブームが去った後は、AI技術者にとって厳しいものであったと思います。
（１）1995年頃～2010年頃を冬の時代とみなせば、この頃発展した技術は何だったのか。それはWindows95が普及のきっかけとなった、インターネットの世界であった。
（２）梅田望夫著「ウェブ進化論」では、インターネットの世界を「あちらの世界」と呼んだ。仮想コミュニティ「セカンドライフ」が話題となった。
（３）ハードウェアでは、パソコンから携帯電話、スマートフォーンに広がる
（４）Mushupなどインターネット独特の技術が生まれた。ＡＳＰを衣替えしたSaaSから○aaSという言葉が流行るようになった。
（５）Amazonが書籍のインターネット販売を始めた後、クラウド事業AWSに参入して、クラウドの時代を迎える。ビッグデータが話題になり、ディープラーニングへと繋がっていく。

３．従来の機械学習

３－１．機械学習とは、

（１）ある手法を使って＜Ａ＞（予め用意された）データからパターンを発見（パターン認識）し＜B＞それをもとに分類や予測をおこなうこと。
（２）特定の目的に対する厳密なプログラムを用意しなくてもよい。
（３）機械学習の種類は多くありますが、ここでは典型的な３つの手法を紹介します。

３－２．回帰分析

（１）回帰分析が一番わかりやすい例だと思いますので、まず紹介します。
（２）それぞれのデータと近似する直線（曲線）との目的変数の差の２乗和が最小になるように直線（曲線）を決めること（最小二乗法）。線形回帰の場合は、図２のようになる。
（３）図２右のような状態になってくると、回帰分析の意味がなくなってくる。一般的に決定係数という指標が用いられるが、決定係数が１に近いほど精度がよい近似となる。
（４）０～１の値の確率を求めたい場合は、ロジスティック回帰を用いる場合もある。

図２．線形回帰分析

３－３．クラスター分析（「参考文献」１）

（１）似た特徴を持つデータをまとめて、グループ化する手法。(A) 似た特徴を持つデータをまとめていって階層構造を作りあげる（階層的クラスター分析）(B) 事前に決めた個数のグループに分ける（非階層的クラスター分析）がある。
（２）階層的クラスター分析には、データ間の距離と取り方により(A)最短距離法 (B)最長距離法 (C)群平均法 (D)重心法 (E)ウォード法などがある。
（３）最短距離法の場合 (A)最短距離の２つのデータどうしをグループ化する (B)グループどうしのあるデータが最短距離のものをさらにグループ化する (C)一つのグループになるまで繰り返す。
（４）非階層的クラスター分析で代表的なものは、k-means法（k個のグループに分類する方法）である。
具体的には (A)各データをランダムにk個のグループに割り当てる (B)各グループの重心を計算する (C)各グループのデータを一番近い重心のグループに変更する (D)変化がなければ終了。そうでなければ(B)に戻り繰り返す。

３－４．決定木＜Decision Tree＞（「参考文献」１）

（１）ある特定の目的に対して、データを分割してTree構造にする手法。決定木は、階層的クラスター分析と逆方向の解析手法である。
（２）　いろいろな特徴を持ったデータのグループから不純度を減らすように分割。指標としてジニ係数を用いる。０～１の値をとり、低い値をとるように分類していく。
（３）例えば、販売額が100万円以上、100万円未満を分類したい場合、図４の例では不純度の少ない性別で分類する。

図３、図４

４．ニューラルネットワーク（Back Propagation）

４－１．Back Propagationについて

（１）1986年Rumelhartが、3層以上のニューラルネットワークでBack Propagationにより、うまく学習できることを示した。
（２）ニューロ・ファジーで1980年代後半及び1990年代前半のブームの牽引となる。
（３）ＣＮＮ (Convolutional Neural Network)のような前処理的な部分がないため、画像処理とともに入力層各ノードに特徴定義が必要になる。（ピクセルごとの値を入力にすることも可能である）

４－２．Back Propagation―仕組みの概要（詳細は「参考文献」２）

（１）重み付け（W１、W２）がすべての訓練データに対して誤差が最小になるように調整する。基本的には、2乗誤差の合計を最小にする点で回帰分析と同じ考え方である。図５は、わかりやすいように中間層が１層であるが、一般的にはN層あるものとする。
（２）まず、出力層j番目ノードの誤差指標Djは、主に(A) 出力層j番目の入力の総和 (B) 出力層j番目の出力値と正解の差、から求められる。次にDjとN層目i番目ノードの出力値から新たな（N層目i番目と出力層j番目との）リンクの重み付けWijを決定することができる。
（３）同様にK層目j番目のDjは、主に(A) K層目j番目の入力の総和 (B) K＋１層目の各ノードのDとその2層間のリンクの重み付け、から求められる。そのDjとK-1層目i番目の出力値から同様に新たなリンクの重み付けWijを決定することができる。
（４）（３）を繰り返す。このように比較的実用的なアルゴリズムで実現できる。
（５）中間層のノード数が多すぎると過学習になり、少なすぎると充分学習しない。適切なノード数を試行錯誤で決める必要がある。

図５．ニューラルネットワーク（Back Propagation）の例

４－３．考察

（１）理論上は中間層が多層になっても学習ができるはずであるが、中間層（隠れ層）が多い場合、（活性化関数にシグモイド関数を用い）Back Propagationが前まで伝わらないという欠点もあり、中間層は1層～2層が中心であった。
（２）この考え方は、改良されてディープラーニングに引き継がれていく。

５．オージス総研の状況

　2012年にデータサイエンスセンターが設立され、本格的にデータ解析ビジネス（統計解析、最適化など）に参入した。その後、データアナリシス部に引き継がれ、現在に至る。 http://www.ogis-ri.co.jp/pickup/bigdata/index.html

「参考文献」

1.	秋光淳生「データ分析と知識発見」放送大学（番組プログラム）2012年
2.	涌井良幸、涌井貞美著「ディープラーニングがわかる数学入門」技術評論社（2017年4月初版）
3.	河本薫著「会社を変える分析の力」講談社現代新書（2013年7月初版）
4.	乾昌弘「人工知能の概要と現状について」社内資料（2016年）

（謝辞）私が2012年から3年半、データサイエンスセンター長を務めていた時、初代｢データサイエンティスト・オブ・ザ・イヤー｣を受賞された河本薫氏（元大阪ガス現滋賀大学データサイエンス学部教授）に多大なる御指導及び御支援をいただきました。それに対し感謝の意を表します。また、「参考文献」３は、仕事を進める上で大変参考になりました。

図６．掲載テーマ及び予定（御参考）

*本Webマガジンの内容は執筆者個人の見解に基づいており、株式会社オージス総研およびさくら情報システム株式会社、株式会社宇部情報システムのいずれの見解を示すものでもありません。

『WEBマガジン』に関しては下記よりお気軽にお問い合わせください。

お問い合わせ

さらに見る

「＜オージス総研をとりまく＞人工知能技術の過去と現在（４）」

１．はじめに

２.第２次ＡＩ冬の時代