# 株式価格情報を用いた金融極性辞書の作成
## 五島 圭一 ・高橋 大志 $\dagger \dagger$

本研究では, 金融分野に特化した極性辞書の作成を目的とし, ニュースデータと株式価格データから極性辞書の作成を行う。株式価格情報から単語のポジティブ／ネガティブの情報を獲得するため, ニュース記事が言及している銘柄の株式価格変動を算出する，株式価格変動をニュース記事の教師情報として，教師あり学習を行ったのち，学習器から単語の極性情報を抽出することで，単語に対して重み付き極性値の付与を試みた。そして, 作成した極性辞書を用いて, 学習に用いたメディアのニュース記事分類と他メディアのニュース記事分類を行うことにより, 本研究手法の有効性を検証した。検証の結果, ニュース記事配信日の株式リターンに関して，将来のニュース記事を分類できること，また，異なるメディアのニュース記事も分類できることを示した。一方で，ニュース記事配信日から 2 営業日以上離れると， ニュース記事分類が困難であることが示された.

キーワード：極性辞書，ニュースアナリティクス，株式市場

## Building a Sentiment Dictionary for News Analytics using Stock Prices

\author{
KeIIchi Goshima $^{\dagger}$ and Hiroshi TaKahashi ${ }^{\dagger \dagger}$
}

This paper proposes a method of building a sentiment dictionary using only news and stock price data for textual analysis in finance. To obtain word polarity from stock price fluctuations, we calculate stock price returns following announcements of news articles. We constructed learners with support vector regression, using stock price returns as supervised labels of news articles, and built a sentiment dictionary by extracting word polarity from learners. Furthermore, we examined whether our sentiment dictionary is effective in classifying news articles as negative or positive. We found that our sentiment dictionary is also effective in classifying news articles provided by other news media other than news media we employed in constructing the algorithm. In addition, we found that it is difficult to classify news articles on a date that is two trading days away from the news announcement date.

Key Words: Sentiment Dictionary, News Analytics, Equity Market


## 1 はじめに

投資家は，資産運用や資金調達のために数多くの資産価格分析を行っている. とりわけ，ファイナンス理論の発展と共に，過去の資産価格情報や決算情報などの数值情報を用いた分析方法は数多く報告されている。しかしながら，投資家にとって，数值情報だけでなく，テキスト情報も重要な意思決定材料である。テキスト情報には数値情報に反映されていない情報が含まれている可能性があり，テキスト情報の分析を通じ，有用な情報を獲得できる可能性がある．そのため近年，これまで数值情報だけでは計測が困難であった情報と資産価格との関連性の解明への期待から, 経済ニュースや有価証券報告書, アナリストレポート，インターネットへの投稿内容などのテキスト情報を用いた様々な資産価格分析がなされている (Kearney and Liu 2014; Loughran and McDonald 2016). 本研究では, これらファイナンス分野及び会計分野の研究に用いるための金融分野に特化した極性辞書の作成を試みる.

テキスト情報の分析を行う際には，テキスト内容の極性（ポジティブ or ネガティブ）を判断する必要がある．極性辞書を用いた手法は, この課題を解くための主流の方法の一つである.極性辞書によるテキスト分析は，キーワードの極性情報を事前に定義し，テキスト内容の極性を判断することで分析が行われる。ファイナンス分野及び会計分野の研究では, 極性辞書による分析が標準的な手法となっている.

極性辞書が標準的な手法となっている理由の一つとして, どの語句や文が重要であるかが明確であり, 先行研究との比較が容易である点が挙げられる。また, 金融実務の観点からすると, テキスト情報を利用して資産運用や資金調達をする際には株主や顧客への説明責任が必要であるという事情がある。そのため, 内部の仕組みがブラックボックス化してしまう機械学習よりも，重要な語句や文が明確である極性辞書の方が説明が容易であることから，好まれる傾向がある。

極性辞書には, General Inquirer ${ }^{1}$ や DICTION ${ }^{2}$ などの心理学者によって定義された一般的な極性辞書や金融分野に特化したオリジナルの極性辞書 ${ }^{3}$ が用いられる，金融分野では，独自の語彙が用いられる傾向があることから, Henry (2008) や Loughran and McDonald (2011)では, 金融分野に特化した極性辞書を用いることで分析精度が上がるとの報告がなされている.

しかしながら，金融分野に特化した極性辞書を作成するためには，人手によるキーワードの選択と極性の判断が必要であり, 評価者の主観が結果に大きく影響するという問題点が存在する。また，価格との関連性の高いキーワードも，年々変化することが想定される．例えば，新たな経済イベントの発生や資産運用の新手法などがあれば，その都度キーワードの極性情報を
^{1}$ http://www.wjh.harvard.edu/ inquirer/

2 http://www.dictionsoftware.com/

3 金融分野に特化した極性辞書として, Loughran and McDonald Sentiment Word Lists (http://www3.nd.edu/〜mcdonald/Word_Lists.html) がある.
}
更新する必要があり，専門家による極性判断を要することとなる。自然言語処理におけるブー トストラップ法をはじめとする半教師あり学習を用いる方法はあるものの, これも最初に選択するキーワードによって，分析結果に大きな影響を与えてしまうことなる。そこで，これら問題点に対する解決策の一つとして，本研究では人手による極性判断を介さずに，ニュースデー 夕と株式価格データのみを用いて極性辞書を作成する方法論を提示する.

株式価格デー夕を用いて日本語新聞記事を対象に，重要語の抽出を試みた研究報告として，小川，渡部 (2001) や張，松原 (2008), 廣川，吉田，山田，増田，中川 (2010) などがあるものの, これらは，株式価格情報からマーケット変動を十分に調節できていない，具体的には，株式固有のリスクを調節できていない，例えば，同じ銘柄であっても時期によって株式が有するリスクプレミアムに違いがあり, リスクに伴う株式価格変動が荒い時期と穏やかな時期があり,株式リターンが一見同じであっても，そこから得られる情報は異なることが広く知られている (Campbell, Lo, and MacKinlay 1997). また，異なる銘柄について同様である. リスクに伴う株式価格変動が荒い銘柄と穏やかな銘柄があり，株式リターンが一見同じであっても，そこから得られる情報は異なることも広く知られている (Campbell et al. 1997). 加えて, 新聞記事には必ずしも資産価格変動と関連性の高い新鮮な内容のみが記述されているだけではない.

本研究では, これら問題点も考慮し，なおかつ，金融市場における資産価格形成と関連性の高いメディアである日経 QUICKニュースを用いて，重み付き属性値付きキーワードリスト（以下，本稿では「重み付き属性值付きキーワードリスト」のことを単に「キーワードリスト」と記述する.）の作成を行う。 さらに，作成したキーワードリストによってどの時点でのニュース記事を分類できるかを，キーワードリストの作成に用いた日経 QUICKニュースと他メディアであるロイターニュースの分類を通じて検証する．次章は，本分析で用いるデータに触れ， 3 章ではキーワードリストの作成方法，4 章ではキーワードリストを用いた分類検証を記す。 5 章は， まとめである.

## 2 データ

## 2.1 マーケットデータ

本研究では, 株式価格情報からキーワードの極性評価を行うために, 個別銘柄の株式リターンとリスクファクター・リターンのデータを用いた。個別銘柄の株式リターンとして， Thomson Reuters Datastream から，トータルリターンの日次データを用いた。トータルリターンとは,株式の価格変動に加え，株式の配当も含めた株式の収益率のことを指す.

また，リスクファクター・リターンのデータは，株式会社金融データソリューションズが提供する日本版 Fama-French ベンチマークからマーケットリターン $(R m)$, リスクフリーレート $(R f)$, バリューファクター・リターン $(H M L)$, サイズファクター・リターン $(S M B)$ の日次

データを使用した。マーケットリターンは東証 1 部及び 2 部における全銘柄の時価総額加重平均配当込みの収益率，リスクフリーレートは新発 10 年国債利回りであり，バリューファクター・

リターン及びサイズファクター・リターンは, Fama and French (1993) や久保田, 竹原 (2007) において定義された方法によって算出された簿価時価比率のリスクファクター及び時価総額のリスクファクターである。

## 2.2 ニュースデータ

株式価格からキーワードリストを作成するためのニュースデータには日経 QUICKニュースを用いた。日経 QUICKニュースは，株式会社日本経済新聞社と株式会社 QUICK の許諾を受けて使用した。日経QUICKニュースは, 日本経済新聞社と QUICK 社によって投資家向けに専用の端末を通じて配信されるニュースである。このニュースデータに対して，株式会社金融工学研究所が付与したタグ情報を利用した。日経 QUICKニュースの利用したタグ情報は，「ニュー ス記事の配信日付」・「ニュース記事本文に含まれるキーワード」・「対象ニュース記事と関連する主要銘柄名（証券コード）」である.

また, 本研究手法によって得られたキーワードリストをもとに, ニュース記事分析をするためのニュースデータとして, 日経 QUICKニュースに加えて, 異なるメディアに対してもキーワー ドリストの有効性を検証するために，ロイターニュースを用いた，ロイターニュースは，世界で最も広く知られたニュース提供会社の一つであるトムソンロイター社が配信しているニュー スである。ロイターニュースの利用したタグ情報は，「ニュース記事の配信日時」・「対象ニュー ス記事と関連する銘柄名（証券コード）」を利用した。日経 QUICK ニュースとロイターニュー スは, どちらも日本語で書かれたニュース記事を分析対象としている. これらニュースデータの一部は, 日本経済新聞社やトムソンロイター社のウェブページから閲覧することが出来るが,本研究では，機関投資向けの専用端末を通じて 24 時間配信される全経済ニュースを分析に用いる.

日経 QUICK ニュースとロイターニュースは, 各団体が発信する一次情報に比べると, 各义ディアの記者やアナリストによる情報の取捨選択が行われており, 社会や市場に対して相対的に重要な情報が含まれていると考えられる。また，日本証券市場に参加している多くの（機関）投資家が閲覧するメディアであることから，新聞や雑誌のニュースに比べ，経済イベントからニュース記事配信までのラグが小さく, 金融市場における資産価格形成との関連性が高い新鮮な内容であることが想定される.

## 2.3 ニュースデータの前処理

ここでは, 分析を行う前のデー夕整形を記述する. 本研究の分析対象期間は, 2008 年から 2011 年までとした。 日経 QUICKニュースは, 2008 年から 2011 年までの間に配信された 719,633 本

のニュース記事を，ロイターニュースは， 2009 年から 2011 年までの間に配信された 395,819 本のニュース記事を，極性辞書の作成及び作成した極性辞書による分類検証に用いる.

はじめに，ニュース記事配信日の調整を行う。日経 QUICK ニュースとロイターニュースは東京証券取引所の休業日に配信されたニュース記事に関して, 翌営業日に配信されたニュース記事として分析を進めた。また，ロイターニュースは秒単位でのタイムスタンプ情報を獲得できたため, 大引けの 15 時以降に配信されたニュース記事は翌営業日に配信されたニュース記事として分析を進めた。例えば， 2016 年 9 月 3 日は土曜日なので，この日に配信されたニュース記事は翌営業日である 2016 年 9 月 5 日に配信されたニュース記事として扱い，2016 年 9 月 1 日 16 時に配信されたニュース記事は取引所が閉まった後に配信されたものなので，翌営業日である 2016 年 9 月 2 日のニュース記事として扱うということである. これらの調整は, マーケットが閉まっている間に配信されたニュース記事内容は, 直後の営業日において株式価格に反映されると仮定したためである。

次に，ニュース記事の選別を行う。本研究では，夕グ情報（証券コード）をもとに東証一部上場企業と関連するニュース記事を抽出した．東証一部に鞍替えした銘柄は，鞍替え前のニュー ス記事も分析対象としている。また，後述のイベントスタディ分析において推定ウィンドウ及びイベントウィンドウを確保できる，すなわち，ニュース記事が配信される 140 営業日前から 10 営業日後までにおいて株式価格データが取得できる銘柄のニュース記事のみを分析対象としている.

日経 QUICKニュースの選別は，ニュース記事の本文を分析対象としたため，「ニュース記事本文に含まれるキーワード」が付与されていないニュース記事は使用しなかった．ロイター ニュースの選別についても同様にヘッドラインのみのニュース記事は分析対象外とし, さらに,第一報のニュース記事のみを分析対象とするため，再送記事と訂正記事は分析対象外とした。加えて, 本研究ではニュース記事のテキスト情報に注目したため, 決算情報や社債の発行要項, テクニカルデータなどの数值情報のみのニュース記事についても分析対象外としている。また,複数の銘柄の内容について報じているニュース記事は, 関連する銘柄数の分だけニュース記事を増やし，一つのニュース記事に一つの銘柄を対応付け，分析を進めた，日経 QUICKニュー スはタグ情報（証券コード）を基に主要銘柄を一つに絞ることが出来たが，ロイターニュースは絞ることが出来なかったため, 一つのニュース記事から複数銘柄の株式価格変動の観察を行っている、しかしながら，厳密には，ニュース記事の内容を加味して分析することが望ましいと考えられる. 分析手法の改善は今後の課題である.

選別後のそれぞれのニュース記事数は, 表 1 に示す. ロイターニュースは, 延ベニュース記事数を表している。延べニュース記事数とは，一つのニュース記事に複数の証券コードタグが付随している場合，重複して計数した値である。また，カッコ内はニュース記事が報じている内容と関連する銘柄の異なり数を表している。
表 1 ニュース記事数

表 2 キーワード数

また，選別後の日経 QUICKニュースのタグ情報から取得できたキーワード数（異なり数・延べ数）は, 表 2 に示す. ここで得られたキーワードが本研究のキーワードリストのもとになる.

## 3 キーワードリストの作成方法

## 3.1 作成手順の概略

ここでは，ニュースデータと株式価格データからキーワードリストを作成する方法論の手順の概略を記す。はじめに，株式価格情報からイベントスタディ分析によって，各ニュース記事へ教師スコアを付与をする。次に，ニュースデータに付与されているキーワードをもとに，ニュース記事内容を bag-of-words によってべクトルで表現する。最後に，サポートベクター回帰 (SVR;

Support Vector Regression) (Bishop 2006) によって教師あり学習を行ったのち, 学習器から各キーワードの極性情報を抽出することで，キーワードリストの作成を試みた。 3.2 節及び 3.3 節において，それぞれの作成方法の詳細を記述する。

## 3.2 株式価格データからニュース記事への教師スコアの付与

本研究手法の想定する二つの仮定を記述する。一つ目は, ニュースが報じられたことによって,株式価格が変動した場合である。ある銘柄の株式価格が上昇した場合，それは投資家がニュー ス記事を見て，銘柄に対してポジティブな感情を持ち，高値をつけたと考える，逆に，株式価格が下落した場合は，ネガティブな感情を持ち，安値をつけたと考える，そのため，株式価格変動にはニュース記事の内容のポジティブ／ネガティブの情報が含まれていることが想定され

る。二つ目は，ある銘柄の株式価格の変動を受けて，その概況がニュースとして報じられた場合である．株式価格が上昇したときに報じられたニュース記事にはポジティブな内容，株式価格が下落したときに報じられた場合にはネガティブな内容が記述されていると考える。この場合にも，株式価格変動にはニュース記事の内容のポジティブ／ネガティブの情報が含まれていることが想定される．いずれの場合においても，株式価格変動の大きさは，ニュース記事内容のポジティブ／ネガティブと密接な関係があることが想定される.

そこで，本研究ではイベントスタディ分析の枠組みによって, 株式価格データからニュース記事への教師スコアの付与を試みた (Campbell et al. 1997)，イベントスタディ分析とは, 経済上のイベントが株式価値にどのような影響を与えるかを測定する方法論であり，各銘柄と各時期の共変動リスクを調整した株式価格変動である異常リターンを算出するために用いた. 異常リターンの概念図を，図 1 に示す。

具体的な算出手順は以下の通りである.

（1）はじめに，ニュース記事 $i$ ごとにイベント日, 推定ウィンドウ, イベントウィンドウを設定する。ニュース記事への教師スコアの付与は，イベント日はニュース記事配信日，推定ウインドウはニュース記事配信日の 140 営業日前から 21 営業日前までの 120 営業日間，イベントウィンドウはニュース記事配信日当日からその翌日までとした. 本研究では, 日数は東京証券取引所の営業日をもとに計数している. 図 2 は, 本研究の設定を図示したものである。例えば，2016 年 9 月 1 日に配信されたニュース記事であれば，イべント日は 2016 年 9 月 1 日であり, 推定ウィンドウは 2016 年 2 月 5 日から 2016 年 8 月 2 日までの 120 営業日間であり, イベントウインドウは 2016 年 9 月 1 日から 2016 年 9 月 2 日まで 2 営業日間となる.

図 1 異常リターンの概念図

図 2 本研究の設定

(2) 次に，推定ウィンドウにおいて，各ニュース記事 $i$ に関連する銘柄に関して, Fama-French の 3 ファクターモデルによって，切片及び各リスクファクターに対する感応度を算出する. Fama-French の 3 ファクターモデルは,

$
R_{i}[t]-R f[t]=\alpha_{i}+\beta_{i}^{M}\left(R_{M}[t]-R f[t]\right)+\beta_{i}^{S M B} S M B[t]+\beta_{i}^{H M L} H M L[t]+\varepsilon_{i}[t]
$

にて定義される (Fama and French 1993) ${ }^{4} Ｒ_{i}$ はニュース $i$ と関連する銘柄の株式リター ン, $R f$ はリスクフリー・レート， $R_{M}$ はマーケット・リターン, $S M B$ はサイズファクター・リターン，HMLはバリューファクター・リターン， $\varepsilon_{i}$ は誤差項を表しており，このモデルを用いることで, マーケット全体の価格変動の影響のほかに， 小型株効果及び割安株効果の共変動の影響を取り除いている。また， $[t]$ はイベント日からの日数を表しており，例えば， $R_{i}[-100]$ であればニュース記事配信日の 100 営業日前のニュース記事 $i$ と関連する銘柄の株式リターンを表し，SMB[+1] であればニュース記事配信日の 1 営業日後のサイズファクター・リターンを表す。モデルのパラメータ $\left(\alpha_{i}, \beta_{i}^{M}, \beta_{i}^{S M B}, \beta_{i}^{H M L}\right)$ が切片及び各リスクファクターに対する感応度であり，推定ウィンドウにおいてこれらパラメータを推定する。推定は最小二乗法による線形回帰によって行われる.

(3) 3 番目に, 推定したパラメータを用いて, イベントウィンドウにおける日次の異常リター ン $(A R$; Abnormal Return) と累積異常リターン (CAR; Cumulative Abnormal Return)を算出する。ニュース記事 $i$ のイベントウィンドウにおける $t$ 日の異常リターン $A R_{i}[t]$ は,

$
A R_{i}[t]=R_{i}[t]-\left(\alpha_{i}+\beta_{i}^{M}\left(R_{M}[t]-R f[t]\right)+\beta_{i}^{S M B} S M B[t]+\beta_{i}^{H M L} H M L[t]\right),
$

によって算出される。 すなわち, 異常リターンとはイベントウインドウにおいて実際に実現したリターン $\left(R_{i}[t]\right)$ から,イベントが起きなかった時に達成されていたであろうと期待され


るリターンである正常リターン $\left(\alpha_{i}+\beta_{i}^{M}\left(R_{M}[t]-R f[t]\right)+\beta_{i}^{S M B} S M B[t]+\beta_{i}^{H M L} H M L[t]\right)$ を差し引いた值である。続いて，イベントウィンドウにおける $t_{1}$ 日から $t_{2}$ 日までの累積異常リターン $C A R_{i}\left[t_{1}, t_{2}\right]$ は,

$
C A R_{i}\left[t_{1}, t_{2}\right]=\sum_{t=t_{1}}^{t_{2}} A R_{i}[t]
$

と算出される。本研究ではニュース記事に対する教師スコア付与のために，ニュース記事配信日の当日から 1 営業日後までの 2 営業日間の累積異常リターンである $C A R[0,+1]$ を算出する.

（4）最後に，累積異常リターン $C A R_{i}\left[t_{1}, t_{2}\right]$ を過去の株式価格変動を用いて標準化する。具体的には，ニュース記事 $i$ ごとに， $t_{3}$ 日から $t_{4}$ 日までの $L$ 日間の推定ウィンドウにおける Fama-Frenchの 3 ファクターモデルの残差 $e_{i}$ の標準偏差 $\sigma_{e_{i}}\left[t_{3}, t_{4}\right]$ を,

$
\begin{aligned}
& \sigma_{e_{i}}\left[t_{3}, t_{4}\right]=\left(\frac { 1 } { L - k } \sum _ { t = t _ { 3 } } ^ { t _ { 4 } } \left(R_{i}[t]-\left(\alpha_{i}+\beta_{i}^{M}\left(R_{M}[t]-R f[t]\right)\right.\right.\right. \\
&\left.\left.\left.+\beta_{i}^{S M B} S M B[t]+\beta_{i}^{H M L} H M L[t]\right)\right)^{2}\right)^{\frac{1}{2}}
\end{aligned}
$

によって算出する. ここで $k$ はモデルのパラメータ数を表している. 本研究では, $L=120$, $k=4$ として, $\sigma_{e_{i}}[-140,-21]$ を算出する. そして, 累積異常リターン $C A R_{i}\left[t_{1}, t_{2}\right]$ を,

$
S C A R_{i}\left[t_{1}, t_{2}\right]=\frac{C A R_{i}\left[t_{1}, t_{2}\right]}{\sigma_{e_{i}}\left[t_{3}, t_{4}\right]}
$

とすることで, 標準化された累積異常リターン (SCAR; Standardized Cumulative Abnormal Return) が算出される。本研究においては, ニュース記事配信日の当日から 1 営業日後までの標準化された累積異常リターン $S C A R_{i}[0,+1]$ を, ニュース記事内容と関連する株式価格変動とし，ニュース記事の教師スコアとした。

すべてのニュース記事に対して，（1）から（4）までのプロセスを経ることで，時期の違いと銘柄間の違い, 共変動の影響を調整した教師スコアである $S C A R[0,+1]$ を算出している.

## 3.3 ニュース記事内容のベクトル表現方法とキーワードの極性評価

ここでは，ニュース記事内容のベクトル表現方法とキーワードの極性評価を記述する。ニュー スデータに付与されているキーワードをもとに，ニュース記事内容を bag-of-words によってべクトルで表現する。日経 QUICKニュースには，ニュース記事の内容を表すキーワード群が付与されており，それらをニュース記事のベクトルの特徴量とした。キーワード数は表 2 を参照されたい，例えば，あるニュース記事 $\mathrm{A} に ， 「$ 続落」，「原油高」，「懸念」の 3 つのキーワード

が付与されているとき, ニュース記事 $\mathrm{A}$ は前述の 3 つのキーワード特徴量の值は 1 となり, 他のキーワード特徴量の値は 0 となるようなべクトルとなる.

加えて, ニュース記事に付与されたキーワードの数を考慮するために, 各ニュース記事のキー ワードベクトルを作成した後, ベクトルの長さが 1 になるうに次式によって各特徴量の調整を行った。

$
\frac{1}{\sqrt{x_{i}}}
$

ここで， $x_{i}$ はニュース記事 $i$ の特徴量数を表す.キーワードの極性評価は, 前節の方法にて算出した教師スコアをニュース記事ベクトルに紐付け, 入力 $(X)$ を bag-of-words のベクトル,出力 $(Y)$ を $S C A R[0,+1]$ として, SVR（＋線形カーネル）によって学習器を作成する ${ }^{5}$. そして, 学習器から法線べクトルを各キーワードの極性情報と見なして抽出することで, キーワー ドリストの作成を試みた。法線ベクトルを抽出せず，直接テストデータヘスコアを付与することは可能であるが, 本研究では極性辞書の作成を研究目的としているため, あえて行っている. パラメータチューニングに関しては, 10 分割の交差検定を繰り返し, 平均二乗誤差が最小になるようなハイパーパラメータを決定している.

## 3.4 作成したキーワードリスト

本研究手法によって得られたキーワードリストとその極性値を表 3 に示す. 2008 年は 13,806 , 2009 年は 13,893, 2010 年は 14,019 のキーワードに対して極性値が振られている. 表 3 は，各年のポジティブキーワードとネガティブキーワードとして, 特徴量に対する重みの大きいあるいは小さいキーワードをそれぞれ上位 30 位までのキーワードを抽出し，記載したものである. つまり，これらは株式価格変動との関連性の高いニュース記事内のキーワードであり，重みがプラス方向に大きければ大きいほど，株式価格の値上がりの時によく現れていることを示しており, 逆に, 重みがマイナス方向に大きければ大きいほど, 株式価格の値下がりのときによく現れていることを示している.

ポジティブなキーワードとして,「買い」や「上方修正」,「増益」などのキーワード群を, ネガティブなキーワードとして,「嫌気」や「反落」,「悪化」などのキーワード群をそれぞれ獲得することができた。これらのキーワードは一般的にポジティブあるいはネガティブだと想定されるキーワードであり, 本研究手法により, ニュースデータと株式価格データを用いてキーワー ドの極性情報を取り出すことのできる可能性を示すものである.抽出されたキーワードを見ると, 「値上がり」や「急伸」,「続伸」,「反落」,「急落」,「値下が


り」などの株式価格の動きを表したキーワードが多く抽出された. そして同時に，「上方修正」，「下方修正」, 「資本増強」, 「公募増資」,「オーバーアロットメント」などの, 会計利益やコー ポレートアクションなどと関連するキーワードも抽出された。一方で,「自動車株」や「ハイブリッド車」，「事務所」など極性を持つと考えにくいキーワードも抽出された。これは年によって特定の経済イベントが頻出したためだと考えられる。長期間のデータを用いれば，改善できる可能性があり，今後の課題である.

## 3.5 英文用の金融極性辞書との比較

ここでは，作成したキーワードリストと英文用の金融極性辞書との比較を行う．和文では，入手可能な金融用の極性辞書は存在しないため, 英文用の金融極性辞書と比較を通じて, 抽出した単語の極性情報の評価を試みる．筆者が直接単語の極性情報を評価することは可能であるが，恣意的な評価を避けるために行っている. 英文用の金融極性辞書には, Loughran and McDonald Sentiment Word Lists ${ }^{6}$ (以下, LM 辞書と略表記する.) を用いた (Loughran and McDonald 2011). LM 辞書は, Form 10- $\mathrm{K}^{7}$ の分析用に開発された極性辞書であり，金融関連の英文テキストの分析に広く用いられている．LM 辞書には，ポジティブな英単語が 354 語, ネガティブな英単語が 2,355 語, それぞれ収録されおり,これら単語との比較を行う。具体的な評価手順は以下の通りである。

はじめに, Google 翻訳8によって, LM 辞書に記載されている単語を和訳する。次に, 本研究のキーワードリストと LM 辞書のどちらにも記載されている単語を抽出する。 3 番目に，抽出した単語の極性情報を比較する。このとき，LM 辞書は単にポジティブ／ネガティブの二値なのに対して, 本研究のキーワードリストは重み付き属性値であるため, LM 辞書に収録されているポジティブな単語群及びネガティブな単語群がどのような重み付き属性値を取っているかを考察することで評価を行う，表 4 は，比較結果をまとめたものである。

2008 年と 2009 年では, ポジティブな単語群は平均値（重み付き属性値）がプラスで, ネガ

表 4 英文用の金融極性辞書との比較結果



ティブな単語群はマイナスの傾向はあるもの，2010 年ではその傾向は見られない. また, 表 3 と比較すると, 重み付き属性値は 0 付近の値を取っており, LM 辞書に記載されている単語は本研究のキーワードリストの重み上位に出てくる単語とのオーバーラップは少ないことが伺える.

LM 辞書ではポジティブな単語であるのに対して，どの年においても，本研究の重み付き属性値がマイナスになった単語として,「leadership（リーダーシップ）」,「transparency（透明性)」があった。また，LM辞書ではネガティブな単語であるのに対して，どの年においても，本研究の重み付き属性値がプラスになった単語として,「delisting (上場廃止)」,「rationalization (合理化)」,「antitrust (独占禁止法)」,「challenge (チャレンジ)」,「conciliation (和解)」などがあった。このような単語が抽出された原因として，文脈を見なければならない単語であることや英文と和文とでは用いられ方が異なる単語で直訳しただけでは上手く評価できない可能性がある，次章では，作成したキーワードリストをもとにニュース記事の分類を行うことで有効性を検証する。

## 4 キーワードリストを用いた分類検証

## 4.1 ニュース記事の分類

本章では, 本研究手法によって作成したキーワードリストをもとにニュース記事の分類を行い，分類した各ニュース記事クラスのニュース記事配信日付近の株式リターンの推移を観察することで，キーワードリストの有効性を検証する。そこではじめに，前章のキーワードリストをもとに，日経 QUICKニュース及びロイターニュースを 5 のクラス (Very Positive・Positive・ Neutral ・ Negative ・ Very Negative) に分類する.

本分析では，前年の日経 QUICKニュースと株式価格から得られたキーワードリストを用いて，翌年のニュースの分類を試みる。学習データと評価データの対応表は表 5 に示す.

例えば，2009 年に配信されたニュース記事の分類は，2008 年の日経 QUICK ニュースデータとマーケットデータを用いて作成したキーワードリストをもとに分類をする. 同様に，2010 年に配信されたニュース記事は， 2009 年のデータを用いて作成したキーワードリストを用いる. これは，ニュース記事配信時点での将来情報を用いないようにするためである.

表 5 学習データと評価データの対応表

さらに，経済・金融分野に特化していない一般的な極性辞書との比較を行うため，テキストの評判分析に広く用いられる日本語評価極性辞書 (名詞編) ${ }^{9}$ (東山，乾，松本 2008)を用いて同様にニュース記事の分類を行う。

本研究では，キーワードリストをもとに，各ニュース記事内に出現するキーワードを計数し，極性を表す重みで掛け合わせた値を，計数したキーワード数で割ることでニュース記事のスコアを算出した。日本語評価極性辞書は, $\mathrm{p}$ と $\mathrm{n}$ のベルが付与されているキーワードを用いて同様にニュース記事のスコアを算出した。重みは， $\mathrm{p}$ を $+1, \mathrm{n} を-1$ とした.

ここで，キーワードを重複して計数しないように，あらかじめニュース記事を形態素解析 ${ }^{10}$行ってわかち書きをした後，キーワードの計数を行っている。具体的には, ニュース記事 $i$ のスコアは以下の数式で表される。

$
\text { Score }_{i}=\frac{\sum_{k=1}^{n} T F_{w_{k}} \times W \text { eight }_{w_{k}}}{\sum_{k=1}^{n} T F_{w_{k}}}
$

ここで， Score $_{i}$ はニュース記事 $i$ のスコア， $T F_{w_{k}}$ は本研究のキーワードリストあるいは日本語評価極性辞書に定義されている $k$ 番目のキーワード $w_{k}$ がニュース記事内に出現した頻度, Weight $w_{w_{k}}$ はキーワード $w_{k}$ の極性度合いを表す実数值, $n$ は本研究のキーワードリストあるいは日本語評価極性辞書に定義されているキーワード数を表す.ここで, 本研究のキーワードリストあるいは日本語評価極性辞書に定義されたキーワードが存在しないニュース記事は，スコアが定義されないため分析からは除外した.

そして，各ニュース記事のスコアを上式によって算出した後, 次式によって年ごとにニュー ス記事のスコアを標準化した。

$
Z-\text { Score }_{i}=\frac{\text { Score }_{i}-\overline{\text { Score }}}{s_{\text {Score }}}
$

ここで, $\overline{\text { Score }}$ と $s_{\text {Score }}$ は年ごとのスコアの標本平均値と標本標準偏差を表す. そして，標準化されたスコア $Z$-Score $i_{i}$ をとに，ニュース記事を 5 分割する。具体的には，標準化されたニュース記事のスコアが，Z-Score $i_{i}>=2$ となるとき，とても良い内容が記述されているニュ

^{9}$ http://www.cl.ecei.tohoku.ac.jp/index.php?Open\%20Resources\%2FJapanese\%20Sentiment\%20Polarity\%20 Dictionary

10 形態素解析には, MeCab (http://taku910.github.io/mecab/) を用いた.システム辞書には IPA 辞書を用いた. また，ユーザ辞書として，ニュース記事の分類を行う際のキーワードリスト（本研究で作成したキーワードリストあるいは日本語評価極性辞書) を追加している。
}

以上の手順によって本研究手法から得られたキーワードリスト及び日本語評価極性辞書を用いて分類した日経 QUICKニュースとロイターニュースの各ニュース記事クラスのスコアの要約統計量に関して, 評価データ 3 年分をまとめたものを表 6 に示す.

表 6 各ニュース記事クラスのスコアの要約統計量

(a) 日経 QUICK ニュース（本研究のキーワードリスト）

(b) ロイターニュース（本研究のキーワードリスト）

(c) 日経 QUICK ニュース（日本語評価極性辞書）

(d) ロイターニュース（日本語評価極性辞書）

日本語評価極性辞書を用いて分類した場合, 日経QUICKニュース及びロイターニュースのどちらも, Very Positive に分類されたニュース記事は一つも存在しなかった. そのため, 日本語評価極性辞書によって分類したニュース記事クラスに関しては，以降の分析からは Very Positive は除外して進める。また，日本語評価極性辞書に定義されたキーワードを含まず，スコアが付与されなかったニュース記事数は, 日経 QUICK ニュースは 5,201 , ロイターニュースは 753 の事例が存在し, 相対的に本研究のキーワードリストよりも多いことが分かる.

## 4.2 分類検証における各種指標

ここでは次節以降の分類検証における各種指標の詳細な記述を行う，本研究では，キーワー ドリストによって分類されたニュース記事のクラスごとにニュース記事配信日の 10 営業日前から 10 営業日後までの株式リターンの推移を観察することで, 本研究のキーワードリストの有効性を検証する。具体的には，二種類の株式リターンに関する指標を考察する。一つ目は，各ニュース記事クラスの加工していない生の平均株式リターン $(\bar{R}$; Average Return) 及び累積平均株式リターン $(\overline{C R}$; Cumulative Average Return) である。 ある日 $t$ におけるニュース記事クラス $j$ の $\overline{R_{j}}[t]$ と $\overline{C R_{j}}\left[t_{1}, t_{2}\right]$ の算出方法は以下の通りである.

$
\begin{gathered}
\overline{R_{j}}[t]=\frac{1}{N} \sum_{i=1}^{N} R_{i}[t] \\
\overline{C R_{j}}\left[t_{1}, t_{2}\right]=\sum_{t=t_{1}}^{t_{2}} \overline{R_{j}}[t]
\end{gathered}
$

ここで， $N$ はニュース記事クラス $j$ に分類されたニュース記事数である. 二つ目は, 各ニュー ス記事クラスの平均異常リターン ( $\overline{A R}$; Average Abnormal Return) 及び累積平均異常リターン ( $\overline{C A R}$; Cumulative Average Abnormal Return) である. $\overline{A R}$ 及び $\overline{C A R}$ は，イベントスタディ分析によってマーケット全体の価格変動の影響のほかに, 小型株効果と割安株効果に関する共変動の影響を調整した株式リターンである。ニュース記事クラス $j$ の $\overline{A R_{j}}[t]$ と $\overline{C A R_{j}}\left[t_{1}, t_{2}\right]$ は, 3.2 節にて記述した手順によってニュース記事クラス $j$ に分類されたニュース記事 $i$ ごとに $A R_{i}[t]$ と $C A R_{i}\left[t_{1}, t_{2}\right]$ を算出した後，それぞれ平均値を算出することで求められる. 算出方法は, 以下の式によって算出される.

$
\begin{aligned}
\overline{A R_{j}}[t] & =\frac{1}{N} \sum_{i=1}^{N} A R_{i}[t] \\
\overline{C A R_{j}}\left[t_{1}, t_{2}\right] & =\frac{1}{N} \sum_{i=1}^{N} C A R_{i}\left[t_{1}, t_{2}\right]
\end{aligned}
$

イベント日はニュース記事配信日, 推定ウィンドウはニュース記事配信日の 140 営業日前か

ら 21 営業日前までの 120 営業日間, イベントウインドウはニュース記事配信日の 10 営業日前から 10 営業日後までの 21 営業日間とする.

## 4.3 ニュース記事配信日付近における株式リターン推移の検証結果

はじめに，ニュース記事配信日付近における $\bar{R}$ と $\overline{C R}$ を検証する。本研究手法によって作成されたキーワードリストによって分類した各ニュース記事クラスごとの $\overline{C R}$ の推移を考察する.本節では, ニュース記事配信日 10 営業日前から $t$ までの累積平均リターン $\overline{C R}[-10, t]$ を $\overline{C R}$ と表記する， $\overline{C R}$ の推移を図示したものが図 3 である。図 3 は, 縦軸がニュース記事配信日 10 営

$\square$ Very Positive - Positive $\triangle$ Neutral + Negative $*$ Very Negative

(a) 日経 QUICK ニュース

(b) ロイターニュース

図 3 本研究のキーワードリストを用いて分類した各ニュース記事クラスの $\overline{C R}$ の推移
業日前から $t$ 日までの累積平均株式リターン $\overline{C R}$, 横軸がイベント日からの日数 $t$ を表している.そして，(a)が日経 QUICK ニュースを，（b）はロイターニュースを分類した結果を図示し

が表 7 の表である。図と表について, どちらも単位は\%である.

図 3 から, 日経 QUICK ニュース及びロイターニュースに関して, どちらもニュース記事クラスごとに $\overline{C R}$ の動きが異なることが見て取れる。特に，ニュース記事配信日においてVery Positive は大きくプラスに, Very Negative は大きくマイナスになっている. Positiveと Negative は, Very Positive と Very Negative と比較して, 相対的に変動は小さいものの, プラスあるいはマイナスとなっている。そして, Neutral は, ニュース記事配信日に $\overline{C R}$ の変化はあまり見られないことが分かった。表 7 から数値を読み取ると, 日経 QUICKニュースの $\bar{R}[0]$ について, Very Positive は $3.21 \%$, Positive は $1.51 \%$, Neutral は $0.05 \%$, Negative は-1.03\%, Very Negative は $-1.94 \%$ とっていることから， $\bar{R}[0]$ の符号と大きさについて分類したクラスと整合的であり,前年の日経 QUICKニュースから作成したキーワードリストが翌年の日経 QUICKニュースの分類に対して，うまく機能していることを示している。 また，ロイターニュースの $\bar{R}[0]$ は, Very Positive は $4.72 \%$, Positive は $3.15 \%$, Neutral は $0.20 \%$, Negative は $-1.75 \%$, Very Negative は $-3.85 \%$ とっていることから, 同様に符号と大きさについて分類したクラスと整合的であり,前年の日経 QUICKニュースから作成したキーワードリストが翌年のロイターニュースの分類に対しても，うまく機能していることを示している.

そして, ニュース記事配信日から離れると, どのニュース記事クラスも $\overline{C R} の$ 変化は小さくなることが見て取れる。日経 QUICKニュースの $\bar{R}[-1]$ について, Very Positive は $0.49 \%$, Positive は $0.26 \%$, Neutral は $0.01 \%$, Negative は $-0.25 \%$, Very Negativeは $-0.29 \%$ であり, $\bar{R}[+1]$ について, Very Positiveは $0.25 \%$, Positive は $0.15 \%$, Neutral は $0.01 \%$, Negative は $-0.35 \%$, Very Negative は-0.52\%である. また, ロイターニュースの $\bar{R}[-1]$ について, Very Positive は $0.64 \%$, Positive は $0.32 \%$, Neutral は $-0.01 \%$, Negative は $-0.26 \%$, Very Negative は $-0.43 \%$ であり, $\bar{R}[+1]$ について, Very Positive は $0.15 \%$, Positive は $0.18 \%$, Neutral は $-0.17 \%$, Negative は $-0.49 \%$, Very Negative は $-0.84 \%$ である. これらの結果は, 符号と大きさは, 分類したクラスと整合的であることを示している. しかしながら, その水準は $\bar{R}[0]$ よりも小さいことが伺える.

さらに, ニュース記事配信日から 2 日以上離れると, $\bar{R}[t]$ の符号と大きさは, 分類したクラスと整合的でない様子が見て取れる。例えば，日経 QUICKニュースの $\bar{R}[-2]$ では Very Positive は 0.14\%, Positiveは $0.09 \%$, Neutral $0.03 \%$, Negativeは $-0.05 \%$, Very Negative は $-0.08 \%$ であり, $\bar{R}[+2]$ では, Very Positive は $-0.03 \%$, Positive は $-0.02 \%$, Neutral は $-0.02 \%$, Negative は $-0.09 \%$, Very Negativeは-0.17\%である. また, ロイターニュースの $\bar{R}[-2]$ では, Very Positive は $0.41 \%$, Positiveは $0.05 \%$, Neutral $-0.05 \%$, Negativeは $-0.28 \%$, Very Negative は $-0.22 \%$ であり, $\bar{R}[+2]$ では, Very Positiveは $-0.10 \%$, Positiveは $-0.08 \%$, Neutral は $-0.09 \%$, Negative

は $-0.30 \%$, Very Negative は-0.15\%である，他のイベントウィンドウにおいても，これらの傾向は同様であることから, 本研究のキーワードリストはニュース記事配信日及び前後 1 営業日の株式リターンに関する極性情報を持つキーワードリストとなっていることを示している.

続けて，日本語評価極性辞書によって分類した各ニュース記事クラスごとの $\overline{C R}$ の推移を同様に考察する. $\overline{C R}$ の推移を図示したものが図 4 である.

図 4 を見ると, 日経 QUICK ニュース及びロイターニュースの $\overline{C R}$ の動きは, 一部のニュー ス記事クラスではニュース記事配信日付近において変化が見られるものの, 図 3 と比較すると変化の水準は小さく，また，分類したニュース記事クラスの順序と $\overline{C R}$ の順序が整合的でない

(a) 日経 QUICK ニュース

(b) ロイターニュース

図 4 日本語評価極性辞書を用いて分類した各ニュース記事クラスの $\overline{C R}$ の推移
様子を見て取れる. 表 7 の数値を読み取ると, 日経 QUICK ニュースの $\bar{R}[0]$ について, Positive は $0.19 \%$, Neutral は $0.28 \%$, Negative は $-0.51 \%$, Very Negativeは $-0.59 \%$ となっており，分類したニュース記事クラスの順序と整合的でないことがわかる．ロイターニュースの $\bar{R}[0]$ についても, Positiveは $1.15 \%$, Neutral は $0.40 \%$, Negative は $-0.95 \%$, Very Negative は $-0.82 \%$ となっていることから, 同様の傾向が伺える。また, 変化の水準についても, 本研究のキーワー ドリストを用いて分類したニュース記事クラスと比較すると, 小さいことが分かる.

これらの傾向は, $\bar{R}[-1]$ や $\bar{R}[+1]$ でも同様であり, 本研究のキーワードリストの方が日本語評価極性辞書よりも，生の株式リターンに関して，うまく分類できていることを示している.次に, ニュース記事配信日付近における $\overline{A R}$ 及び $\overline{C A R}$ について検証する。 $\overline{A R}$ 及び $\overline{C A R}$ は, マーケット全体の価格変動の影響のほかに, 小型株効果と割安株効果についても共変動の影響を調整した株式リターンである。本節では, ニュース記事配信日 10 営業日前からの $t$ 日までの累積平均異常リターン $\overline{C A R}[-10, t]$ を $\overline{C A R}$ と表記する. $\overline{C A R}$ の推移を図示したものが図 5 であり， $\overline{A R}$ と $\overline{C A R}$ をとめたものが表 8 である.

図 5 を見ると, $\overline{C R}$ と同様に, ニュース記事クラスの $\overline{C A R}$ について, 符号と大きさが分類したクラスと整合的であることがわかる。ニュース記事配信日において Very Positive は大きくプラスに, Very Negative は大きくマイナスになっており, Positive と Negative は, Very Positive と Very Negative と比較して, 相対的に変動は小さいものの, プラスあるいはマイナスとなっている. そして, Neutral は変化はあまり見られない. 表 8 から数值を読み取ると, 日経 QUICKニュー スの $\bar{R}[0]$ は, Very Positive は $2.75 \%$, Positive は $1.19 \%$, Neutral は $0.04 \%$, Negative は $-0.79 \%$, Very Negative は $-1.53 \%$ とっており，また，ロイターニュースの $\bar{R}[0]$ は, Very Positive は $4.57 \%$, Positive は $2.91 \%$, Neutral は $0.25 \%$, Negativeは $-1.46 \%$, Very Negativeは $-3.50 \%$ となっている. $\bar{R}[-1] や \bar{R}[+1]$ の符号と大きさについても, 変化の水準は小さいものの, 分類したクラスと整合的であることが見て取れる。調整済みの株式リターンについても，前年の日経 QUICK ニュースから作成したキーワードリストを用いて翌年の日経 QUICKニュースとロイターニュースを分類できることを示している. $\overline{C A R}$ が $\overline{C R}$ と比較すると, 変化の水準が小さいのは，本研究のキーワードリストが個別銘柄に関して良いあるいは悪いかどうかだけでなく, マーケット全体に関する記述も拾っているためだと考えられる。そして，ニュース記事配信日から 2 営業日以上離れると, $\overline{A R}[t]$ の符号と大きさは分類したクラスと整合的でなく, 分類が困難であることが示されている。また, 日本語評価極性辞書によって分類した各ニュース記事クラスごとの $\overline{C A R}$ の推移を, 図示したものが図 6 である.

図 6 を見ると，同様に $\overline{C A R}$ の動きは，一部のニュース記事クラスではニュース記事配信日付近において変化が見られるものの, その変化の水準は図 3 と比較すると小さく, また, 分類したニュース記事クラスの順序と $\overline{C A R}$ の順序が整合的でない様子を見て取れる. 表 8 からもそれらの傾向が読み取ることが出来る。調整済みの株式リターンについても, 本研究のキーワー

(a) 日経 QUICK ニュース

(b) ロイターニュース

$
\begin{aligned}
& \square \text { Very Positive } \\
& - \text { Positive } \\
& \triangle \text { Neutral } \\
& + \text { Negative } \\
& * \text { Very Negative }
\end{aligned}
$

■ Very Positive

$\odot$ Positive

$\triangle$ Neutral

+ Negative

$*$ Very Negative

図 5 本研究のキーワードリストを用いて分類した各ニュース記事クラスの $\overline{C A R}$ の推移

ドリストの方が日本語評価極性辞書よりも，うまく分類できていることを示しており，本研究手法によって作成したキーワードリストが日本語評価極性辞書と比較して, 金融分野に特化した極性辞書となっていることを示している.

株式リターン推移の検証結果のまとめとして，本研究のキーワードリストを用いて分類したニュース記事は, ニュース記事配信日の株式リターンとの関連性が最も高く, 符号と大きさは,分類したクラスと整合的である。さらに，ニュース記事配信日 1 営業日前と 1 営業日後の株式リターンとの関連性も高いことが分かった。 とりわけ, 生の株式リターンだけでなく, 銘柄間の共変動を考慮した株式リターンとの関連性も見られることは，個別銘柄の変動を分類できて

(a) 日経 QUICK ニュース

(b) ロイターニュース

図 6 日本語評価極性辞書を用いて分類した各ニュース記事クラスの $\overline{C A R}$ の推移

いることを示している。これらの結果から，本研究手法で作成したキーワードリストがニュー ス記事の分類に対して有効である可能性を示している.

一方で, ニュース記事配信日から 2 営業日以上離れると, 分類したクラスと株式リターンの符号と大きさが整合的でないため, 困難であることが示された. すなわち, 本研究のキーワー ドリストはニュース記事配信日及び前後 1 営業日の株式リターンに関する極性情報を持つキー ワードリストとなっていることを示している。 また，各ニュース記事クラスは，ニュース記事配信日以前に既に株式価格が変動しており，その変動方向も分類したクラスと整合的であることから，マーケットに対して後追いのニュースが存在することが示唆され，同時に，ニュース
記事の内容を起因とし, マーケットが変動するような内容のニュース記事も存在していることが示唆される。 さらに，本研究手法によって作成したキーワードリストは，日本語評価極性辞書と比較して金融分野に特化した辞書となっていることが示された.

## 4.4 ニュース記事クラス間の株式リターンの多重比較検定結果

前節では，本研究のキーワードリストを用いて分類された各ニュース記事クラスが，ニュー ス記事配信日付近における絶対的な株式リターンがどのように推移するか観察することでキー ワードリストの有効性を検証した。ここでは最後に，ニュース記事クラス間の相対的な株式リターンの差を考察することで，キーワードリストの有効性の検証を行う．そのため，各ニュース記事クラス間の株式リターンの平均値の多重比較検定を行った。本節では株式リターンの平均値として，株式価格変動の銘柄間の共変動のノイズが相対的に少ない $\overline{A R}$ 及び $\overline{C A R}$ みを用いて検定を行った。多重比較検定には， Games-Howell 法を用いた (Games and Howell 1976)。ここでは, $\overline{A R}[0], \overline{A R}[-1], \overline{A R}[+1], \overline{C A R}[-10,-6], \overline{C A R}[-5,-2], \overline{C A R}[+2,+5], \overline{C A R}[+6,+10]$ の 7 つの指標の検定を行う，表 9 は, 日経 QUICK ニュース及びロイターニュースに対して本研究のキーワードリストを用いて分類した各ニュース記事クラス間の $\overline{A R}$ 及び $\overline{C A R}$ の平均値の

表 9 本研究のキーワードリストを用いて分類したニュース記事クラス間の多重比較検定

(a) 日経 QUICK ニュース

(b) ロイターニュース

差と有意水準をまとめたものである，有意水準は, Games-Howell 法を用いて算出した平均値の差の対する有意確率に基づいており，***，**，*はそれぞれ，両側確率で有意水準 $0.1 \%$, 有意水準 $1 \%$, 有意水準 $5 \%$ で差が有意であることを表している。本研究はサンプルサイズが大きく,統計検定における検出力が高いため有意確率に加え，平均值の差の大きさも含めて考察する.

日経 QUICKニュースの検定結果の表 9 を見ると， $\overline{A R}[0]$ では有意水準 $0.1 \%$, 全てのニュー ス記事クラス間の平均値に有意に差があり, 符合についてもプラスであることから, 全てのニュー ス記事クラス間の分類ができていることが伺える。 $\overline{A R}[-1]$ は, Negative - Very Negative では有意差が認められないものの, 他のニュース記事クラス間では平均値の差は $1 \%$ 以下ではあるが,有意に差があり, 符合についてもプラスである。 また, $\overline{A R}[+1]$ についても同様に, Negative Very Negative では有意差が認められないものの, 他は有意差があり, 符合もプラスである。これらの結果から，ニュース記事クラス間の $\overline{A R}$ に統計的な差があり, 分類可能であることが示された。特に，ニュース記事配信日だけでなく，配信日前後の $\overline{A R}$ では分類できていることは,注目すべき点である。

一方で, $\overline{C A R}[-10,-6] や \overline{C A R}[+6,+10]$ では, 分類が困難であることが分かる. $\overline{C A R}[-10,-6]$ では，一部のニュース記事クラス間で $\overline{C A R}$ の平均値が有意に差があるものの，その大きさは $\overline{A R}[0], \overline{A R}[-1], \overline{A R}[+1]$ と比較すると小さく, 相対的に有効でないことが分かる。また, $\overline{C A R}[+6,+10]$ は，すべて有意な値を取っておらず，符号もマイナスであることから，有効でないことが示されている. さらに, $\overline{C A R}[-5,-2]$ や $\overline{C A R}[+2,+5]$ についても, 有意な值を取らないニュース記事クラス間が多く, 有意であったとしても差の符号がマイナスであることから, 分類したクラスとは逆である。これらの結果から，本研究手法により作成したキーワードリストは，ニュース記事配信日付近において有効であることが見て取れる。

ロイターニュースの検定結果の表 9 を見ると, 日経 QUICK ニュースの検定結果と同様に, $\overline{A R}[0]$ では有意水準 $0.1 \%$ で, 全てのニュース記事クラス間の平均値に有意に差があり，符合についてもプラスであることから，全てのニュース記事クラス間の分類ができていることが伺える. しかしながら, $\overline{A R}[+1]$ や $\overline{A R}[-1]$ では, 日経 QUICK ニュースでは有意差があったものの, ロイターニュースでは, 有意差が認められないクラス間があった. とりわけ, $\overline{A R}[+1]$ では顕著に異なる結果となった. $\overline{C A R}[-10,-6]$ や $\overline{C A R}[+6,+10]$ では, 同様に, ニュース記事クラス間では有意差が認められず，分類が困難であることを示している。具体的には， $\overline{C A R}[-10,-6]$ では一つのクラス間でのみ有意差が認められるだけであり， $\overline{C A R}[+6,+10]$ では有意な値を取っているニュース記事クラス間はあるものの, 符号がマイナスであるものは, 分類したクラスとは逆であり，これらは分類できているわけではない。 さらに， $\overline{C A R}[+2,+5]$ も Very Positive Negative 以外のクラス間では有意な値は取っていないため，分類が困難であることが示された.一方で， $\overline{C A R}[-5,-2]$ において Very Positive は，他のクラスとの間に有意差を取っている. さらに，表 10 は，日本語評価極性辞書によって分類した各ニュース記事クラス間の $\overline{A R}$ 及び
表 10 本研究のキーワードリストを用いて分類したニュース記事クラス間の多重比較検定

(a) 日経 QUICK ニュース

(b) ロイターニュース

$\overline{C A R}$ の平均値の差について，検定結果をまとめたものである.

日経 QUICKニュースの検定結果である表 10 を見ると， $\overline{A R}[0]$ では六つのニュース記事クラス間のうち 4 つでは有意差が見られることから，一部のクラス間では分類できていることを示している. しかしながら, Positive - Neutral では符号が逆であり, Negative - Very Negative では有意な値を取っていない。そのため, 日本語評価極性辞書ではニュース記事配信日の株式リターンという観点では，日経 QUICKニュースの分類が困難であることが示されている．有意な値を取っているニュース記事クラス間についても, 差の大きさは本研究のキーワードリストによって分類したニュース記事クラス間と比較すると小さく, 本研究のキーワードリストの方がよく分類できていることを示している. $\overline{A R}[-1]$ や $\overline{A R}[+1]$ についても一部のクラス間では有意差が見られるが，本研究のキーワードリストによって分類したニュース記事クラス間と比較すると, 平均値の差の大きさは小さい.

また， $\overline{C A R}[+2,+5]$ や $\overline{C A R}[+6,+10]$ では有意差が見られず，ニュース記事配信日から離れると同様に分類が難しいことが見て取れる. $\overline{C A R}[-10,-6]$ や $\overline{C A R}[-5,-2]$ では一部にクラス間に有意差が見られることから，日本語評価極性辞書は過去の状況を表したキーワードが多い可能性がある.

ロイターニュースの検定結果である表 10 を見ると， $\overline{A R}[0]$ では Negative - Very Negative 以外で有意差があり, 分類できている可能性はあるものの, 表 9 と比べると平均值の差は小さいため，ロイターニュースについても同様に本研究手法のキーワードリストの方が日本評価極性辞書よりもうまく分類できていることを示している。そして，ニュース記事配信日から離れる

と分類が困難である様子は同様である.

多重比較検定結果のまとめとして, 本研究のキーワードリストを用いて分類された各ニュー ス記事クラス間の相対的な株式リターンの差はニュース記事配信日において顕著に観察された。 そして，日経 QUICKニュースでは，ニュース記事配信日前営業日と翌営業日でにおいても，差の大きさ自体は小さいが統計的な差があり, キーワードリストの有効性が認められた. しかしながら，ロイターニュースではニュース記事配信日の株式リターンは，統計的な差があるものの, 他の営業日では必ずしも統計的な差が認められず，日経 QUICKニュースとは異なる結果となった。そのため, 本研究手法で作成したキーワードリストを他のメディアに適用するためのより適切な方法は今後の課題である。そして, ニュース記事配信日から離れると統計的な差は認められず，本研究のキーワードリストはニュース記事配信日及び前後 1 営業日の株式リター ンに関する極性情報を持つキーワードリストとなっていることを示している。 さらに，本研究手法によって作成したキーワードリストは，金融分野に特化した辞書となっていることが示された。

## 5 極性辞書の自動生成に関する先行研究

日本語極性辞書の自動作成を試みた先行研究として, 小林, 乾, 乾 (2001), 乾, 乾, 松本 (2004),小林, 乾, 松本, 立石, 福島 (2005), Kanayama and Nasukawa (2006), Kaji and Kitsuregawa (2007), 鳥倉, 小町, 松本 (2012) などがある. これら先行研究のアプローチは, 半教師あり学習に分類される (Pang and Lee 2008; Liu 2012). 半教師あり学習には，最初に少量ではあるが教師データが必要となる. 教師データは人手で用意するか, あるいは General Inquirer のような既に人手でラベル付けされた辞書を用意する必要がある。とりわけ，金融分野に特化した極性辞書を作成する場合, 専門家によるラベル付けが必要となる。これら半教師あり学習によるアプローチに対して, 本研究では,（機関）投資家向けのニュースデータという特性に注目し,外部のデータベース（株式価格データ）から極性情報を獲得することで，人手による極性判断を介さずに金融分野に特化した極性辞書の作成を行った点が特長である.

## 6 おわりに

本研究では，ファイナンス分野及び会計分野の研究に用いるための金融分野に特化した極性辞書の作成を目的とし，ニュースデータと株式価格データからキーワードリストの作成を行った. 本研究の主な貢献は，1）イベントスタディ分析の枠組みによって，各銘柄と各時期の共変動リスクを調整した株式価格変動をもとにキーワードリストを作成したこと，2）金融市場の価格形成と関連性の高いメディアを用いることで，ニュース記事配信日の調整や個別銘柄への紐
付けなど精緻に行ったこと。加えて，3) 本研究手法によって作成したキーワードリストを用いて，作成に用いたメディアのニュース記事分類と他メディアのニュース記事分類を行い，一般的な極性辞書による分類との比較を通じて，本研究手法の有効性を検証したこと，の三点である。そして検証の結果，キーワードリストを用いることで，ニュース記事配信日の株式リター ンに関して，将来のニュース記事を分類できること，加えて，異なるメディアのニュース記事も分類できることを示した。また，経済・金融分野に特化していない一般的な極性辞書よりもうまく分類できていることから，金融分野に特化した辞書になっていることが示された。一方で，キーワードリストはニュース記事配信日から 2 営業日以上離れると，ニュース記事分類が困難であることが示された。

本研究手法によって作成されたキーワードリストを用いることで，経済ニュースや有価証券報告書，アナリストレポート，インターネットへの投稿内容などのテキスト情報を用いた資産価格分析を可能にし，これまで数值情報だけでは計測が困難であった情報と資産価格との関連性の解明できる可能性がある。本研究の手法は, これまで一回でも出現したキーワードに対して対応することは可能であるが，完全な新単語に対応できるわけではないため，手法の改善は今後の課題である。より長期間のデータを用いた実験やニュースデータ以外のメディアへの応用などについても，今後の課題である.

## 謝 辞

本稿の作成にあたり，株式会社日本経済新聞社，株式会社 QUICK，株式会社金融工学研究所から研究支援を受けた。記して感謝したい.

## 参考文献

Bishop, C. M. (2006). Pattern Recognition and Machine Learning. Springer.

Campbell, J. Y., Lo, A. W., and MacKinlay, A. C. (1997). The Econometrics of Financial Markets. Princeton University Press.

張へい, 松原茂樹 (2008). 株価データに基づく新聞記事の評価. 第 22 回人工知能学会全国大会論文集, pp. 1-3.

Fama, E. F. and French, K. R. (1993). "Common Risk Factors in the Returns on Stock and Bonds." Journal of Financial Economics, 33 (1), pp. 3-56.

Games, P. A. and Howell, J. F. (1976). "Pairwise Multiple Comparison Procedures With Unequal N's and/or Variances: A Monte Carlo Study." Journal of Educational Statistics, 1 (2), pp. 113-125.

Henry, A. (2008). "Are Investors Influenced by How Earnings Press Releases Are Written?" Journal of Business Communication, 45 (4), pp. 363-407.

東山昌彦, 乾健太郎, 松本裕治 (2008). 述語の選択選好性に着目した名詞評価極性の獲得. 言語処理学会第 14 回年次大会論文集, pp. 584-587.

廣川敬真, 吉田稔, 山田剛一, 増田英孝, 中川裕志 (2010). 業種別による新聞記事と株価動向の関係の解析. 言語処理学会第 16 回年次大会発表論文集, pp. 1070-1073.

乾孝司, 乾健太郎, 松本裕治 (2004). 出来事の望ましさ判定を目的とした語彙知識獲得. 言語処理学会第 10 回年次大会論文集, pp. 91-94.

Kaji, N. and Kitsuregawa, M. (2007). "Building Lexicon for Sentiment Analysis from Massive Collection of HTML Documents." In Proceedings of the 2007 Joint Conference on Empirical Methods in Natural Language Processing and Computational Natural Language Learning, pp. 1075-1083.

Kanayama, H. and Nasukawa, T. (2006). "Fully Automatic Lexicon Expansion for Domainoriented Sentiment Analysis." In Proceedings of the 2006 Conference on Empirical Methods in Natural Language Processing, pp. 355-363.

Kearney, C. and Liu, S. (2014). "Textual Sentiment in Finance: A Survey of Methods and Models." International Review of Financial Analysis, 33, pp. 171-185.

小林のぞみ, 乾孝司, 乾健太郎 (2001). 語釈文を利用した「 $\mathrm{p} / \mathrm{n}$ 辞書」の作成. 言語・音声理解と対話処理研究会, 33, pp. 45-50.

小林のぞみ, 乾健太郎, 松本裕治, 立石健二, 福島俊一 (2005). 意見抽出のための評価表現の収集. 自然言語処理, 12 (3), pp. 203-222.

久保田敬一, 竹原均 (2007). Fama-French ファクターモデルの有効性の再検証. 現代ファイナンス, 22, pp. 3-23.

Liu, B. (2012). Sentiment Analysis and Opinion Mining. Morgan \& Claypool Publishers.

Loughran, T. and McDonald, B. (2011). "When Is a Liability Not a Liability? Textual Analysis, Dictionaries, and 10-Ks." Journal of Finance, 66 (1), pp. 35-65.

Loughran, T. and McDonald, B. (2016). "Textual Analysis in Accounting and Finance: A Survey." Journal of Accounting Research, 54 (4), pp. 1187-1230.

小川知也, 渡部勇 (2001). 株価データと新聞記事からのマイニング. 情報処理学会研究報告情報学基礎（FI）, 2001 (20), pp. 137-144.

Pang, B. and Lee, L. (2008). "Opinion Mining and Sentiment Analysis." Foundations and Trends in Information Retrieval, 2 (1-2), pp. 1-135.

鳥倉広大，小町守，松本裕治 (2012). Twitter を利用した評価極性辞書の自動拡張. 言語処理学会第 18 回年次大会論文集, pp. 551-554.

## 略歴

五島圭一：2012 年慶應義塾大学経済学部卒業. 2014 年同大学院経営管理研究科修士課程修了. 2017 年東京工業大学大学院総合理工学研究科知能システム科学専攻博士後期課程修了. 博士 (工学). 現在は, 日本銀行金融研究所にてファイナンス研究に従事.

高橋大志：1994 年東京大学工学部卒業. 富士写真フイルム（現・富士フイルム) 研究員. 三井信託銀行（現・三井住友信託銀行）シニアリサーチャー.筑波大学大学院経営 - 政策科学研究科修士課程修了. 同大学院博士課程修了.博士 (経営学). 岡山大学准教授, キール大学客員研究員, 慶應義塾大学准教授を経て, 2014 年より, 慶應義塾大学大学院経営管理研究科・慶應義塾大学ビジネススクール教授、日本ファイナンス学会, SICE, 人工知能学会等各会員. 経営情報学会誌編集委員.