# 医療用語資源の語彙拡張と診療情報抽出への応用

東山 翔平 $\dagger, \dagger \dagger$ ・関 和広 $\dagger^{\dagger}$ ・上原 邦昭 $\dagger$
}

近年, 医療文書の電子化が進み, 大規模化する医療データから有用な情報を抽出・活用する技術が重要となっている．特に，診療記録中の症状名や診断名などの用語 を自動抽出する技術は, 症例検索などを実現する上で必要不可欠である。機械学習 に基づく用語抽出では, 辞書などの語彙資源の利用が訓練デー夕に含まれない用語 の認識に有効である。しかし, 診療記録では多様な構成語彙の組合せからなる複合語が使用されるため, 単純なマッチングに基づく辞書の利用では検出できない用語 が存在し, 語彙資源利用の効果は限定的となる。そこで，本稿では，語彙資源を有効活用した用語抽出を提案する。資源活用の 1 点目として, 資源中の用語に対して 語彙制限を行うことで，用語抽出に真に有用な語彙の獲得を行う． 2 点目として，資源から複合語の構成語彙である修飾語を獲得し, 元の語彙に加えて獲得した修飾語 を活用することで，テキスト中のより多くの用語を検出する拡張マッチングを行う．検出された用語の情報は機械学習の素性として用いる. NTCIR-10 MedNLP テスト コレクションを用いた抽出実験の結果，単純な語彙資源の利用時と比較して適合率 および再現率の向上を実現し, 本手法の有効性を確認した。また, 肯定・否定など のモダリティ属性の分類を含めた抽出では, 従来手法に対して, 本手法が最も高い 精度を実現した。

キーワード：医療言語処理, 用語抽出, NTCIR-10 MedNLP タスク
## Vocabulary Expansion of Medical Language Resources for Medical Information Extraction

\author{
Shohei Higashiyama ${ }^{\dagger, \dagger \dagger}$, Kazuhiro Seki ${ }^{\dagger \dagger}$ and Kuniaki Uehara ${ }^{\dagger}$
}

With the increasing number of medical documents written in an electronic format, automatic term extraction technologies from unstructured texts have become increasingly important. Particularly, the extraction of medical terms such as complaints and diagnoses from medical records is crucial because they serve as the basis for more application-oriented tasks, including medical case retrieval. For machine-learningbased term extraction, language resources such as lexica and corpora are effective for recognizing expressions that rarely or do not occur in training data. However, the use of lexica by simple word-matching approaches has limited effects because there are compound words that comprise various combinations of constituent terms in medical records. Therefore, this study presents term extraction systems that can exploit language resources by the acquisition and utilization of beneficial terms and

constituents from the resources. Our experimental results on the NTCIR-10 MedNLP test collection, which comprises medical history summaries, show increased precision and recall, indicating the effectiveness of the proposed system. Moreover, compared to existing systems developed for the NTCIR-10 MedNLP task, the proposed system achieved optimum performance for complaint and diagnosis recognition, including the classification of extracted terms into modality attributes.

Key Words: Medical NLP, Term extraction, NTCIR-10 MedNLP task

## 1 はじめに

近年, 電子カルテに代表されるように, 医療文書が電子的に保存されることが増加し, 構造化されていないテキスト形式の医療情報が増大している。大規模な医療データには有用な情報が含まれ，新たな医学的知識の発見や, 類似症例の検索など, 医療従事者の意思決定や診療行為を支援するアプリケーションの実現が期待されている。これらの実現のためには，大量のテキストを自動的に解析する自然言語処理技術の活用が欠かせない. 特に，テキスト中の重要な語句や表現を自動的に認識する技術は, 固有表現抽出や用語抽出と呼ばれ, 情報検索や質問応答, 自動要約など, 自然言語処理の様々なタスクに応用する上で必要不可欠な基盤技術である.

用語抽出を実現する方法として，人手で作成した抽出ルールを用いる方法と，機械学習を用いる方法がある，前者の方法では，新しく出現した用語に対応するために随時ルールの修正や追加を行わなければならず，多大な人的コストがかかる。そのため, 近年では, データの性質を自動的に学習することが可能な機械学習が用いられることが多くなっている.

機械学習に基づく用語抽出では, 抽出すべき語句の情報がアノテーションされた訓練データを用いてモデルの学習を行い，学習したモデルを未知のデータに適用することで，新しいデー 夕から用語の抽出を行う，高精度な抽出を可能とするモデルを学習するには，十分な量の訓練データがあることが望ましい，しかし，診療記録などの医療文書は，医師や患者の個人情報を含むため, 医療機関の外部の人間が入手することは困難である。幸い, 近年は, 研究コミュニティでのデータ共有などを目的とした評価型ワークショップが開催されており (Uzuner, South, Shen, and DuVall 2011; Morita, Kano, Ohkuma, Miyabe, and Aramaki 2013), 匿名化などの処理が施された医療文書データが提供され，小規模なデータは入手可能になっている．とはいえ，依然として，学習に利用できる訓練データの量は限られることが多い.

他方，一般に公開されている医療用語辞書などの語彙資源は豊富にあり，英語の語彙資源では, 生物医学や衛生分野の用語集, シソーラスなどを含む UMLS (Unified Medical Language System $)^{1}$, 日本語の語彙資源では, 広範な生命科学分野の領域の専門用語などからなるライフ
^{1}$ http://www.nlm.nih.gov/research/umls/
}

サイエンス辞書 ${ }^{2}$, 病名, 臨床検査, 看護用語などカテゴリごとの専門用語集を含む MEDIS 標準マスター 3 などが提供されている。辞書などの語彙資源を利用した素性（辞書素性）は，訓練データに少数回しか出現しない用語や，まったく出現しない未知の用語を認識する際の手がかりとして有用であるため, 訓練データの量が少ない場合でも，こうした語彙資源を有効活用することで高精度な抽出を実現できる可能性がある。しかし, 既存の医療用語抽出研究に見られる辞書素性は，テキスト中の語句に対して辞書中の用語と単純にマッチングを行うものに留まっている (Imaichi, Yanase, and Niwa 2013; Laquerre and Malon 2013; Miura, Ohkuma, Masuichi, Shinohara, Aramaki, and Ohe 2013). 診療記録では多様な構成語彙の組合せからなる複合語が使用されるため，単純な検索ではマッチしない用語が存在し，辞書利用の効果は限定的であるといえる。

本研究では，類似症例検索などを実現する上で重要となる症状名や診断名（症状・診断名）を対象とした用語抽出を行う，その際，語彙資源から症状・診断名の構成要素となる語彙を獲得し, 元のコーパスに併せて獲得した語彙を用いることで，より多くの用語にマッチした辞書素性を生成する。そして，生成した辞書素性を機械学習に組み込むことで，語彙資源を有効活用した抽出手法を実現する。また，提案手法の有効性を検証するために，病歴要約からなる NTCIR-10 MedNLP タスク (Morita et al. 2013)のテストコレクションを用いて評価実験を行う.

本稿の構成は以下の通りである。まず，2 章で医療用語を対象とした用語抽出の関連研究について述べ, 3 章で本研究のベースとなる機械学習アルゴリズム linear-chain CRF に基づくシステムを説明する．4 章では, 語彙資源から症状・診断名の構成語彙を獲得する方法と, 獲得した語彙を活用した症状・診断名抽出手法を説明する．5 章で MedNLP テストコレクションを用いた評価実験について述べ，最後に，6章で本稿のまとめを述べる.

## 2 関連研究

テキスト中の特定の語句や表現を抽出する処理を固有表現抽出や用語抽出という。固有表現は，主に人名・地名・組織名などの固有名詞や時間・年齢などの数値表現を指し，固有表現抽出では，これらの固有表現を抽出の対象とすることが多い。一方，用語抽出では特定の分野の専門用語などを対象とする。しかし，対象とする語句を抽出するというタスク自体に違いはないため, 本稿では, 特に両者を区別せず，抽出対象として指定される語句を固有表現と呼ぶ.

## 2.1 医療用語抽出研究

日本語の医療文書を対象に医療用語の抽出や探索を行った研究として, (井上, 永井, 中村,

野村, 大貝 2001 ; 木浪, 池田, 村田, 高山, 武田 2008; 上杉 2007) がある. 井上ら (井上他 2001) は，文章の記述形式に定型性のある医療論文抄録を対象に，パターンマッチングに基づく方法を用いて, 病名（「論文が取り扱っている主病名」）や診療対象症例（「診断，治療の対象とした患者, 症例」）などの事実情報を抽出した，たとえば，病名は「〜症」「〜炎」「〜腫」などの接尾辞の字種的特徴を手がかりに用い, 診療対象症例に対しては, 「対象は〜」「〜を対象とし」のような対象症例と共起しやすい文字列を手がかりに用いて抽出している. なお, 井上らの報告によると, 論文抄録中に含まれる病名や診療対象症例の出現回数は平均 1 回強である. アノテー ションを行った医療論文抄録を用いた抽出実験では，病名や診療対象症例に関して， $90 \%$ 前後の適合率, $80 \%$ から $100 \%$ 近い再現率という高い精度を得ている. しかし, 本稿で対象とする病歴要約では論文抄録と出現の傾向が異なり, 同一文書中に様々な病名が出現することが多いため，井上らのパターンマッチングに基づく手法では抽出精度に限界があると考えられる．

木浪ら (木浪他 2008) は, 専門用語による研究情報検索への応用を目的として, 再現率の向上を優先した看護学用語の抽出手法を提案した. 抽出対象とされた専門用語は, 解剖学用語 (「血小板」,「破骨細胞」など）や看護行為（「止血」,「酸素吸入」など）を含み, 本稿で対象とする症状・診断名よりも広い領域の用語である。特定の品詞を持つ語が連続した場合にそれらの語を連接して抽出するなど, 連接ルールに基づくシステムにより専門用語を抽出した. システムによる抽出を行うフェーズと, 抽出されなかった用語や誤って抽出された用語を人手で分析してルールの修正・追加を行うフェーズを繰り返し, 再現率が向上し, 再現率が低下しない範囲で適合率が向上するようなルール集合を導出している，実験では，専門家によるアノテーションを行った看護学文献を用いて評価し, 再現率約 $80 \%$ という抽出結果を得ている. この手法では, 適用する専門用語の領域が異なる場合, 再び導出手順を踏んでルールを導出し直す必要がある. しかし, 抽出ルール修正の過程が人手による判断に依存しており, 再度ルールを導出する際の人的コストが大きい。また, 適合率が約 $40 \%$ と低く, 適合率を改善するにはルール導出の基準自体も修正する必要が生じる.

上杉 (上杉 2007) は, 医療用語抽出の前処理として, 医療辞書なしで医療コーパス中の用語間の分割位置を探索する研究を行った. 文字列 X, Yの出現確率に対し，XYが同時に出現する確率が十分に低ければ $\mathrm{X} ， \mathrm{Y}$ 間を分割できるとの考えに基づき，コーパスから求めた文字列の出現確率と相互情報量を使用して分割位置を決定している。症例報告論文を用いた実験では，約 740 語に対して $60 \%$ の分割精度4であり, 分割に成功した事例の中には, 複合語が 1 語と認識される場合と複合語の内部でさらに分割される場合がほぼ同等の割合で存在した. 残りの $40 \%$ には, 助詞が付加される, 英字やカタカナ列の途中で分割されるなどの誤りがあるため, 自然言語

文に対する分割精度として十分であるとはいえない。なお，医療用語抽出に応用するには，分割された各単語が医療用語か否かを判定する基準が別途必要となる.

## 2.2 医療言語処理ワークショップと NTCIR-10 MedNLP

近年, 医療文書を対象とした共通タスクを設定し, 研究コミュニティでのデータ共有や, デー 夕処理技術の向上を目的とする参加型ワークショップが開催されている．英語の医療文書を処理の対象としたタスクとしては， 2011 年および 2012 年に NIST が主催する TREC において Medical Records track が設定され，2006 年および 2008 年から 2012 年に渡ってi2b2 NLP チャレンジが開催された. i2b2 NLP チャレンジでは, 診療記録からの情報抽出技術の評価を目的とした共通タスクが実施され, 匿名化のための個人情報 (Uzuner, Luo, and Szolovits 2007), 患者の喫煙状態 (Uzuner, Goldstein, Luo, and Kohane 2008), 医薬品の使用状況 (Uzuner, Solti, and Cadag 2010) や医療上のコンセプト (Uzuner et al. 2011)の抽出が行われた. また, 日本語の医療文書を使用したタスクとして，2013 年には NII が主催する NTCIR において MedNLP タスク (Morita et al. 2013) が設定され, 患者の個人情報や診療情報を対象に情報抽出技術の評価が行われた。

NTCIR-10 MedNLP タスクでは, 医師により書かれた架空の患者の病歴要約からなる日本語のデータセット（MedNLPテストコレクション）が使用された。データから患者の年齢, 日時などの個人情報を抽出する「匿名化タスク」と, 患者の症状や医師の診断などの診療情報（症状・診断名）を抽出する「症状と診断タスク」などが設定された。，症状・診断名には，症状の罹患の肯定, 否定などを表すモダリティ属性が定義されており，モダリティ属性の分類もタスクの一部となっている。なお, 両方のタスクとも, それぞれ個人情報, 診療情報を固有表現とした固有表現抽出とみなせる，夕スク参加者のシステムは，ルールに基づく手法よりも機械学習に基づく手法が多く, 特に, 学習アルゴリズムとして CRF (Conditional Random Fields) (Lafferty, McCallum, and Pereira 2001) の代表的なモデルである linear-chain CRF を用いたシステムが高い性能を発揮した。また, 成績上位のシステムでは, 文中の各単語が辞書中の語とマッチしたか否を表す情報（辞書素性）が共通して用いられており，語彙資源の利用が精度向上に寄与したことがわかる。一方, 匿名化タスクではルールに基づく手法も有効であり, 最高性能を達成したのはルールベースのシステムであった.

Miura ら (Miura et al. 2013) は，固有表現抽出タスクを文字単位の系列ラベリング5として定式化して linear-chain CRF を適用し, 症状と診断タスクで最も高い精度を達成した. 固有表現の抽出を行った後, 抽出した固有表現のモダリティ属性を決定するという 2 段階の方法を使用


している。 MEDIS 標準マスターおよび ICH 国際医薬用語集 6 を語彙資源に用いて辞書素性を与えている.

Laquerre ら (Laquerre and Malon 2013), Imaichi ら (Imaichi et al. 2013) は, ともに単語単位の系列ラベリングとして linear-chain CRF を適用し, 症状と診断タスクでそれぞれ 2 番目, 3 番目の精度を達成している. Laquerre らは，ライフサイエンス辞書と UMLS Metathesaurus を利用し, 辞書素性を導入している。また, 事前知識に基づくヒユーリスティック素性として,「ない」「疑い」などモダリティ属性判別の手がかりとなる表現を素性としている. Imaichi らは, Wikipedia から収集した病名, 器官名などの用語集に基づく辞書素性を導入している.

## 3 Linear-chain CRF に基づく症状・診断名抽出システム

本章では, 症状・診断名の抽出のためにベースとするシステムを説明する. 本研究では, 用語抽出の処理を症状・診断名からなる固有表現を抽出する夕スクとみなし, 系列ラベリングとして定式化する。また, 固有表現の抽出は, 機械学習アルゴリズム linear-chain CRF を用いて行う (以降, 本研究で用いた linear-chain CRF を指す場合, 単に CRF と呼ぶ). さらに, CRFで抽出を行った出力に, 人手で作成したルールを用いて抽出誤り訂正の後処理を行うことで，より誤りの少ない抽出を実現する。

## 3.1 MedNLP「症状と診断タスク」の定義

NTCIR-10 MedNLP (Medical Natural Language Processing) タスク (Morita et al. 2013)は,医療分野における情報抽出技術の評価を目的として実施されたタスクである．診療記録から症状・診断名を抽出する「症状と診断タスク」を含む 3 つのサブタスクが定義された。本研究では，MedNLP タスクで使用されたデータセット（MedNLP テストコレクション）を使用し, 症状と診断タスクと同様の設定で症状・診断名の抽出を行う. 以下, MedNLP テストコレクションおよび症状と診断タスクについてそれぞれ説明する.

## MedNLP テストコレクション

MedNLP テストコレクションは, 医師により書かれた架空の患者の病歴要約 50 文書からなるデータセットであり， 2 対 1 の比率で訓練データとテストデータに分割されている。同テストコレクションには，患者の個人情報および診療情報がアノテーションされている，個人情報は患者の名前, 年齢, 性別と, 日時, 地名, 医療機関名からなり, 診療情報は患者の症状や医師の診断（症状・診断名）を指す。このうち, 症状と診断タスクで対象とされたのは後者の診

療情報である.

症状・診断名には，医師の認識の程度などを表すモダリティ属性が定義されており，それぞれ症状の罹患の肯定, 否定, 推量（可能性の存在）を表す positive, negation, suspicion に加え,症状が患者の家族の病歴として記述されていることを表す familyの 4 種類からなる.

suspicion, family である症状・診断名であるとして, 各モダリティ属性が付与された症状・診断名の例を示す.

(a) $\lceil<\mathrm{n}>$ 糖尿病 $</ \mathrm{n}>$ は認めず」

(b) $\lceil<n>$ 関節症状</n>は改善した」

(c) $\lceil<s>$ 神経疾患 $</ s>0$ 疑いにて」

(d) 「<s>味覚異常</s>の可能性を考え」

(e) 「<n>胆囊炎</n>を疑わせる所見を認めず」

(f) 「母親； $<\mathrm{f}>$ 気管支喘息</f>」

(g) 「父 : $\langle f>$ 狭心症 $</ f>$ 、<f>心筋梗塞</f>」

(h) 「娘 3 人は鼻粘膜の<f>易出血性</f>があり」

negation, suspicion 属性については, (a)～(d) に示すように, 症状・診断名の係り先の文節が特定の表現を含む場合に，その表現に対応するモダリティ属性となることが多い．ただし，(e)のように，直接の係り先が suspicion を示す表現を含んでいても，後方に否定表現が現れることにより negationとなることがある. family 属性の症状・診断名は， (f), (g)のように，続柄名の後に症状・診断名を列挙する形で記述された場合が該当する他, (h)のように, 文全体の主語が続柄である場合も該当する。なお, positive 属性は, negation, suspicionおよび familyであることを示す表現と共起しない症状・診断名に対して付与される属性とみなせる。

表 1 に，訓練データにおける各モダリティ属性の出現回数（“\#”の列）を示す. 出現回数はモダリティ属性の種類により偏りがあり, positive が 7 割程度を占めているのに対し, suspicion, familyは非常に少数となっている.

表 1 訓練データにおけるモダリティ属性の分布

## 症状と診断タスク

症状と診断タスクは, テストコレクションから, 患者に関連する症状・診断名 7 を抽出し, モダリティ属性を決定するタスクとして定義された。評価は，訓練データを用いて開発されたシステムに対して, テストデータでの抽出性能を測ることで行われ, 評価尺度として, $F$ 值 $(\beta=1)$ が使用された。 $F$ 値は, 適合率 (Precision) と再現率 (Recall) の調和平均であり, 次式で定義される。

$
\frac{2 \cdot \text { Presicion } \cdot \text { Recall }}{\text { Precision }+ \text { Recall }}
$

また，評価方法として， モダリティ属性の分類を考慮する評価と，考慮しない評価の 2 通りの方法で評価が行われた. 前者の方法では, 抽出された固有表現が正しい属性に分類されないと正解とならないのに対して, 後者の方法は, 属性が誤っていても, 抽出された固有表現の範囲がアノテーションされた正解情報と一致していれば正解とみなされる.

## 3.2 固有表現抽出タスクの定式化

本研究では, 各モダリティ属性が付与された症状・診断名を異なるカテゴリの固有表現とみなして固有表現抽出を行うことで, 症状・診断名の抽出範囲およびモダリティ属性の決定を行う.固有表現抽出は, 入力文中の固有表現部分を同定する夕スクであり, 系列ラベリングとして定式化されることが多い. 系列ラベリングとは, 入力系列に対してラベルの系列を出力する問題である．固有表現抽出では，トークンの系列である文を入力として，トークンごとに固有表現の種類等を表すラベルを推定し，それらラベルの列を出力する．本研究では，形態素をトークンとする系列ラベリングとして固有表現抽出の定式化を行う.

定式化の際には, 同一の固有表現（チャンク）中の位置を表すためのチャンキング方式として, IOB2 フォーマット (Sang and Veenstra 1999)を使用した. IOB2では, タグはB (Begin), I (Inside), O (Outside)の 3 種類があり, それぞれチャンクの先頭, チャンクの先頭を除く内部, チャンクの外側を表す。なお, 複数のカテゴリの固有表現が存在する場合, B, I はカテゴリ名と併せて使用される。たとえば，「嘔吐／B-c_pos 出現／I-c_pos した／O」のようにラべルを付与することで,「嘔吐出現」が c_pos（肯定のモダリティ属性を持つ症状・診断名）というカテゴリの固有表現であることを表す。なお, 入力文の形態素解析には, linear-chain CRF に基づく日本語形態素解析器である MeCab (Kudo, Yamamoto, and Matsumoto 2004) (Ver. 0.996) およびIPADIC (Ver. 2.7.0)を用いた.


## $3.3 \mathrm{CRF$ による分類}

本システムでは，機械学習アルゴリズムとして linear-chain CRF を用いた. linear-chain CRF は，分類アルゴリズムである最大エントロピー法を出力が構造を有する問題（構造学習）に拡張したモデルである。品詞タギング (Lafferty et al. 2001), 基本名詞句同定 (Sha and Pereira 2003), 形態素解析 (Kudo et al. 2004) など, 構造学習, 特に, 系列ラベリングとして定式化できる自然言語処理の様々な問題に適用され，高い性能が報告されている。また, 固有表現抽出の研究においても広く使用され (McCallum and Wei 2003; Jiang, Chen, Liu, Rosenbloom, Mani, Denny, and Xu 2011), NTCIR-10 MedNLP タスクでも最もよく用いられた (Imaichi et al. 2013; Laquerre and Malon 2013; Miura et al. 2013).

linear-chain CRF の実装としては，C++ で記述されたオープンソースソフトウェアである $\mathrm{CRF}++{ }^{8}$ (Ver. 0.58) を利用した. CRF++は，準ニュートン法の一種である L-BFGS (Limitedmemory BFGS) を使用して数值最適化を行っており, 省メモリで高速な学習を実現している. また，素性テンプレートという素性の記述形式が定義されており，テンプレートを利用することで多様な素性を容易に学習に組み込むことができるという特長がある.

$\mathrm{CRF}++$ の素性テンプレートでは, 出力ラベル系列についての unigram 素性および bigram 素性が利用可能である，出力ラベル unigram 素性は, 入力系列についての任意の情報（系列中の特定のトークンの形態素自体や品詞など）と現在のトークンのラベルの組からなる素性を指し,出力ラベル bigram 素性は，入力系列の任意の情報，現在のトークンのラベルおよび 1 つ前のトークンのラベルの三つ組からなる素性を指す. 本研究では, すべての素性に対して出力ラべル unigram 素性および bigram 素性の両方を使用することとした。たとえば，品詞素性を -2 から 2 までのウィンドウで用いると述べた場合, 注目するトークンの 2 つ前方から 2 つ後方に位置するトークンの品詞について, それぞれで出力ラベル unigram 素性および bigram 素性を使用することを意味する。

なお，指定した値未満の出現回数である素性を学習に使用しないことを意味する素性のカットオフの閥値は 1 とし, 訓練データに出現したすべての素性を使用することにした。また, 正則化には $L 2$ 正則化を用いた。

## 3.4 抽出に用いる素性

本システムでは, 症状・診断名抽出のための素性として, 「形態素」,「形態素基本形」,「品詞」,「品詞細分類」,「字種」,「辞書マッチング情報」,「モダリティ表現」の 7 種類の情報を用いた.注目するトークンを起点にどこまでの範囲のトークンの情報を素性に用いるかを表すウィンドウサイズについては，モダリティ素性を除き，5 章で述べる実験により最適な値を決定する。モ


ダリティ素性のウィンドウサイズについては後述する.

## 形態素, 基本形, 品詞, 品詞細分類素性

形態素素性はトークン自体であり，基本形，品詞，品詞細分類素性は，それぞれ各形態素の基本形, 品詞, 品詞細分類である. たとえば，「言っ」の基本形は「言う」，「速く」の基本形は 「速い」となる. 品詞は, 名詞, 動詞, 形容詞, 接続詞など 10 数種類存在し, 品詞細分類は, 名詞であれば「固有名詞」,「形容動詞語幹」などがある. これら四つの素性には, 形態素解析器 $\mathrm{MeCab}$ の出力を利用した ${ }^{9}$. なお, MeCabではデフォルトの辞書として IPADIC が採用されており, IPADICで使用されている品詞および品詞細分類は, IPA 品詞体系として定義されている.

## 字種素性

字種素性は，トークンを構成する文字の字種パターンを表す。本研究では, ひらがな, カ夕カナ, 漢字, 英大文字, 英小文字, ギリシャ文字, 数値, 記号とこれらの組合せからなる字種パターンを定義した，たとえば，「レントゲン」は「カタカナ」，「考え」は「ひらがな＋漢字」, $\lceil M R I 」$ I英大文字」が字種パターンとなる，なお，「ひらがな＋漢字」では，1つのトー クン中にひらがなと漢字が出現していればこのパターンに相当するものとし, 各文字の出現順は無視した. 複数字種の組合せからなるパターンの扱いは, 他のパターンについても同様である.

## 辞書素性

辞書素性は，専門用語辞書など外部の語彙資源を利用した素性であり，入力文中の形態素列が辞書中の語句と一致したか否かという情報を表す。本研究では, 症状・診断名の抽出のために病名等の用語から構成される辞書を使用し, 入力文中のトークン列で, 辞書中の語句とマッチした部分にIOB2 フォーマットに基づくタグを付与した. たとえば，「腎機能障害」という語句が辞書中に含まれる場合，「腎／機能／障害／の／増悪」と分割された形態素列に対して「B ／I／I／O／O」というタグが付与される。なお, 辞書マッチは文字数についての最左最長一致で判定し, マッチした範囲の境界が形態素の内部にある場合, マッチ範囲に完全に包含される形態素に対してのみタグを付与した。


## モダリティ素性

モダリティ素性は, 症状・診断名のモダリティ属性を示す表現（モダリティ表現）を捉えるための素性である。モダリティ表現の具体例として，先行する症状・診断名のモダリティが negation であることを示す「〜なし」や「〜を認めず」, 同様に suspicion であることを示す「〜疑い」や 「〜を考え」などがある。また，「母」「息子」など続柄を表す表現は，共起する症状・診断名のモダリティ属性が family であることを示すモダリティ表現であるといえる.

本素性では, negation, suspicion および family 属性を対象に，モダリティ属性推定の手がかりとなる表現を正規表現で記述し, 文中の各トークンについて, 最左最長一致で正規表現とマッチした範囲の端に位置するトークンまでの距離（形態素数）と，マッチした表現が表すモダリティ属性を示すタグを付与した. なお, positive 属性は, negation, suspicion および family であることを示す表現と共起しない症状・診断名に対して付与される属性とみなせるため, これらのモダリティ表現が周辺に存在しないことが positive 属性と推定するための手がかりとなる.

例として, negationのモダリティ表現を捉える正規表現の 1 つとして次の (a)を使用してい $る^{10}$.

この正規表現を用いると，「運動／麻痺／は／み／られ／ず」という入力に対して「はみられず」という部分がマッチし, マッチした範囲の先頭トークン「は」までの距離は,「麻痺」で 1 ,「運動」で 2 となる. negation と suspicionのモダリティ表現は症状・診断名の右側に出現するため，モダリティ表現が右側に出現しているトークンにのみ，出現を示すタグを付与した．反対に, familyの表現は「母：脳梗塞」のように左側に出現するため, モダリティ表現が左側に出現しているトークンにのみタグを付与した.

なお, negationの正規表現は上述の（a）を含む 4 件, suspicionの正規表現は以下の (b)を含む 2 件, familyの正規表現は以下の (c) 1 件を使用した ${ }^{11}$.モダリティ素性として使用した正規表現の全リストは付録 Aに記載する.

(b) の?(疑い|うたがい)

(c) [祖伯叔]?[父母](?) 親?|お [じば]|[兄弟姉妹娘]| 息子 |従 (兄弟 | 姉妹)

また，過学習を抑制する目的で，モダリティ属性ごとに距離のグループ化を行った. negation と suspicion では, 距離 1 2 (近くに出現), 3〜4 (やや近くに出現), 5〜8 (やや遠くに出現), 9〜 12 (遠くに出現) の 4 通りの距離を考慮し, familyでは $-\infty \sim-13,-12 \sim-9,-8 \sim-5,-4 \sim-1$ の 4 通りとした。なお, 距離は, 注目するトークンの右側にモダリティ表現が出現している場合
 X_{2} \ldots X_{N}\right]$ ” は $X_{1}, X_{2}, \ldots, X_{N}$ のいずれかとの一致, “()” はパ夕ーンのグループ化, “?”は直前のパターンの 0 または 1 回の出現を表す.

11 “[父母]” に後続する“(?)”というパターンは, 医療用語である「母指」や「母趾」とのマッチを防ぐために用いた。
}

に正数, 左側に出現している場合に負数で表しており, 距離の絶対値は, 注目するトークンから同一文中の任意のモダリティ表現（正規表現とマッチしたトークン列）内の最も近いトークン

のモダリティ素性の定義に基づくと，前述の例に対しては，「運動」および「麻痺」に“neg1_2”, それ以外のトークンにモダリティ表現の非出現を表すタグ“O”が付与される。

なお，モダリティ素性として付与したタグは，注目しているトークンの夕グのみ学習・推定に用いた（つまり，ウィンドウサイズを 1 とした），トークンに付与される素性タグにより，トー クンの周辺文脈の情報が表現されており，実質的に 12 以上先のトークンまで考慮していることになる。

## 3.5 抽出誤り訂正のための後処理ルール

著者らは，NTCIR-10 MedNLP タスクに参加し，構造化パーセプトロン (Collins 2002)および linear-chain CRF に基づく固有表現抽出システムを開発してきた (Higashiyama, Seki, and Uehara 2013a, 2013b). 開発したシステムについてエラー分析を行ったところ，観測された誤りの中で，モダリティ属性の分類誤りが大きな割合を占めることがわかった。この種の誤りは単純なルールで修正できるため，モダリティ属性の分類誤りに焦点を当て，誤り訂正のためのルールを作成することにした。観測されたモダリティ属性分類誤りは，さらに次の 2 通りに大別できたため，それぞれの誤りに対応する訂正ルールとして，2 つのルールを作成した.
- 固有表現の周辺に（非 positive 属性の）モダリティ表現が存在し，かつ推定された属性が同表現が表す属性と異なっている（主に positive となっている）誤り
- 固有表現の周辺にモダリティ表現が存在せず，かつ推定された属性が positive 以外となっている誤り

作成した 2 つのルールを以下に示す。“ [] ”の外側（左側）に negation および suspicion 属性に対する条件，“［］”の内側に family 属性に対する条件を記述した．正しい推定に対して修正ルールを適用してしまうことを防ぐため, 後述する $d_{1}$ および $d_{2}$ の值は, $d_{1}=2, d_{2}=8$ として, ルールの適用基準を厳しく設定した。ただし，family 属性のモダリティ表現が出現する文中の症状・診断名が患者の家族に対する言及でないというケースは極めて少ないとの考えの下， family に対する距離は $d_{1}=d_{2}=\infty$, つまり, 該当位置から到達可能な同一文内の最大トークン数とした。

## モダリティ属性分類誤り修正のためのルール

（1）固有表現 $e$ の末尾 [先頭］のトークンから右 [左］方向に距離（トークン数） $d_{1}$ 以内に （非 positive 属性の）モダリティ表現 $m$ が存在する場合， $e$ の推定ラベルのモダリティ属性を表現 $m$ が表す属性 $a$ に更新する.
* 距離 $d_{1}$ 以内に複数のモダリティ表現が存在する場合は, family, negation, suspicion の順に優先する.

(2) 固有表現 $e$ の末尾 [先頭 $]$ のトークンから右 [左 $]$ 方向に距離 $d_{2}$ 以内にモダリティ表現が存在しない場合，推定ラベルの属性を positive に更新する。

なお，上記のルールを導入することは，固有表現 $e$ から $e$ の最も近くのモダリティ表現までの距離 $d$ を，(a) 近い $\left(d \leq d_{1}\right)$, (b) 中程度の距離である $\left(d_{1}<d \leq d_{2}\right)$, (c) 遠い，あるいはモダリティ表現が存在しない $\left(d>d_{2}\right)$ の 3 通りに分け, 距離 $d$ に応じてモダリティ属性決定の挙動を変えていることに対応する。ルールが適用される (a) および (c)のの条件下では, CRF で推定されたモダリティ属性をルールで上書きしているため，ルールによりモダリティ属性を決定しているのと等価である。一方, 固有表現から中程度の距離までの範囲内にモダリティ表現が存在する (b)の場合には, CRFによる推定結果をそのまま採用し， モダリティ属性の決定を学習の結果に委ねた。

## 4 医療用語資源の語彙拡張と症状・診断名抽出への利用

用語抽出への語彙資源の利用は，訓練データに少数回しか出現しない用語やまったく出現しない用語の認識に有効であり, 医療用語辞書などの語彙資源を用いた医療用語抽出研究が行われている (Imaichi et al. 2013; Laquerre and Malon 2013; Miura et al. 2013). しかし, 診療記録では症状・診断名として多様な複合語が使用されるため, テキスト中の語句に対して辞書中の用語と単純にマッチングを行うだけではマッチしない複合語が存在し, 辞書利用の効果は限定的となる。そこで, 本章では, 語彙資源中の複合語から構成語彙を獲得する方法と, 構成語彙を組み合わせてより多くの複合語にマッチする拡張マッチングの方法を述べ，これらの方法に基づく語彙資源を活用した症状・診断名の抽出手法を提案する.

## 4.1 基本的な考え：医療用語の構成語彙への分解

症状・診断名は, 複数の医療用語から構成される複合語であることが多い. たとえば, 「水痘肺炎」という用語は「水痘」と「肺炎」から構成され，「甲状腺出血」は「甲状腺」と「出血」 から構成される。診療記録では, 多様な構成語彙を組み合わせた複合語が用いられる一方で,実際に用いられる複合語の中には辞書中には含まれないものも多い. 例として,「水痘感染」と 「甲状腺腫大」は，診療記録コーパス MedNLP テストコレクション中で用いられ，医療用語辞書 MEDIS 病名マスター中に存在しなかった症状・診断名である。ただし，上述の用語の各構成語彙に注目すると, 「水痘」,「感染」,「甲状腺」,「腫大」を構成語彙として含む用語は同辞書中に多数存在した（表 2）。

したがって, 症状・診断名の抽出に, 既存の辞書中に含まれる用語をそのまま用いて対応す
表 2 複合語「水痘感染」,「甲状腺腫大」の構成語彙と, MEDIS 病名マスターにおける各構成語彙からなる複合語数

るには限界があるといえる。また, 症状・診断名としてありうる構成語彙の組合せは膨大な数に上ると考えられ，それらを網羅的に含むような辞書を構築することも現実的ではない。一方で，症状・診断名の構成語彙となる語の多くは，辞書中の用語の部分文字列として辞書に含まれている可能性が高い.

そこで, 本研究では, 既存の医療用語資源から症状・診断名の構成語彙となる語句を獲得し,得られた構成語彙を組み合わせた柔軟なマッチング方法「拡張マッチング」に基づく症状・診断名の抽出手法を提案する。なお, マッチした結果は, 機械学習の素性（辞書素性）として用いる。語彙資源を活用した拡張マッチングによって, 辞書素性タグが付与される語句が増加し,元の辞書に含まれない語彙にも対応した抽出が可能になると考えられる.

## 4.2 主要語辞書と修飾語辞書に基づく拡張マッチング

症状・診断名の構成語彙の獲得にあたり, 構成語彙には, 単独で症状・診断名として用いられる「主要語」と, 主要語と隣接して現れたときにのみ症状・診断名の一部となる「修飾語」の 2 種類が存在すると仮定する． 4.1 節で述べた例では, 「水痘」, 「感染」,「腫大」が主要語に相当し, 「甲状腺」が修飾語となる.「水痘感染」や「甲状腺腫大」のように, 構成語彙に分解される前の元の用語自体も主要語とみなす. 主要語と修飾語の具体的な獲得方法は次節以降で後述することにし，本節では，主要語辞書と修飾語辞書の 2 種類の辞書を用いた症状・診断名のマッチング方法「拡張マッチング」を説明する.

以下，「消化管覀性腫瘍の…」という入力文が与えられた場合を例に，拡張マッチングの手順を述べる。主要語辞書には「消化管障害」，「腫瘍」，「悪性腫瘍」が含まれ，修飾語辞書には 「消化管」,「悪性」が含まれているものとする.

## 拡張マッチングの処理

入力文を文字の列とみなし, 主要語辞書中にマッチする文字列がないか検索する処理を先頭の文字から末尾の文字まで繰り返し行う. 例の入力文に対しては, 次のようにマッチング範囲の探索が行われる.

図 1 入力文「消化管覀性腫瘍の…」に対する拡張マッチングの処理

（1）入力文 1 文字目の「消」を読み込み，主要語辞書の検索を行う（図 1, a1）「消化管悪」 まで検索した時点で主要語が存在しないことが判明するため (a2), 主要語検索を終了して2文字目以降について検索を続ける。
* 2 文字目「化」および 3 文字目「管」の検索においてマッチする主要語はない.

（2）４文字目の「悪」を読み込み，主要語辞書の検索を行う（b1），検索した結果，「悪性腫瘍」 が主要語辞書とマッチする (b2).

（3）続いて，マッチした範囲「悪性腫瘍」の左右両側について, 修飾語辞書中にマッチする文字列がないか検索する，検索した結果，元の範囲の左側の「消化管」が修飾語辞書とマッチする (b3).

（4）マッチした範囲を「消化管覀性腫瘍」に拡張し, 引き続き, 拡張された範囲のさらに左側について, 修飾語辞書を検索する。しかし, これ以上マッチする語はないため, 「消化管墨性腫瘍」をマッチした範囲として記憶し, 入力文 5 文字目以降について検索を続ける。
* 5 文字目「性」の検索においてマッチする主要語はない.

（5）６文字目の「腫」を読み込み (c1), 同様の処理を行った結果, 主要語辞書で「腫瘍」(c2) , 修飾語辞書で「悪性」および「消化管」がマッチし (c3, c4),「消化管悪性腫瘍」をマッチした範囲として記憶する. 入力文 7 文字目以降の文字についても同様に検索を続ける.
* 7 文字目以降の検索においてマッチする主要語はなかったものとし, 入力文に対する検索の処理を終了する。

上述の辞書探索処理の結果, 例では「消化管悪性腫瘍」がマッチした範囲として（二重に）得られる。複数のマッチング範囲が得られ, 得られた範囲間に重なりがある場合は, 範囲内の文字数が最も多いものを残し, 残りを破棄する. 例では, 得られた 2 つの範囲が同一であるため,残される範囲も元の範囲と同じものとなる.
以上が拡張マッチングの処理である。最終的に得られたマッチング範囲には辞書素性タグを付与し，機械学習の素性として利用する。

## 4.3 主要語辞書の利用と語彙制限

本研究では, 主要語辞書として, MEDIS 病名マスター (Ver. 3.11) と, MedNLP テストコレクション (Morita et al. 2013)の訓練データを利用する. MEDIS 病名マスター（ICD10 対応標準病名マスター）は，一般財団法人医療情報システム開発センターにより提供されている病名辞書である。病態毎に選ばれた代表病名を表す「病名表記」に加え, 病名表記の読み, ICD10 コードなどから構成され, 本研究で利用したVer. 3.11 では, 24,292 語が収載されている. 同辞書に含まれる病名表記を抽出し, 主要語辞書として用いる. MedNLP テストコレクションは, NTCIR-10 MedNLP タスクで提供された模擬患者の病歴要約からなるコーパスである。同コー パスの訓練データからアノテーションされた症状・診断名部分を抽出し, 主要語辞書 MedNE (延べ語数 1,922 , 異なり語数 1,068 ) として用いる.

ただし, 主要語辞書をそのまま用いると, 一部の語が用語抽出の学習に悪影響を与える場合がある，たとえば，細菌性皮䖒感染症の一種である「よう」(癱) は，「〜するようになった」などの表現にマッチしてしまう．また，「喫煙歴」という表現に含まれる「喫煙」は，必ずしも患者の喫煙を表す言及ではないため症状・診断名に該当しない. このように, 症状・診断名と無関係の表現とマッチする用語や, 高頻度で非症状・診断名としても使用される用語を辞書が含んでいる場合，学習を阻害する要因となる。そこで，MedNLP 訓練データを使用し，高い割合で症状・診断名とマッチする用語を取得する処理を行う，以下，各主要語辞書に対する語彙制限の方法を述べる。なお, 後述の閥値 $n_{\text {out }}, r_{\text {out }}, n_{\text {in }}$ および $r_{\mathrm{in}}$ は, 5 章で述べる実験により決定する。

## MEDIS 病名マスターの語彙制限

辞書に含まれる各用語について, MedNLP 訓練データ中で固有表現範囲（症状・診断名としてアノテーションされた範囲）の内部および外部に出現した回数をそれぞれカウントし，次の 2 つの基準を満たす用語を主要語として許容する.
- 固有表現範囲の外部における出現回数が $n_{\text {out }}$ 未満である.
- 訓練データ中に 1 回以上出現している場合は, 固有表現範囲の内部と外部の両方の出現に対し，外部に出現した割合が $r_{\text {out }}$ 未満である.

## MedNE の語彙制限

辞書に含まれる各用語について, MedNLP 訓練データ中で固有表現範囲の内部および外部に出現した回数をそれぞれカウントし，次の 2 つの基準を満たす用語を主要語として許容する.
- 固有表現範囲の内部における出現回数が $n_{\text {in }}$ 以上である.
- 固有表現範囲の内部と外部の両方の出現に対し, 内部に出現した割合が $r_{\text {in }}$ 以上である.

## 4.4 医療用語資源からの修飾語の獲得

4.1 節で述べたように，主要語に含まれる部分文字列の中には有用な修飾語が多く含まれるという考えに基づき, 主要語から部分文字列を切り出すことで修飾語を獲得する. 修飾語の獲得には，主要語の取得と同様に MEDIS 病名マスターと MedNE を用いる。なお，MEDIS 病名マスターの関連リソースとして提供されている「修飾語テーブル」は, 本研究では使用しない.

修飾語は，主要語辞書でマッチした範囲を拡張する際にのみ用いるため, 意味をなさない非語が含まれていても，実際にテキスト中で主要語と隣接して現れなければ学習・抽出に影響を与えない，たたし， MEDIS 病名マスターには動詞や助詞，記号などを含む用語（「1 型糖尿病・関節合併症あり」,「アヘン類使用による急性精神・行動障害」など）が存在するため, 切り出された部分文字列が助詞などの表現を含んでいると, 症状・診断名でない範囲にまで拡張してしまう可能性がある.

そこで，部分文字列を切り出すことにより機械的に修飾語候補を抽出した後, 意味をなさないと考えられる候補と, 過大な拡張を行う可能性のある有害な候補を除去するという手順により修飾語の獲得を行う。なお, 有害な候補の除去には, 主にひらがなから構成される語 40 語程度の「ひらがな表現」リストを作成し, 使用した。同リストは, 助詞 (「が」や「より」), 接続詞 (「または」や「かつ」), 動詞・助動詞の組合せ（「ならない」）などひらがなのみから構成される表現の他，一部，「著しい」など漢字を構成要素に持つ表現も含む.「ひらがな表現」の全リストは付録 B に記載する。

## 修飾語獲得の手順

修飾語取得の対象とする用語集合 $T$ から修飾語集合 $S$ を生成する手順を以下に示す. 切り出す部分文字列の最小の長さは 2 で固定し, 修飾語として許容する部分文字列の最小出現回数を $f_{\min }$ とした， $f_{\min }$ の値は, 主要語の語彙制限と同様に， 5 章で述べる実験により決定する.

(1) 修飾語候補の抽出

(a) 各用語 $t \in T$ について, $t$ の先頭および末尾から, 長さ 2 から $t$ の文字列長までの部分文字列を切り出す. 切り出した部分文字列は, 修飾語候補集合 $S_{\text {cand }}$ に追加する.

＊たとえば, $t=$ “医療用語”の場合, “医療”, “医療用”, “医療用語”, “用語”, “療用語”が切り出される。

（b）各修飾語候補 $s \in S_{\text {cand }}$ について， $s$ を部分文字列として含む $T$ の用語全体の集合を求める.これを， $s$ の出現元集合 $\operatorname{Parent}(s)$ とする.

＊たとえば, $s=$ “用語” の場合, $\operatorname{Parent}(s)=\{$ “用語”, “医療用語”, “専門用語”, “用語抽出”\}などが得られると考えられる。

（2）修飾語候補の限定（有害な語の除去）

(a) $s \in S_{\text {cand }}$ のうち，数字および「\%」記号のみからなる語を除去対象候補集合 $S_{\text {reject }}$ に追加する。

(b) $s \in S_{\text {cand }}$ のうち，先頭または末尾が「-」（ハイフン）以外の記号か空白である語を $S_{\text {reject }}$ に追加する。

(c) $s \in S_{\text {cand }}$ のうち，先頭または末尾の文字が 1 字からなる「ひらがな表現」に一致し，一致した文字と隣接する文字がひらがな以外である ${ }^{12}$ 語を $S_{\text {reject }}$ に追加する.

(d) $s \in S_{\text {cand }}$ のうち, 先頭または末尾から始まる範囲が 2 字以上からなる「ひらがな表現」の組合せに一致した語を $S_{\text {reject }}$ に追加する.

(3) 修飾語候補の限定（有益でない語の除去）

(a) $s \in S_{\text {cand }}$ のうち, $T$ 内での部分文字列としての出現回数が $f_{\min }$ 回未満 $(|\operatorname{Parent}(s)|<$ $f_{\text {min }}$ )である $s$ を $S_{\text {reject }}$ に追加する.

(b) 任意の $s_{1}, s_{2} \in S_{\text {cand }}\left(s_{1} \neq s_{2}\right)$ について, 出現元集合が等しい場合, $s_{1}$ と $s_{2}$ のうちの長さが小さい方を $S_{\text {reject }}$ に追加する.
* たとえば, Parent(“群”) $=\operatorname{Parent}($ “症候群”) $=\{$ 症候群,かぜ症候群 $\}$ である場合, “群”が $S_{\text {reject }}$ に追加される。

(4) 修飾語候補の決定
- $S_{\text {cand }}$ から $S_{\text {reject }}$ の元を除いた集合 $S=S_{\text {cand }} \backslash S_{\text {reject }}$ が求める修飾語集合である.

## 5 評価実験

本研究で開発した用語抽出システムの性能を評価するため，MedNLP テストコレクションを用いて評価を行った。次節以降で, 基本素性（形態素, 品詞, 品詞細分類, 字種, 基本形）の評価, モダリティ素性の評価, 主要語語彙制限および拡張マッチングの有効性の評価を行う。さらに，すべての素性に加えて後処理ルールを適用した提案システム全体の性能を評価し, MedNLP タスクの参加システムである従来手法との比較を行う.

## 5.1 実験設定

実験に使用した MedNLP テストコレクションは, 病歴要約 50 文書からなり, 全デー夕の 3 分の 2 にあたる 2,244 文が訓練デー夕, 残りの 1,121 文が評価用のテストデータとなっている.

訓練データにアノテーションされた情報は, 患者の個人情報と診療情報である。本研究では, これらのうち，患者の症状と医師の診断を指す診療情報（症状・診断名）を対象とする．各症状・診断名には医師の認識の程度などを表すモダリティ属性が定義されており，それぞれ症状の罹患の肯定, 否定, 可能性の存在を表す positive, negation, suspicion に加え, 症状が患者の家族の病歴として記述されていることを表す familyの 4 種類からなる. 各モダリティ属性が付与された症状・診断名を異なるカテゴリの固有表現とみなして学習を行うことで，モダリティ属性の分類を含めた抽出を行う。

評価は，MedNLP タスクで行われたのと同様に，モダリティ属性を考慮する方法と，考慮しない方法の 2 通りで行う，前者は，抽出された固有表現が正しい属性に分類された場合にのみ正解とみなす評価であり, 後者は, 属性が誤っていても, 抽出された固有表現の範囲がアノテー ションされた正解情報と一致していれば正解とみなす評価である。それぞれの評価方法について，適合率，再現率， $F$ 値を評価尺度として用いる.

CRF で学習を行う際に必要となる正則化のためのハイパーパラメータ $c$ については, 訓練データでの 5 分割交差検定により値を決定した。テストデータに対する抽出を行うまでの具体的な手順は以下の通りである.
1. $c$ の値を変化させながら, 各 $c$ の値について訓練データで 5 分割交差検定を行い, 5 回の検定における各精度（適合率，再現率， $F$ 値）の平均をそれぞれ算出する。
2. $c$ の值の中で, 最も $F$ 値が高い結果となったものを最適値とする.

3. 得られた $c$ の最適値を用いて, 訓練データ全体で学習を行い, モデルを学習する。続い

て，学習で得られたモデルを用いてテストデータで抽出を行う.

なお, 主要語の語彙制限および修飾語獲得の際の閾値については, 次のように決定した. MEDIS 病名マスターの語彙制限では, $n_{\text {out }} \in\{3,5,8\}, r_{\text {out }} \in\{0.5,0.7,0.9\}$ の各組について，ハイパー パラメータ $c$ の值を変えながら，それぞれ訓練データで交差検定を行い，最も $F$ 值が高かった $n_{\text {out }}, r_{\text {out }}, c$ の値の組合せを最適値としてテストデータでの評価に用いた. MedNE の語彙制限については $n_{\text {in }} \in\{3,5,8\}, \quad r_{\text {in }} \in\{0.5,0.7,0.9\}$ とし, MEDIS および MedNE からの修飾語獲得については $f_{\min } \in\{1,2,3,5,8,10\}$ として, 同様に最適値を決定した. その結果, $n_{\text {out }}=n_{\mathrm{in}}=3$, $r_{\text {out }}=0.7, r_{\text {in }}=0.5, f_{\text {min }}=3$ (MEDIS),$f_{\text {min }}=3$ (MedNE) が最適値として得られた.

また, 素性のウィンドウサイズについては, 基本素性（形態素, 品詞, 品詞細分類, 字種, 基本形）を素性セットとしたモデルを用いて次のように決定した。サイズは各素性について共通の値を使用することにし，候補を 3 （-1 から 1)，5（-2 から 2), 7 （-3 から 3 ），9（-4 から 4) の 4 通りとした。続いて，サイズおよびハイパーパラメータ $c$ の値を変えながら，訓練データで交差検定を行ったところ, サイズ 5 において最大の $F$ 値が得られ，この値を最適値とした。次節以降，サイズ 1 で固定しているモダリティ素性を除き，すべての素性に関してサイズ 5 として実験を行った結果を報告する。

## 5.2 基本素性の有効性の評価

形態素, 品詞, 品詞細分類, 字種, 基本形からなる素性セットを基本素性とし, これら5つの素性の有効性の評価を行った。各素性に対するテストデータでの精度を表 3 に示す。表中の “P", “R”，“F”はそれぞれ適合率，再現率， $F$ 值を意味し，“2-way”はモダリティ属性を考慮しない場合の精度, “Total”は考慮した場合の精度を表す。なお, 表には, 各素性セットに対して 30 回行った試行の平均精度を記載した．次節以降の実験結果についても同様である．直前の行中の素性セットを用いた場合との差について両側 $t$ 検定を行い, 有意水準 $1 \%$ \%有意であった場合に“ネ”を付した。

品詞素性の導入により, 2-way, Total の両評価で, 適合率が 4 ポイント前後向上し, 再現率が 1.5２ ポイント程度向上した. 訓練データでは 13 , 名詞, 接頭詞であるトークンのうちのそれぞれ $20 \%$ 弱, $30 \%$ 弱が固有表現（を構成するトークン）であり，残りの品詞については，いずれも $97 \%$ 以上が非固有表現であった. したがって, 品詞が名詞または接頭詞であることが固有表現である可能性を示す手がかりとなり, その他の品詞であることが固有表現でないことを示すほとんど確実な手がかりとなったと考えられる.

品詞細分類素性の導入では, 両評価とも多少の適合率の低下が見られたものの, それを上回る 2.5 ポイント前後の再現率の向上が得られた. 名詞の細分類全体の約 $30 \%$ に相当する「数」では, その $99 \%$ 以上が非固有表現であり, 合わせて名詞の約 $50 \%$ に相当する「一般」,「サ変接続」,「接尾・一般」は，各 $20 \sim 40 \%$ 固有表現が占めた. したがって，名詞の中のどの細分類であるかという情報が精度向上に寄与したと考えられる。

字種素性の導入による主な変化として, 2-way, Total での適合率がそれぞれ 0.3 ポイント程度向上した. 固有表現が大きな割合を占めた字種は, 「漢字」と「カタカナ」で, それぞれ $30 \%$ 強, $20 \%$ 強の割合であった。たた，接頭詞および名詞／接尾・一般の $100 \%$ 近い割合を「漢字」が占

表 3 基本素性の評価

結果への考察を行った。したがって，本節以降で述べる各素性における固有表現，非固有表現等の割合は，いずれも訓練データで算出した数値である。
}

めるなど, 品詞や品詞細分類素性と重複している情報も多い. 名詞／一般, 名詞／サ変接続のそれぞれ $85 \%$ 程度が「漢字」と「カタカナ」となっており, 字種素性がこれらの品詞細分類を詳細化する役割を果たしたと考えられる。

基本形素性の導入の結果, 主に Total での適合率, 再現率が向上した.「ない」「なかった」など表層が異なるモダリティ表現を基本形で同一視することで, モダリティ属性を考慮した評価の結果が向上したと考えられる.

## 5.3 モダリティ素性の有効性の評価

モダリティ素性の有効性を評価するため, 基本素性のみを用いたシステム（Basic；表 3 の最下行と同一のシステム) と, 基本素性に加えてモダリティ素性を用いたシステム (Basic+ Modality) の精度の比較を行った。テストデータにおける各モダリティ属性および全体の精度を表 4 に示す.なお, モダリティ属性とは, 症状・診断名に付加されているモダリティの種類（positive, negation 等）を指し，モダリティ素性は，モダリティ属性を捉えるために用いた素性を指す. Basic と Basic + Modality との差について両側 $t$ 検定を行い, 有意水準 $1 \%$ で有意であった場合に“”を付した。

各属性における適合率と再現率は, negation と suspicionの適合率を除いて, モダリティ素性導入後の方が同等か高いという結果が得られた. 属性全体 (“All (total)”) で見ても各精度は向上しており，本素性が正確なモダリティ属性の認識に寄与したといえる。なお，本素性の導入前, 後ともに，他の属性に比べて suspicion 属性の精度が低いのは，データのアノテーション誤りに起因すると考えられる．著者らが訓練データを確認したところ，「疑い」などの表現が後続する固有表現で, suspicion という属性が付与されていない（positive となっている）事例が十数件存在し, suspicion の事例全体の十数パーセントという少なくない割合を占めていた.

一方，モダリティ属性を考慮しない 2-wayの評価では，適合率が 1 ポイント弱低下した。「〜 がない」などの表現は固有表現でない語句の後方にも出現するため, 非固有表現を誤って固有表現と認識してしまうケースが増加し, 適合率低下の原因となったと考えられる.

表 4 モダリティ素性の評価

## 5.4 主要語辞書および修飾語辞書利用の有効性の評価

主要語語彙制限および拡張マッチングの有効性を評価するため, 基本素性のみのシステム (Basic) と, 基本素性に加えて各種辞書に基づく辞書素性を用いたシステムの比較を行った。結果を表 5 にまとめる。最左列は利用した辞書を示しており，“ $\operatorname{main}(X)$ ” は辞書 $X$ を主要語辞書として使用したことを, “山 $\operatorname{modify}(X)$ ” は辞書 $X$ を修飾語辞書として拡張マッチングを行ったことを意味する。辞書 $X$ に対して, 4.3 節の方法による語彙制限を行っていないものを “ $X-\mathrm{r}$ ” (raw),行ったものを“ $X$-f” (filtered) で表し，辞書 $X$ から獲得した修飾語集合を“ $X$-s” (substring) で表した。また， “ $X \cup Y$ ”で 2 つの辞書 $X, Y$ を統合した辞書を表した. 数値右上のシンボルは両側 $t$ 検定によって有意水準 $1 \%$ で有意差があった場合に付しており，“十”が (a) と (b) または (c) との比較, “†" が (b) と (d) との比較, “大”が (c) と (e) との比較, “§”が (e)と (f) または $(\mathrm{g})$ との比較の結果を示している.

まず，語彙制限を行っていない辞書を単純に利用した場合, MEDIS 病名マスター（表中の MDM ; MEDIS Disease Name Master）に基づく辞書素性を導入した (b)で，2-way の評価において適合率・再現率が $0.7 \sim 1.5$ ポイント程度向上し, その結果, $F$ 值が約 1.1 ポイント向上した. Totalにおいても $F$ 值が向上したものの，2-wayよりは効果が小さく，認識された症状・診断名の中にモダリティ属性の分類に誤ったものが含まれることが示唆される。なお， 2-way と Total のいずれの場合も， $F$ 值の向上は統計的に有意であった. 一方, MedNE（表中の MNE） を追加した場合 (c)では，再現率が大きく低下した，訓練データでの交差検定では $96 \%$ 超える $F$ 値となっており，正解ラベルとほぼ一致する辞書素性に基づく過学習が起こり，他の素性の情報が学習されなかった可能性が高い.

上記のような問題を避けるため，次に語彙制限を行った主要語辞書を使用した，結果を見ると，MEDISのみの (d) では全体的に $F$ 值がわずかに低下した。これは， MEDIS 病名マスター から獲得した主要語については語彙制限の必要性が薄いことを示している。一方, MEDISに加えて MedNEにも語彙制限を加えた (e)では, 語彙制限を加えない (c)に比べて適合率, 再現率,

表 5 辞書素性の評価

$F$ 値とも大幅に向上した。モダリティ属性まで考慮した Total では (b) よりもわずかに精度が低いものの，モダリティ属性を考慮しない2-wayの評価では, これまでの設定で最も良い結果が得られた。

最後に，語彙制限を加えた主要語辞書 (e) に加えてさらに拡張マッチングを適用した。その結果, MEDIS から獲得した修飾語辞書のみを使用した (f) で約 $0.5 \sim 0.6$ ポイント, MedNE から獲得した修飾語辞書を併せて使用した $(\mathrm{g})$ で約 $0.6 \sim 0.7$ ポイントの $F$ 值の向上が見られ，修飾語辞書の導入・語彙増加にともない, わずかながらも着実な認識精度の向上が得られた.

## 5.5 システム全体の性能および従来手法との比較

基本素性，辞書素性，モダリティ素性，後処理ルールを含めたシステム全体の性能の評価を行った. テストデータでの精度を表 6 (a) に示す. 基本素性に加えて語彙制限後の 2 つの辞書と修飾語辞書に基づく辞書素性を導入したシステム（表 5 の最下行 $(\mathrm{g}$ )のシステム）を Modify とし，モダリティ素性の追加，後処理ルールの適用をそれぞれ Modality, P-rulesで表した。なお，モダリティ素性と後処理ルールはモダリティ属性まで含めた分類 (Total) において利用する. 表中のシンボル “†” は Modify と Modify + P-rules, “†” は Modify と Modify + Modality を, “`”は Modify + Modality と Modify + Modality + P-rules を比較した際，両側 $t$ 検定で有意水準 $1 \%$ の有意な差があったことを示している.

表 6 従来手法との比較

(a) 全体の精度

(b) モダリティ属性別の精度

モダリティ素性の導入後には，適合率，再現率， $F$ 值がそれぞれ 1 ポイント前後向上し，その効果が確認された. また, 後処理ルールについては, Modify に適用した場合で $F$ 値で 1 ポイントの向上，Modify + Modality に適用した場合で 0.7 ポイント程度の向上が得られた。すなわち, CRFによって症状・診断名と認識された語句に対してのみモダリティ属性を修正する処理を行うことで，症状・診断名の認識精度を維持したまま，モダリティ属性分類誤りを減少できている.

なお，後処理ルールの効果を確認するため，訓練データを使用して14, Modify および Modify十 Modality の推定結果に後処理ルールを適用した場合の正解数の変化について表 7 に示した. “対象件数”はルール適用の対象となった固有表現の件数で，システムが正例と推定した固有表現の数に相当する。また，“ $\mathrm{T} \rightarrow \mathrm{F}$ "，“ $\mathrm{F} \rightarrow \mathrm{T}$ "および “ $\mathrm{F} \rightarrow \mathrm{F}$ " は，ルール適用前に正解 $(\mathrm{T}) /$ 不正解 (F) であったものが，ルール適用後に正解/不正解に変化した件数を表す。“合計”はこれら 3 つの値の合計で，ルールが適用された件数に相当する（“ $\mathrm{T} \rightarrow \mathrm{T}$ ”となったもの，つまり，モダリティ属性が変化しなかったものについては，件数に含めていない). Modifyに適用した場合では，適用対象件数の $5 \%$ 弱にあたる 81 件に対してルールが適用された。適用された事例のうち, 実際に固有表現であった事例に対する正解率は $80 \%$ 程度であった. Modify + Modality に関しては, モダリティ素性の導入により周辺文脈と矛盾するモダリティ属性の推定結果が減ったと考えられ，ルールが適用された件数自体が減少した。しかし，ルールの適用により僅かながら正解数が増加している。

表 6 (a) の下半分には, MedNLP 症状と診断タスクの成績上位 3 チームである Miura ら (Miura et al. 2013), Laquerre ら (Laquerre and Malon 2013) およびImaichi ら (Imaichi et al. 2013)のシステムの精度を掲載した。従来手法の中では, Total の適合率を除き, いずれも Miura らのシステムの精度が最も高い. これに対し, Total の評価で比較すると, 本システムは適合率を中心に従来手法よりも高く, モダリティ素性と後処理ルールを併用したシステム (Modify + Modality + P-rules) では, 適合率, 再現率, $F$ 值ともに最も高くなっている。また, 提案システムと従来手法の中で精度が高い Miura らのシステムについて, モダリティ属性ごとの精度を表 6 (b) に掲載した. Miura らのシステムでは positive および negation の再現率が高く, 多数派クラスの網羅的な抽

表 7 後処理ルール適用の効果


出の点で優れている。しかし, 適合率ではどの属性についても本システムの方が高く, 特に, 少数派クラスである suspicion, familyの認識では, 適合率, 再現率ともに大きく上回っている. したがって，モダリティ属性の分類を含めた抽出では, 従来手法と比べて, 我々の手法が最も正確な用語抽出を実現できており，事例数の少ないクラスに対して頑健な推定を実現できているといえる。

一方，表 6 (a)における 2-wayの評価では，特に，再現率が Miura らのシステムと比べて 3 ポイントほど低く, 本システムは症状・診断名抽出の網羅性の点で劣っている。修飾語の付加を行う拡張マッチングでは, 主要語が主要語辞書に含まれない場合には対応できないという限界があるため，再現率を高めるには，コーパスから修飾語だけでなく新たな主要語も獲得する方法が必要となる。また, 診療記録中の症状・診断名と共起しやすい「〜出現」「〜増悪」などの表現は，未知の主要語を認識する際の手がかりとして有効利用できる可能性がある.

## 6 おわりに

本稿では, 症例検索などの基礎技術として重要である症状名・診断名の抽出に焦点を当て, 語彙資源を有効活用した用語抽出について報告した，語彙資源活用の 1 点目として，コーパス中の用語に対して語彙制限を行うことで，用語抽出に真に有用な語彙の獲得を行った． 2 点目として,コーパスから複合語の構成語彙である修飾語を獲得し, 語彙制限後のコーパスの語彙に加えて獲得した修飾語を活用することで，テキスト中のより多くの用語を検出する拡張マッチングを行った．検出された用語の情報は，機械学習アルゴリズム linear-chain CRF をべースとしたシステムの素性として使用した.

NTCIR-10 MedNLP タスクのテストコレクションを用いて抽出実験を行ったところ，単純な辞書の利用と比較して， $F$ 值で 0.4 1.1 ポイントの有意な精度向上が見られ，語彙制限および拡張マッチングの有効性を確認した。 症状・診断名の認識では, 同タスクで1位の Miura ら (Miura et al. 2013)のシステムと比較し，モダリティ属性の分類を含めた認識では本システムが適合率・再現率ともに高い精度を実現した。一方，モダリティ属性を考慮しない場合の症状・診断名認識において再現率が低く, 網羅性の点で劣っていた。語彙制限および修飾語の付加に基づく拡張マッチングでは, 元の語彙資源に含まれない主要語に対応できないという限界があるため, 今後の課題として, 新たな主要語の獲得や, 未知の主要語を認識する方法が必要である.

また，NTCIR-10 MedNLP に続くシェアドタスクである NTCIR-11 MedNLP2 (Aramaki, Morita, Kano, and Ohkuma 2014) では, 表記が異なりかつ同一の対象を指す症状・診断名を同一視する「病名・症状正規化タスク」が設定されている．症例検索などの応用に向けた基礎技術として, 幅広い症状・診断名を抽出することに加え, 抽出した症状・診断名の表記の違いを吸収する技術の開発も重要である。

## 謝 辞

NTCIR-10 MedNLP タスクを主催され，MedNLP テストコレクションをご提供くださいました京都大学デザイン学ユニットの荒牧英治特定准教授ならびに関係者の皆様に感謝申し上げます. MEDIS 病名マスターをご提供くださいました一般財団法人医療情報システム開発センター の関係者の皆様に感謝申し上げます. また, 本研究の一部は, JSPS 科学研究費補助金 25330363 , ならびに私立大学等経常費補助金特別補助「大学間連携等による共同研究」の助成を受けたものです.

## 参考文献

Aramaki, E., Morita, M., Kano, Y., and Ohkuma, T. (2014). "Overview of the NTCIR-11 MedNLP-2 Task." In Proceedings of the 11th NTCIR Workshop Meeting on Evaluation of Information Access Technologies, pp. 147-154.

Collins, M. (2002). "Discriminative Training Methods for Hidden Markov Models: Theory and Experiments with Perceptron Algorithms." In Proceedings of the 2002 Conference on Empirical Methods in Natural Language Processing (EMNLP), pp. 1-8.

Higashiyama, S., Seki, K., and Uehara, K. (2013a). "Clinical Entity Recognition using Costsensitive Structured Perceptron for NTCIR-10 MedNLP." In Proceedings of the 10th NTCIR Conference, pp. 704-709.

Higashiyama, S., Seki, K., and Uehara, K. (2013b). "Developing ML-based Systems to Extract Medical Information from Japanese Medical History Summaries." In Proceedings of the 1st Workshop on Natural Language Processing for Medical and Healthcare Fields, pp. 14-21.

Imaichi, O., Yanase, T., and Niwa, Y. (2013). "A Comparison of Rule-based and Machine Learning Methods for Medical Information Extraction." In Proceedings of the 1st Workshop on Natural Language Processing for Medical and Healthcare Fields, pp. 38-42.

井上大悟, 永井秀利, 中村貞吾, 野村浩郷, 大貝晴俊 (2001). 医療論文抄録からのファクト情報抽出を目的とした言語分析. 情報処理学会研究報告. 自然言語処理研究会報告, 141 (17), pp. 103-110.

Jiang, M., Chen, Y., Liu, M., Rosenbloom, S. T., Mani, S., Denny, J. C., and Xu, H. (2011). "A Study of Machine-learning-based Approaches to Extract Clinical Entities and Their Assertions from Discharge Summaries." Journal of the American Medical Informatics Association (JAMIA), 18 (5), pp. 601-606.

木浪孝治, 池田哲夫, 村田嘉利, 高山毅, 武田利明 (2008). 看護学分野の専門用語抽出方法の
研究. 自然言語処理, 15 (3), pp. 3-20.

Kudo, T., Yamamoto, K., and Matsumoto, Y. (2004). "Applying Conditional Random Fields to Japanese Morphological Analysis." In Proceedings of the 2004 Conference on Empirical Methods in Natural Language Processing (EMNLP), pp. 230-237.

Lafferty, J., McCallum, A., and Pereira, F. (2001). "Conditional Random Fields: Probabilistic Models for Segmenting and Labeling Sequence Data." In Proceedings of the 18th International Conference on Machine Learning (ICML), pp. 282-289.

Laquerre, P. F. and Malon, C. (2013). "NECLA at the Medical Natural Language Processing Pilot Task (MedNLP)." In Proceedings of the 10th NTCIR Conference, pp. 725-727.

McCallum, A. and Wei, L. (2003). "Early Results for Named Entity Recognition with Conditional Random Fields, Feature Induction and Web-enhanced Lexicons." In Proceedings of the 7th Conference on Natural Language Learning (CoNLL-2003), pp. 188-191.

Miura, Y., Ohkuma, T., Masuichi, H., Shinohara, E., Aramaki, E., and Ohe, K. (2013). "Incorporating Knowledge Resources to Enhance Medical Information Extraction." In Proceedings of the 1st Workshop on Natural Language Processing for Medical and Healthcare Fields, pp. 1-6.

Morita, M., Kano, Y., Ohkuma, T., Miyabe, M., and Aramaki, E. (2013). "Overview of the NTCIR-10 MedNLP Task." In Proceedings of the 10th NTCIR Conference, pp. 696-701.

Sang, E. F. and Veenstra, J. (1999). "Representing Text Chunks." In Proceedings of the 9th Conference on European Chapter of the Association for Computational Linguistics, pp. 173-179.

Sha, F. and Pereira, F. (2003). "Shallow Parsing with Conditional Random Fields." In Proceedings of the 2003 Conference of the North American Chapter of the Association for Computational Linguistics on Human Language (HLT-NAACL), pp. 213-220.

上杉正人 (2007). N-gram と相互情報量を用いた医療用語抽出のための分割点の探索. 医療情報学, 27 (5), pp. 431-438.

Uzuner, Ö., South, B. R., Shen, S., and DuVall, S. L. (2011). "2010 i2b2/VA Challenge on Concepts, Assertions, and Relations in Clinical Text." Journal of the American Medical Informatics Association (JAMIA), 18 (5), pp. 552-556.

Uzuner, Ö., Goldstein, I., Luo, Y., and Kohane, I. (2008). "Identifying Patient Smoking Status from Medical Discharge Records." Journal of the American Medical Informatics Association (JAMIA), 15 (1), pp. 14-24.

Uzuner, Ö., Luo, Y., and Szolovits, P. (2007). "Evaluating the State-of-the-art in Automatic De-identification." Journal of the American Medical Informatics Association (JAMIA), 14 (5), pp. 550-563.

Uzuner, Ö., Solti, I., and Cadag, E. (2010). "Extracting Medication Information from Clinical Text." Journal of the American Medical Informatics Association (JAMIA), 17 (5), pp. 514-518.

## 付録

## A モダリティ素性における正規表現

モダリティ素性において，各属性のモダリティ表現を捉えるために用いた正規表現を記載す

お, “ $X \mid Y$ ”は $X$ または $Y$ との一致, “ $\left[X_{1} X_{2} \ldots X_{N}\right]$ ” は $X_{1}, X_{2}, \ldots, X_{N}$ のいずれかとの一致, “()”はパターンのグループ化, “?”は直前のパターンの 0 回または 1 回の出現を表す.また,

相当する文字列が後続しない $X$ にマッチする.

## Negation のモダリティ表現

Negation 属性のモダリティ表現のために用いた正規表現を以下に示す.

・ [はがを]?(([認め|みとめ|見|み $\mid$ 得 $\mid え)(られ) ?) ?([$ 無な](い|く|かっ)|せ?ず)
- $\quad[$ はがを $]$ ?((消失|除外) $(? !$ !?(な $[$ いかくし])|せず))
- [はがもの](改善| 陰性 | 宽解)(?!し?(な [いかくし])|せず)
- (の (所見 $\mid$ 既往) が?)?[無な](し|い|く|かった)

## Suspicion のモダリティ表現

Suspicion 属性のモダリティ表現のために用いた正規表現を以下に示す.
- の?(疑い|うたがい)

## Family のモダリティ表現

Family 属性のモダリティ表現のために用いた正規表現を以下に示す. なお, “[父母]”に後続する “(?)” というパターンは，医療用語である「母指」や「母趾」とのマッチを防ぐために用いた。
- [祖伯叔]?[父母](?) 親?| お [じば]|[兄弟姉妹娘]| 息子|従 (兄弟|姉妹)


## B修飾語の限定に用いたひらがな表現

語彙資源から修飾語を獲得する処理において, 修飾語の限定の際に用いた主にひらがなから構成される表現を以下に記載する。

助詞・連語が，の，を，に，へ，と，から，より，で，など，のみ，における

連体詞その

接続詞または，あるいは，および，かつ

助動詞な

形容詞ない, なし

動詞・名詞・助詞・助動詞の組合せからなる語する，よる，ある，あり，して，した，ならない，なった，のための

漢字を含む表現伴う, 伴わない, 生じない, 疑い, 著しい, その他, 手当て, 比較して

## 略歴

東山翔平：2012 年神戸大学工学部情報知能工学科卒業. 2014 年神戸大学大学院システム情報学研究科博士前期課程修了. 現在, NEC 情報・ナレッジ研究所に在籍. 自然言語処理, 情報抽出の研究に従事.

関和広：2002 年図書館情報大学情報メディア研究科修士課程修了. 2006 年インディアナ大学図書館情報学研究科博士課程修了. Ph.D. 神戸大学助教等を経て現在甲南大学知能情報学部准教授. 情報検索, データマイニングの研究に従事. 情報処理学会, 電子情報通信学会, 人工知能学会各会員.

上原邦昭：1978 年大阪大学基礎工学部情報工学科卒業. 1983 年同大学院博士後期課程単位取得退学. 工学博士. 同産業科学研究所助手, 講師, 神戸大学工学部情報知能工学科助教授等を経て, 現在同大学院システム情報学研究科教授. 人工知能, 特に機械学習, マルチメディア処理の研究に従事. 電子情報通信学会, 計量国語学会, 日本ソフトウェア科学会, AAAI 各会員.

$(2014$ 年 9 月 21 日 $\quad$ 受付 $)$
$(2015$ 年 1 月 11 日 $\quad$ 再受付 $)$
$(2015$ 年 3 月 3 日 $\quad$ 採録)