# 対話での共通基盤構築過程における名付けの分析

齋藤結 1 光田航 ${ }^{2}$ 東中竜一郎 ${ }^{2}$ 南泰浩 1
1 電気通信大学 2 日本電信電話株式会社
s1810274@edu.cc.uec.ac.jp
\{koh.mitsuda.td, ryuichiro.higashinaka.tp\}@hco.ntt.co.jp
minami.yasuhiro@is.uec.ac.jp

## 概要

対話研究において，話者が知識や信念を共有する 共通基盤の構築は重要な課題とされてきたが，その 構築過程を分析した研究は少ない. 共通基盤の構築過程が記録されたコーパスを調査したところ，図形配置課題に関する図形オブジェクトへの「名付け」 が多く見られており，この名付けが共通基盤の構築 に重要である可能性がある。本研究では，共通基盤構築過程が記録されたコーパスに対する名付けのア ノテーション仕様の作成，および，一定規模のデー タに対するアノテーションを実施した. その結果, オブジェクトについての知識を利用する名付けが 多く出現したことや課題で使用するオブジェクト ごとに使用する名付けの種類が変化することがわ かった。

## 1 はじめに

対話において話者が相互理解を行うためには，話者間で共有される知識や概念といった共通基盤の存在が必要である $[1,2]$. 対話における共通基盤をモ デル化することを目的とし，課題が達成されるまで の過程とその対話を大量に集めモデルを構築する研究が報告されている $[3,4]$. 例えば宇田川ら [3] は，初期状態が互いに異なる複数の点の中から共通す る点を選ぶタスクを設計し，対話履歴とタスクの結果を収集した. さらに収集したデータセットに対し て，指示語と指示内容を結びつけるアノテーション を実施した [5]. また光田ら [4] は，宇田川らが設計 したタスクを参考に初期位置が互いに異なる複数の 図形を対話を通して同じ配置にする実験を設計し，課題を達成するまでの対話内容とそれに対応する図形配置が定量的に記録されたデータを収集した.

図 1 に先行研究 [4] で収集された対話例を示す.話者 B が発話 $U_{2}$ で円を「自動車の車輪」と名付け

 & \\

図 1 名付けを通して共通基盤構築が進む対話の例 (数字 は発話 ID，A，B は話者を表し，作業画面はそれぞれの話者が見ているものを示している。)

たことで話者 $\mathrm{A}$ は発話 $\mathrm{U}_{3}$ で「トラック」をイメー ジし話している。それに対して話者 $B$ は発話 $\mathrm{U}_{4}$ で 四角形を「トラックの運転席」と「荷台の部分」と 名付けることでどの位置にどの図形を配置するかの 方針が相手にも伝わっている。このようにオブジェ クトに対して「トラック」のような名付けをするこ とで，目標を決定したり，オブジェクトの操作を指示したりしていると考えられる。.このような名付け は共通基盤の構築において重要な役割を持っている 可能性がある.

本稿では，名付けに着目して共通基盤の構築過程 を明らかにすることを目指し，先行研究 [4] で収集 されたデータセット（共同図形配置コーパスと呼 ぶ）に対して名付けのアノテーションを行う仕様を 作成し，実際にアノテーションを行った結果とその 予備的な分析について報告する。

## 2 共同図形配置コーパス

図 2 亿，本研究で名付けの対象として利用する共同図形配置コーパスの作業用ツールについて示し, その概要を述べる.

本コーパスでは作業者 2 名がペアとなり，ツール を通じて図形の配置と対話を行う．各作業者の画面 には，同数の図形が異なる図形配置で表示される。作業者は相手と対話をしながらマウスを使用して図形を動かし，2 名で同じ図形配置を作る.このとき 各作業者は相手の図形配置を見ることはできない.図形の数は 5 個または 7 個，種類は重複あり，大き さはランダムである. 図形の回転，縮小拡大，削除 はできず移動のみが可能である．相手と同じ図形配置を作成すればこの作業は成功となる [4].

図 3 にこの作業で利用される図形を示す. 1つ目 が上部に示す三角や四角などの単純図形で，2つ目 が下部に示す建物などの前提知識を利用できる建物図形である. それぞれ 10 種類存在する. 共同図形配置コーパスには単純図形を用いた対話が 489 対話，建物図形を用いた対話が 495 対話が含まれ，合計 984 対話である.

## 3 名付けのアノテーション仕様

本節ではまず，本研究のアノテーション対象とな る「名付け」と「参照」を定義する. 次に，予備分析の結果，名付けのアノテーションは 2 種類の情報 （図形個個数・配置に関する分類，および，名付けの 名称に関する分類）に分けられることがわかったた め，その詳細について述べる。 トライアルアノテー ションと仕様の改善を繰り返し行うことで本仕様を 作成した.

## 3.1 「名付け」と「参照」の定義

本研究では「名付け」を以下のように定義する。

名付け 単純図形または建物図形 1 つまたは複数個 と何らかの名前を結びつけること

また，一度名付けた名前を再利用したり，名付けた 名前を新たに名付けしたりすることもある。 それら の行為は「参照」とし，以下のように定義する。

参照 同一の図形に関連づいている名前を使用する こと

共同図形配置コーパス中の名付けを予備分析で分析したところ 2 つの分類に分けられることがわかっ

図 2 共同図形配置コーパスで利用されている作業用ツー ルの画面（片方の作業者に提示される画面）

図 3 共同図形配置コーパスで利用されている単純図形 (上部)，および，建物図形（下部）

た. 1 種類目は「個数・配置に関する分類」である.名付け対象の図形の数と名付けを発話した時点での 名付け対象の図形の配置状態でラベル付けを行う. これに注目した理由は，名付けと関連づいている図形の数や図形の配置状態に違いがあることがわかっ たからである．また，図形の数によって名付けの質 も変わり、最終的なゴールに対しての名付けは対話 の方向性やタスクの達成の成否に関わり共通基盤の 形成に大きくかかわるのではないかと考えたからで ある。

2 種類目は「名称に関する分類」である。これに 注目した理由は名付けた名前の分類が名付けが対象 とする図形種などにより変化すると考えたからであ る. 以降，各々について説明する。

## 3.2 個数・配置に関する分類

表 1 の上部に，個数・配置に関する分類の体系を 示す. 名付けの対象となる図形の数と, その図形配置が今あるものかを表す. 図形の個数は 1 つか複数個か，名付けを発話した時点で名付けの対象となる 図形の配置がすでにあるかどうかで分けた．分類の 数は 3 種類のラベルとし, 1 つの名付けにつき 1 つ のラベルを付与する. 図形/建物 1 つの例を図 4 , 図形/建物複数・目標の例を図 5 , 図形建物複数・その 他の例を図 6 に示す.

## 3.3 名称に関する分類

表 1 下部に名称に関する分類の体系を示す. 名称 に付与される名付けのラベルを 15 種類に分類した.予備分析の結果, 修飾語が含まれている名付けが多数存在したので，修飾語についてのラベルと，名詞 についてのラベルを用意した. 1 つの名付けに対し て 2 種類の情報がマルチラベルで付与される.

## 4 アノテーションの実施と分析

## 4.1 アノテーションの実施

外部のアノテータ 6 名に依頼しアノテーションを 行った. 最初にツールの使い方とアノテーションの 仕方に慣れてもらうために，作業の練習を行った.公園は坁役所のとなりじやないです か?

図 4 図形/建物 1 つの例，名付けの対象が 1 つの図形で ある.

図 5 図形/建物複数・目標の例.「ランプ」の対象は「円」 と「台形」であり，この発話時点で「ランプ」は配置され ていない.

図 6 図形/建物の複数・その他の例,「蛇口みたいな形」 は図形全てが対象であり，この発話時点で「蛇口みたい な形」が配置されている。

図 7 名付けをアノテーションした例. 矩形は名付けを表 し，エッジは参照を表す。

アノテーションはbrat[6] を用いて実施した，bratで アノテーションを行った例を図 7 に示す.

アノテーション作業では，作業者を 2 グループに 分けて作業を実施した. 1 グループ目では， 2 人の アノテータが同じ 20 対話にアノテーションを行っ た. 2 グループ目では，残りのアノテータ 4 人が分担して重なりのない 160 対話にアノテーションを 行った. 前述のアノテーションの結果，単純図形の 対話が 89 対話，建物図形の対話が 91 対話の計 180 対話となった。
表 2 一致率および $\kappa$ 值（個数・配置のみは計算可能なも ののみが対象）

## 4.2 アノテーター致率

表 2 に 2 人のアノテータのアノテーションについ て，名付けスパンの一致率と名称に関する分類のみ の $\kappa$ 値，個数・配置に関する分類のみの $\kappa$ 値，2つ を組み合わせた $\kappa$ 値と参照の一致率の 5 つを示す. この表から，高い一致率でアノテーションができて おり，仕様の妥当性が確認できた。

## 4.3 アノテーション結果の分析

各名付けの頻度について調査し，全体的な各名付 けの傾向について述べる. アノテーションされた 180 対話には，名付けの数が 3476 個， 1 対話の平均数が約 19 個，異なり名付けの数が 1213 個， 1 対話 につき約 8 個存在した. 異なり名付けの総数が名付 けの数の半分以下であることから，対話の中で多く の共通の名付けが出現していることがわかる. 名称 に関する分類で「登録名」にラベル付けされたもの を除いて，上位 5 つを調査した結果，単純図形では，頭 : 19 回，家：18 回，直角三角形 : 14 回，それ: 14 回, これ: 13 回, また, 建物図形では, BAR: 31 回,街 : 30 回，ビル群：16 回，交番：16 回. 警察署：16 回出現した. この結果から, 建物図形で頻出の名付 けの回数が単純図形の名付けの回数よりも多いこ とがわかる. 建物図形の名付けは建物名の名付けが 多いが，単純図形はイメージしやすい体に関する多様な名前が利用されている。また指示語である「そ れ」が比較的多く使用されており，お互いの画面が 見えない状況下でも, 指示語が発話される傾向が確認された。

個数・配置に関する分類の出現回数ついても述べ ると, 図形/建物 1 つが 2366 個, 図形/建物複数・目標が 167 個，図形/建物複数・その他が 943 個となっ た. 図形/建物複数・目標は 1 対話に 2 回以上出現し ない傾向がある. 図形建物 1 つでは，BAR，交番，街, 図形/建物複数・目標では, 街, 顔, 家, 図形/建物複数・その他では，それ，手，街となった。これ らの結果から図形/建物複数・目標は他の 2 つのラべ ルと役割が違うことがわかる. 特に図形建物複数・

図 8 上：名付けの出現回数を時系列で示した図,下：図形建物複数・目標の出現回数を時系列で示した図

目標の名付けは構成要素を多く含む名付けが多い. これより図形/建物複数・目標の名付けの仕方で図形/建物 1 つと図形/建物複数・その他の名付けの仕方が変化すると考えられるので図形建物複数・目標 の名付けは重要な要素と考えられる。

図 8 上部に各ターンにおける名付けの出現回数,下部に各ターンにおける図形/建物複数・目標の出現回数を示す。まず上部から，対話の前半での名付け の回数が多いことがわかる. すなわち，対話の前半 で名付けを多く行って共通基盤を構築し，対話の後半では構築した共通基盤を利用して対話を進めてい ると考えられる。次の 2 つのグラフを見比べると，目標設定は対話の早い段階で行われていることがわ かる。このことから，名付けを通して最初に目標設定を行うことで共通基盤の構築を効率的に進めてい る可能性が考えられる。

## 5 おわりに

本稿では，名付けに着目して共通基盤構築の過程 を明らかにするため, 名付けのアノテーション仕様 の作成，アノテーションの実施，予備的な分析を 行った結果について述べた. アノテーションの仕様 が妥当であること，分析の結果対話の中で多くの共通する名付けが出現することや名付けに用いた図形 によって出現頻度が高い名付けが異なること，目標 を決める名付けは他の名付けとは違う役割を持つこ とがわかった．今後は収集したデータを用いて有効 な名付けの仕方や対話中でどのタイミングにどうい う名付けがされやすいかなどの分析をさらに進めて いきたい.

## 参考文献

[1] David R Traum. A computational theory of grounding in natural language conversation. Technical report, Rochester Univ NY Dept of Computer Science, 1994.

[2] Herbert $\mathrm{H}$ Clark. Using language. Cambridge university press, 1996.

[3] Takuma Udagawa and Akiko Aizawa. A natural language corpus of common grounding under continuous and partially-observable context. In Proc. of AAAI, pp. 71207127, 2019.

[4] 光田航, 東中竜一郎, 大賀悠平, 杵渕哲也. 共同図形配置課題における対話の共通基盤構築過程の分析. 言語処理学会第 27 回年次大会発表論文集 (NLP2021), pp. 1697-1701, 2021.

[5] Takuma Udagawa and Akiko Aizawa. An annotated corpus of reference resolution for interpreting common grounding. In Proc. of AAAI, pp. 9081-9089, 2020.

[6] Pontus Stenetorp, Sampo Pyysalo, Goran Topić, Tomoko Ohta, Sophia Ananiadou, and Jun'ichi Tsujii. brat: a webbased tool for NLP-assisted text annotation. In Proc. of EACL, pp. 102-107, 2012.
 齋藤結 1 光田航 ${ }^{2}$ 東中竜一郎 ${ }^{2}$ 南泰浩 1 1 電気通信大学 2 日本電信電話株式会社 s1810274@edu.cc.uec.ac.jp \{koh.mitsuda.td, ryuichiro.higashinaka.tp\}@hco.ntt.co.jp minami.yasuhiro@is.uec.ac.jp  