論文 ·日本語 ·未確認

『現代日本語書き言葉均衡コーパス』の文境界修正

小西光・中村壮範・田中弥生・間淵洋子・浅原正幸・立花幸子・加藤祥・今田水穂・山口昌也・前川喜久雄・小木曽智信・山崎誠・丸山岳彦・ KONISHI Hikari ・ NAKAMURA Takenori ・ TANAKA Yayoi ・ MABUCHI Yoko ・ ASAHARA Masayuki ・ TACHIBANA Sachiko ・ KATO Sachi ・ IMADA Mizuho ・ YAMAGUCHI Masaya ・ MAEKAWA Kikuo ・ OGISO Toshinobu ・ YAMAZAKI Makoto ・ MARUYAMA Takehiko

刊行年: 2015-07
収録: 『国立国語研究所論集』 pp. 81-100
出版: 国立国語研究所
crid: 1390572174721273728
naid: http://ci.nii.ac.jp/naid/KJ00009850963
uri: https://repository.ninjal.ac.jp/records/471
ndl_bib_id: 026647978
issn: 2186-134X
doi: 10.15084/00000462
URL: https://cir.nii.ac.jp/crid/1390572174721273728

要旨

『現代日本語書き言葉均衡コーパス』第1.0版(Maekawa et al. 2014)(以下BCCWJ)には「文境界」の情報がアノテーションされているが,その認定基準の妥当性について従来から様々な指摘がある(小西ほか2014,長谷川2014,田野村2014)。この問題に対処するために,国立国語研究所コーパス開発センターでは2013年から2014年にかけて,BCCWJの修正を行った。本稿ではその修正作業について報告する。第1.0版におけるBCCWJ 文境界情報の問題は,コーパス構築の過程において文境界を含む文書構造タグの整備と形態素列レベルの情報の整備とを並行して行ったために,文字情報を用いる文境界処理にとどまったことに由来する。今回,形態論情報に基づいた文境界基準を策定し,問題の解消を試みた。文境界修正の指針を示すとともに,文境界修正に用いた作業環境と,修正件数について報告する。

主題

現代日本語書き言葉均衡コーパス文境界アノテーション修正基準修正環境

この書誌の出所

cinii— 1390572174721273728（2026-08-12取得）

引用キー: 小西2015現代日本語書き言葉均