研究資源

日本語研究で引くコーパス・辞書・文献データベース・画像アーカイブの目録。 各項目は入口のURL、個別項目のURLの組み立て方、APIの有無、利用条件を持つ。

注釈データ

BCCWJ追加アノテーション(係り受け・並列構造・PAS/分類語彙表) BCCWJ Annotations (BCCWJ-DepParaPAS + BCCWJ-WLSP) 公開 44MB (DepParaPAS 7.4MB + WLSP 37MB)

『現代日本語書き言葉均衡コーパス』(BCCWJ)に対する追加アノテーション層のみ(本文は含まない)

DepParaPAS はNAIST Text Corpus形式/拡張CaboCha形式(データ本体は同梱されずninjal.ac.jpのBCCWJ DVD版購入者向けに別配布、本リポジトリはdoc/ライセンスのみ)。WLSP はTSV(サブコーパス・サンプルID・開始終了位置・分類語彙表番号・機能語/内容語等16列、BCCWJ-WLSP.zip同梱、347,095行)

利用条件: BCCWJ-DepParaPAS は CC BY 4.0(本文除く)/ BCCWJ-WLSP は CC BY-NC-SA 3.0

Kainoki(NPCMJ後継)統語解析コーパス Kainoki Treebank (successor of NPCMJ - NINJAL Parsed Corpus of Modern Japanese) 公開 現代 39MB

現代日本語の多ジャンル(学術エッセイ・青空文庫小説・国会会議録・新聞・白書・Wikipedia・ブログ・教科書・翻訳等)

Penn Treebank様式の括弧付き構成素木(CorpusSearch形式、機能タグ・空範疇・照応情報付き、本文テキスト込み、1ファイル1テキスト495ファイル、UTF-8)

利用条件: CC BY 4.0

Wikipedia日本語アノテーション付きコーパス Wikipedia Annotated Corpus 公開 60MB

日本語Wikipedia記事(形態論・固有表現・係り受け・述語項構造・共参照アノテーション付き)

KNP形式(形態素・固有表現・係り受け・述語項構造・共参照)+ 生テキスト(org/)+ train/dev/testのid分割

利用条件: CC BY-SA 4.0

京大・NTTブログコーパス(KNBコーパス) Kyoto University and NTT Blog Corpus (KNBC) 公開 現代 4.7MB (tar.bz2) / 展開後 corpus1・corpus2・html・bin・manual.pdf

大学生が執筆したブログ記事(携帯電話・京都観光・スポーツ・グルメの4テーマ)

形態素・係り受け・格関係・評判表現アノテーション付きテキスト(corpus1: 記事別、corpus2: テーマ別TSV)

利用条件: 京都大学テキストコーパス互換ライセンス(研究目的での利用、詳細はREADME.txt参照)

京都大学ウェブ文書リードコーパス Kyoto University Web Document Leads Corpus (KWDLC) 公開 現代 79MB

ウェブ文書(ニュース・百科事典的記事・ブログ・商用ページ等)の冒頭3文。収集時期は2011年前後(w201106〜のドキュメントID)

KNP形式(形態素・固有表現・係り受け・格・省略照応・共参照)+ 談話関係アノテーション(disc/)+ 生テキスト(org/)+ train/dev/testのid分割

利用条件: 明示的なLICENSEファイルなし。研究目的での利用を想定した配布(README参照、著作権者からの削除要請に応じ更新)

書誌 34,896件 語別索引 17,251件 資源 113件 研究者 303名 JSON