11件 （「token」）

相槌の特徴に一致した頷き生成モデル 論文

森 大河・伝 康晴 ·2022 ·『人工知能学会論文誌』　37(3)　pp. IDS-H_1-12

doi:10.1527/tjsai.37-3_IDS-H

fugashi, a Tool for Tokenizing Japanese in Python 論文

McCann, Paul ·2020 ·『Proceedings of Second Workshop for NLP Open Source Software (NLP-OSS)』　pp. 44-51

aclanthology.org

活動における発話冒頭要素「さあ」―活動の移行と進行の管理とその規範― 論文

安井 永子・梁 勝奎 ·2025 ·『社会言語科学』　27(2)　pp. 35-50

doi:10.19024/jajls.27.2_35

能《仏原》の作者考再検 論文

尾本 頼彦 ·2020 ·『演劇学論集 日本演劇学会紀要』　70(0)　pp. 19-37

doi:10.18935/jjstr.70.0_19

Byte Pair Encoding is Suboptimal for Language Model Pretraining 論文

Kaj Bostrom・Greg Durrett ·2020-01-01 ·pp. 4617-4624

doi:10.18653/v1/2020.findings-emnlp.414

SpanAlign: Sentence Alignment Method based on Cross-Language Span Prediction and ILP 論文

Katsuki Chousa・Masaaki Nagata・Masaaki Nishino ·2020-01-01 ·pp. 4750-4761

doi:10.18653/v1/2020.coling-main.418

Optimizing Word Segmentation for Downstream Tasks by Weighting Text Vector 論文

Tatsuya Hiraoka・Sho Takase・Kei Uchiumi・Atsushi Keyaki・Naoaki Okazaki ·2021-01-01 ·『Journal of Natural Language Processing』　28(2)　pp. 479-507

doi:10.5715/jnlp.28.479

Scale of ‘Relevance’ and Complementarity: Focusing on Schematic and Poetic Formations of Interaction 論文

Kataoka, Kuniyoshi ·2020-07-01 ·『Journal of Asian Linguistic Anthropology』　2　pp. 77-109

doi:10.47298/jala.v2-i3-a4

Sequential Voicing in Old Japanese 論文

Wenchao Li ·2020-10-27 ·『International Journal of Linguistics』　12(5)　pp. 239-239

doi:10.5296/ijl.v12i5.17733

A Semester-Long Study of Second Language Writing Development and the Effects of Topic Familiarity and Difficulty 論文

Miki Saiki・Miki Okamoto・Naoya Shibata ·2022-06-14 ·『Nagoya JALT Journal』　3(1)　pp. 41-57

doi:10.37546/jaltchap.nagoya3.1-2

Evaluating GPT-4 and ChatGPT on Japanese Medical Licensing Examinations プレプリント

Jungo Kasai・Yuhei Kasai・Keisuke Sakaguchi・Yutaro Yamada・Dragomir Radev ·2023-03-31 ·『arXiv (Cornell University)』

doi:10.48550/arxiv.2303.18027