WEKO3
アイテム
『国語研日本語ウェブコーパス』からの新規語彙素獲得の試み
https://doi.org/10.15084/00001693
https://doi.org/10.15084/000016936aa48338-d5f8-43c9-b8d5-b0e9f7bf4ea9
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
LRW-2018-62-P-4-13.pdf (349.3 kB)
|
|
| Item type | 会議発表論文 / Conference Paper(1) | |||||
|---|---|---|---|---|---|---|
| 公開日 | 2019-02-14 | |||||
| タイトル | ||||||
| タイトル | 『国語研日本語ウェブコーパス』からの新規語彙素獲得の試み | |||||
| タイトル | ||||||
| タイトル | An Attempt to Extract New Lemma Candidates from Ninjal Web Japanese Corpus | |||||
| 言語 | en | |||||
| 言語 | ||||||
| 言語 | jpn | |||||
| キーワード | ||||||
| 主題Scheme | Other | |||||
| 主題 | 国語研日本語ウェブコーパス(NWJC) | |||||
| キーワード | ||||||
| 主題Scheme | Other | |||||
| 主題 | UniDic | |||||
| キーワード | ||||||
| 言語 | en | |||||
| 主題Scheme | Other | |||||
| 主題 | NINJAL Web Japanese Corpus (NWJC) | |||||
| キーワード | ||||||
| 言語 | en | |||||
| 主題Scheme | Other | |||||
| 主題 | UniDic | |||||
| 資源タイプ | ||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||
| 資源タイプ | conference paper | |||||
| ID登録 | ||||||
| ID登録 | 10.15084/00001693 | |||||
| ID登録タイプ | JaLC | |||||
| 著者 |
岡, 照晃
× 岡, 照晃 |
|||||
| 著者所属 | ||||||
| 内容記述タイプ | Other | |||||
| 内容記述 | 国立国語研究所 | |||||
| 著者所属(英) | ||||||
| 内容記述タイプ | Other | |||||
| 内容記述 | National Institute for Japanese Language and Linguistics | |||||
| 会議概要（会議名, 開催地, 会期, 主催者等） | ||||||
| 内容記述タイプ | Other | |||||
| 内容記述 | 会議名: 言語資源活用ワークショップ2018, 開催地: 国立国語研究所, 会期: 2018年9月4日-5日, 主催: 国立国語研究所 コーパス開発センター | |||||
| 抄録 | ||||||
| 内容記述タイプ | Abstract | |||||
| 内容記述 | 『国語研日本語ウェブコーパス（NWJC）』は、国立国語研究所がこれまで公開してきた『現代日本語書き言葉均衡コーパス（BCCWJ）』や『日本語話し言葉コーパス（CSJ）』と異なり、形態論情報をすべて形態素解析器『MeCab』と『解析用UniDic』を使って自動付与している。『BCCWJ』や『CSJ』といった既存のコーパスの整備の際には、コーパスアノテーションと同時に、形態論情報のデータベースである『UniDic DB』に新規短単位語彙素を追加していた。そのためコーパス整備と同時に『UniDic DB』も拡張されてきたが、『NWJC』は全自動で構築されたため、新規短単位語彙素の検出とDBへの登録が行われておらず、その箇所で自動解析誤りのままとなっている。そこで本研究では、形態素解析を介さず、文字N-gramの出現頻度と連接頻度の情報から文字N-gramの分散表現を作成し、『NWJC』から『UniDic DB』に未登録の新規短単位語彙素の候補を列挙する方法について述べる。これによりDBのさらなる拡張が望めるだけでなく、『UniDic DB』のエクスポートデータで作成される『解析用UniDic』も拡張されるため、それを用いた再解析によって『NWJC』中の誤解析箇所を減らすことにもつながる。 | |||||
| 書誌情報 |
言語資源活用ワークショップ発表論文集 en : Proceedings of Language Resources Workshop 巻 3, p. 586-592, 発行日 2018 |
|||||
| 関連サイト | ||||||
| 識別子タイプ | URI | |||||
| 関連識別子 | https://pj.ninjal.ac.jp/corpus_center/lrw2018.html | |||||
| 関連名称 | 言語資源活用ワークショップ2018 | |||||
| フォーマット | ||||||
| 内容記述タイプ | Other | |||||
| 内容記述 | application/pdf | |||||
| 著者版フラグ | ||||||
| 出版タイプ | VoR | |||||
| 出版タイプResource | http://purl.org/coar/version/c_970fb48d4fbd8a85 | |||||
| 出版者 | ||||||
| 出版者 | 国立国語研究所 | |||||
