文書ビッグデータから含意を認識する手法の開発

Material type: 文書・図像類

Author: 斎藤, 博昭

Publisher: 慶應義塾大学

Publication date: 2018

Material Format: Digital

Capacity, size, etc.: -

NDC: -

View All

Notes on use

Note (General)：: type:text本研究における含意とは、ある文（文章）Ｔと仮説Ｈという二つの文おいて、「Ｔが正しい時にＨも正しいと推定できる関係」である。含意関係認識をコンピュータに行わせるタスクは十年以上前から行われてきたが、昨今の人工知能研究の発達に伴い、研究手法の新たな開発が活発になっている。今回は、日本語...

Search by Bookstore

Holdings of Libraries in Japan

This page shows libraries in Japan other than the National Diet Library that hold the material.

List of Cooperating Institutions and Databases

Please contact your local library for information on how to use materials or whether it is possible to request materials from the holding libraries.

other

Keio Associated Repository of Academic resources
Digital
You can check the holdings of institutions and databases with which 学術機関リポジトリデータベース（IRDB）（機関リポジトリ） is linked at the site of 学術機関リポジトリデータベース（IRDB）（機関リポジトリ）.
Keio Associated Repository of Academic resources

Search by Bookstore

Bibliographic Record

You can check the details of this material, its authority (keywords that refer to materials on the same subject, author's name, etc.), etc.

Digital

Material Type: 文書・図像類
Title: 文書ビッグデータから含意を認識する手法の開発
Author/Editor: 斎藤, 博昭
Author Heading: 斎藤, 博昭
Publication, Distribution, etc.: 慶應義塾大学
Publication Date: 2018
Publication Date (W3CDTF): 2018
Alternative Title: ブンショビッグデータカラガンイオニンシキスルシュホウノカイハツ
Bunsho biggu dēta kara gan'i o ninshikisuru shuhō no kaihatsu
A method of textual entailment from big data
Periodical title: 学事振興資金研究成果実績報告書
Text Language Code: jpn
eng
Target Audience: 一般
Note (General): type:text
本研究における含意とは、ある文（文章）Ｔと仮説Ｈという二つの文おいて、「Ｔが正しい時にＨも正しいと推定できる関係」である。含意関係認識をコンピュータに行わせるタスクは十年以上前から行われてきたが、昨今の人工知能研究の発達に伴い、研究手法の新たな開発が活発になっている。今回は、日本語を対象として深層学習を用いた。深層学習の全体の枠組みは踏襲したが、その構成部品として従来行われてきた単純なＲＮＮやＬＳＴＭを使うのではなく、２文間の文節対応を考慮し、かつ外部メモリを取り入れることとした。似た手法は英語の含意関係認識では試みられているが、日本語では初である。具体的には、ＴとＨをまず分散表現（ベクトル）に変換し、それぞれについて外部メモリ付ＬＳＴＭでノードの値を求めた後、アラインメントを施し、含意度を計算するというものである。文節対応においては一般の２分木モデルとともに日本語における自由な語順や係り受けの不安定さに対応できる多子木モデルを試した。さらに、さまざまなハイパーパラメータを探索した。結果として、単純な深層学習モデルの性能を上回り、文節関係や外部メモリの効果、および多子木モデルによる精度向上は確認できた。しかしながら、人手で素性を作りベクトル化する統計ベースの手法には及ばなかった。深層学習では多くのデータが必要だが、今回は1000に満たないデータしか用意できず、結果としてテストデータに含まれる多くの未知語への対応が不十分となった。データ量が桁違いに多い英語に関してデータ量と精度との関係を調べたところ、やはりデータ量に比例して精度が上がることが確かめられたので、含意関係認識という複雑なタスクを深層学習で攻めるには、データ量が少なかったというのが反省点である。 Recognition of textual entailment (RTE) is a research field in natural language processing, where a relation between two sentences is detected; a text T entails a hypothesis H when it is possible to infer "H is true" from "T is true." Various methods have been developed to this task and deep learning is actively pursued recently. In this research tree-LSTM with external memory is adopted. The proposed method surpassed the baseline, but did not reach the performance of conventional support vector machine approaches. The reason was probably the shortage of Japanese RTE data. This result implies that deep learning for complicated tasks needs huge good data.
Source: https://koara.lib.keio.ac.jp/xoonips/modules/xoonips/download.php?koara_id=2018000005-20180034
https://koara.lib.keio.ac.jp/xoonips/modules/xoonips/download.php?koara_id=2018000005-20180034
Access Restrictions: 限定公開
Data Provider (Database): 国立情報学研究所 : 学術機関リポジトリデータベース（IRDB）（機関リポジトリ）
https://irdb.nii.ac.jp
Original Data Provider (Database): 慶應義塾大学 : 慶應義塾大学学術情報リポジトリ