Mais conteúdo relacionado
Mais de kunihikokaneko1 (20)
ae-8. 自然言語処理(問答,要約,テキスト生成,単語の特徴ベクトル,単語の類似度)
- 15. 自然言語の処理の例
• 問答
• 要約
• テキスト生成
• 分類
• 翻訳
• 欠損の補充
• 文章の類似度
• 人間の言葉として正しいか正しくないかの判定
• 文法に関するもの(品詞,係り受け) など
15
- 27. 27
Stefan Evert, Marco Baroni and Aslessanddro Lenci,
Distributional Semantic Models, Tutorial as NAACL-HLT 2010, 2010.
http://wordspace.collocations.de/lib/exe/fetch.php/course:acl2010:naacl2010_part1.slides.pdf
値は、2つの単語の共起頻度(共起する回数)
cat, pig
と傾向が似ている
ヒエログリフの ??? の単語は,何と似ているか?
(??? の単語の意味は、実は dog である)
- 46. ② 自然言語処理(問答、要約、テキスト生成)
(Transformer を使用)
1. 使用するページ:
https://colab.research.google.com/drive/1L9n5E0_BTRy1q0j
E1I2xT3MTuSpceVSY?usp=sharing
2. 必要な事前知識
Google Colaboratory の使い方
3. 各自で行うこと
• コードセルの1-③,2-③,3-④を書き換えることに
より、「自分の考えた文章」で、問答、要約、テキスト生
成を考えてみること
• 必ずしも成功するわけではない
• いろいろ試し「どういう場合には成功しそうか」、「どう
いう用途で本当に役に立ちそうか」を考察してみる 46