Quick-Thoughtとは 2018年に登場した文の分散表現獲得手法の一つ。 Skip-Thought(2015)が「前後の文を予測して生成する」モデルなのに対し、 Quick-Thoughtは「次の文を文グループから選んで当てる」モデル。 「生成する」タスクより「選択する」タスクの方…

実装①単純な形態素解析 import MeCab m = MeCab.Tagger() print m.parse(text) 実装②必要な品詞のみ抽出 ''' 文や文章を渡すと、MeCabで必要な品詞だけ抽出する関数。 ''' def getTokenlistFromline(text,hinshi): token_list = [] m = MeCab.Tagger('-Ochas…