generated at
テキストマイニング
#nlp #Transformer_model #形態素解析 #janome #word2vec

>通常の文章からなるデータを単語や文節で区切り、それらの出現の頻度や共出現の相関、出現傾向、時系列などを解析することで有用な情報を取り出す、テキストデータの分析方法
テキストマイニング - Wikipedia

2019年以降のトレンドを追えてないが、(それまでもツールの利用レベル理解だが)
Transformer modelの出現で、進化が著しい。
続く、大規模言語モデルの出現で、人間の読解力を超える場面が増えてきてる。