"前処理"の記事一覧

テキストを単語IDの配列に変換する―RNNで文章生成〈7〉

サムネイル画像
第7回目の今回は前回、前々回と使用した日本語単語ベクトルchiVeを使用して、分かち書きしたコーパスを単語IDの配列へ変…

コーパスの整形とSudachiによる分かち書き―RNNで文章生成〈4〉

サムネイル画像
第4回目の今回は収集したコーパスに前処理を行っていきます。小説のテキストはそのまま学習モデルに入力することはできないので…