検索結果

2020年3月に、マイナビエンジニアブログのリニューアルを実施しました。今回はそのリニューアルの内容についてご紹介したいと思います。

自然言語処理を行なう中でよくあるタスクとして、各文の特徴的な単語はどれにあたるのかというものがあります。TF-IDFを使うにしろ、Word2Vecを使うにしろ、そこに渡す内容次第で最終的な内容が大きく変わる可能性もあります。そこで今回は「ストップワードの処理」と「正規化」の観点から下処理を行なおうと思います。

スクレイピングをやってみたい人のために、内定者サイトをスクレイピングしたときのことを記事に書きました。ぜひご参考にしてください。