データ分析をする中で一番、感覚的かつ身近なもの(Twitter等)で分析が出来る手法がテキストマイニングです。 出来そうなことは多そうだけどどうやるの? と気になる人も多いと思うので下記に整理します。 尚、テキストマイニング(自然言語処理)の統計的な成り立ちや仕組については下記でまとめております。 今回の論点整理 ”スクレイピング・テキストマイニング“の使いドコ 今回はネット上のテキストを読み込んで(スクレイピング)その情報を元に整理・分析(テキストマイニング)します。 上記のように実際のHP等、WEB上のデータなどの情報を抽出しながら整理することが出来ると分析の幅が広がります。 ※ただ、ウェブ上のデータを抽出するスクレイピングは機密情報を引き抜いたりするなど違法行為にも繋がりやすいので取り扱いには注意が必要です。 ご参考ページ(外部リンク) 具体的な想定場面 今回の想定は以下のような場合
![【Python入門】WEB上のデータを抽出してテキストマイニング | キャリアの実験室](https://cdn-ak-scissors.b.st-hatena.com/image/square/30f749b37ac80d93ebecb1128d83c8f6a0b0b4c8/height=288;version=1;width=512/https%3A%2F%2Flife-table.com%2Fwp-content%2Fuploads%2F2020%2F09%2Ff0dcaa163de9b375b0f8050307d8c361.png)