こんにちはRicoです! 今回は、弊社がHRogリストやHRogチャートなどの サービスを提供するまでに、どのようなことを行っているのか、 説明させていただこうと思います! みなさんに、より簡単に想像をしていただくため、 魚の流通過程に例えて説明させていただきます。 データ取得からサービス提供まで ①クローリング まずは「クローリング」と言って、 各媒体の詳細ページ上にあるHTMLを テキストデータとして取得してきます。 魚の流通過程で例えますと、こちらの作業は 漁獲に当たる部分となります。 漁場(各媒体)へ行き、 魚(データ)を漁ってくるという 漁業(データ取得)の根本となる部分です。 その際、海が荒れていて船が出せなかったり(通信エラー) 漁場の水質が変わり、漁れるはずの魚が取れなかったり(サイト改変) あらゆる問題が起こりますが、新鮮な魚(データ)を提供するため、 日々その時々に合っ