Akky@サイボウズ・ラボ : Pushshift.io - reddit掲示板の過去投稿を提供するwebサービス/APIpushshift.io は、英語圏の巨大掲示板 reddit の過去の書き込みを蓄積し提供しているサイトです。ジェイソン・バウムガートナーさん(Jason Baumgartner)という個人の方による運営です。 FAQ ページを読むと、過去のデータを期間やキーワード、ユーザー等で一括取得したい時に使うサービスだということ。新規のコメントをリアルタイムで取得したい時は reddit 公式の API を使ったほうが良いとありますね。 reddit は巨大な掲示板なので、データ量も相当になると思いますが、 Pushshift は個人 + 寄付によって維持されているようです。 Pushshift API を使ったサービス 過去の膨大なコメントにAPIやCSVでアクセスできるということで、これを利用したサービスもいろいろ存在するようです。 revddit 任意の reddit ユーザーに対し、削除
GitHub - JustAnotherArchivist/snscrape: A social networking service scraper in Python
GitHub - antitree/osint_poc: Various OSINT based scripts that demonstrate basic functions of analytics, filtering, and visualizing
GitHub - JosephLai241/URS: Universal Reddit Scraper - A comprehensive Reddit scraping/archival command-line tool.
Reddit - Please wait for verification
