【Python】Requestsに対するOAuthlib 認証のサポート「requests-oauthlib」のインストール
Requestsに対するOAuthlib 認証のサポートに対応するライブラリ「requests-oauthlib」のインストールについて解説しています。 「requests-oauthlib（https://github.com/requests/requests-oauthlib,https://requests-oauthlib.readthedocs.org/）」は、Requestsライブラリと OAuthlibライブラリを使用して、OAuth1 および OAuth2 クライアントを構築するための使いやすいインターフェイスを提供している。 ■Python 今回のPythonのバージョンは、「3.9.9」を使用しています。（Windows11）（pythonランチャーでの確認） ■requests-oauthlibをインストールする requests-oauthlibをインストールを行
Pythonでaiofileとrequestsを用いた非同期処理でURLの情報をファイルに書き込み
Pythonでaiofileとrequestsを用いた非同期処理でURLの情報をファイルに書き込みしてみます。 今回はasyncio、aiofile、requests、beautifulSoupを用います。これらのライブラリ・モジュールが事前にインストールされているかを確認しスクリプトを実行してください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■aiofileとrequestsを用いた非同期処理でURLの情報をファイルに書き込みでは、早速aiofileとrequestsを用いた非同期処理でURLの情報を取得し、取得した情報をファイルに書き込みするスクリプトを書いていきます。 ■コードimport asyncio import aiofile import requests from bs4 import Beautiful
Pythonでpeeweeとrequestsを用いてURLから情報の取得とデータベースへの登録
Pythonでpeeweeとrequestsを用いてURLから情報の取得とデータベースへの登録を行ってみます。 今回はpeewee、requests、BeautifulSoupを用います。これらのライブラリ・モジュールがPythonにインストールされているかを確認しスクリプトを実行してください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■peeweeとrequestsを用いてURLから情報の取得とデータベースへの登録では、早速peeweeとrequestsを用いてURLから情報の取得とデータベースへの登録を行うスクリプトを書いていきます。 ■コードimport requests from peewee import * from bs4 import BeautifulSoup # データベースの設定 db = Sqlite
Pythonでdatasetとrequestsを使用しURLからレスポンスを取得する
Pythonでdatasetとrequestsを使用しURLからレスポンスを取得してみます。 なお、今回はdataset、requests、beautifulsoup4を用いますので、事前にこの3つのライブラリがインストールされているかを確認しスクリプトを実行してください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■datasetとrequestsを使用しURLからレスポンスを取得するでは、早速datasetとrequestsを使用しURLからレスポンスを取得するスクリプトを書いていきます。 ■コードimport dataset import requests from bs4 import BeautifulSoup # データベースに接続 db = dataset.connect('sqlite:///:memory:'
Pythonでpurlとrequestsを用いてAPIからのレスポンスを取得する
Pythonでpurlとrequestsを用いてAPIからのレスポンスを取得してみます。 なお、今回はpurlとrequestsを用いますので、事前にこの2つのライブラリがインストールされているかを確認しスクリプトを実行してください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■purlとrequestsを用いてAPIからのレスポンスを取得するでは、早速purlとrequestsを用いてAPIからのレスポンスを取得するスクリプトを書いていきます。 ■コードimport requests from purl import URL # APIエンドポイントのURLを作成 url = URL("https://jsonplaceholder.typicode.com/posts") # GETリクエストの送信 response =
Pythonを用いてTrioとRequestsモジュールを組み合わせてWebサイトのタイトルを取得する
PythonでTrioとRequestsモジュールを組み合わせてWebサイトのタイトルを取得してみます。 今回はTrio、Requests、bs4(beautifulsoup4)を用います。これらのライブラリ・モジュールはPythonの標準ライブラリではないものもありますので、事前に確認しインストールを行ってください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■TrioとRequestsモジュールを組み合わせてWebサイトのタイトルを取得するでは、早速TrioとRequestsモジュールを組み合わせてWebサイトのタイトルを取得するスクリプトを書いていきます。 ■コードimport trio import requests from bs4 import BeautifulSoup # 非同期なタスクを定義する関数 asyn
Pythonでhtml5libとrequestsを用いてテキストコンテンツの抽出する
Pythonでhtml5libとrequestsを用いてWebサイトのテキストコンテンツの抽出してみます。 今回はhtml5libとrequestsモジュールを用います。このライブラリはPythonの標準ライブラリではありませんので、事前にインストールする必要があります。 ■今回の環境（Python） Google Colaboratory(Google Colab),記事作成時点ではPython 3.9.16が用いられる。（事前にhtml5libとrequestsモジュールはインストール済み。） ■html5libとrequestsを用いてWebサイトのテキストコンテンツの抽出するでは、早速html5libとrequestsを用いてWebサイトのテキストコンテンツの抽出するスクリプトを書いていきます。 ■コードimport html5lib import requests # Fetch
【Python】requestsを使用し一部の Web サイトにログインするための API
【Python】requestsを使用し一部の Web サイトにログインするための APIである「DecryptLogin」のインストールについて解説しています。 「DecryptLogin（https://github.com/CharlesPikachu/DecryptLogin,https://httpsgithubcomcharlespikachudecryptlogin.readthedocs.io/en/latest/QUICKSTART.html）」は、任意のWebサイトに対してシミュレートされたログイン操作を実装することができます。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows10）（pythonランチャーでの確認） ■DecryptLoginをインストールするDecryptLoginをインストールを行いますが、今回はp
PythonのRequestsとSQLAlchemyを使用し指定したURLのタイトルを取得しデータベースに書き込む
PythonのRequestsとSQLAlchemyを使用し指定したURLのタイトルを取得しデータベースに書き込んでみます。 今回はRequests、BeautifulSoup、SQLAlchemyを用います。これらのライブラリ・モジュールが事前にインストールされているかを確認し実行する場合は実行してください。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows11） ■RequestsとSQLAlchemyを使用し指定したURLのタイトルを取得しデータベースに書き込むでは、早速RequestsとSQLAlchemyを使用し指定したURLのタイトルを取得しデータベースに書き込むスクリプトを書いていきます。 ■コードimport requests from bs4 import BeautifulSoup from sqlalchemy imp
Pythonでrequestsを使用しWordPress APIから最新の投稿を取得する
Pythonでrequestsを使用しWordPress APIから最新の投稿を取得してみます。 全てのWordPressを利用しているWebサイトには、さまざまな種類の情報を収集するためのJSON APIが存在していますので、このAPIを利用し、最新の投稿を取得します。 なお、今回はrequestsモジュールを使用しますので、Pythonに事前にインストールしておく必要があります。 ※注意※このアプローチを使用し、悪用しないでください。Webスクレイピングは通常は問題ありませんが、誰かのWebサーバーにリクエストをスパム送信しないでください。 ■Python Google Colaboratory(Google Colab),Python3.7.10 ■requestsを使用しWordPress APIから最新の投稿を取得するでは、早速requestsを使用しWordPress APIか
Pythonでrequestsモジュールを使用し、素早く天気予報を確認する
Pythonでrequestsモジュールを使用し、素早く天気予報を確認してみます。 確認する際は、requestsモジュールを必要とします。requestsモジュールはPythonの標準ライブラリではありませんので、事前にインストールしておく必要があります。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。（Windows10）（pythonランチャーでの確認） ■素早く天気予報を確認するでは、早速requestsモジュールを使用し、素早く天気予報を確認するスクリプトを書いていきます。 ■コードimport sys import requests resp = requests.get(f'https://wttr.in/{sys.argv[1].replace(" ", "+")}') print(resp.text)Pythonの標準ライブラリであるs
RequestsとBeautifulSoupを使用しPythonでWebページのコンテンツを取得する
RequestsとBeautifulSoupを使用しPythonでWebページのコンテンツを取得してみます。 なお、RequestsとBeautifulSoupモジュールは、Pythonの標準ライブラリではありませんので、事前にインストールする必要があります。 ■Python 今回のPythonのバージョンは、「3.8.2」を使用しています。（Windows10） ■RequestsとBeautifulSoupモジュールを使用してWebページのコンテンツを取得するでは、早速RequestsとBeautifulSoupモジュールを使用してWebページのコンテンツを取得するスクリプトを書いていきます。 ■コードimport requests from bs4 import BeautifulSoup getwebcontent = requests.get("https://laborator
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
