yukkuriの検索結果1 - 3 件 / 3件

• あとで読む

  【python】DockerでSeleniumを使い動的サイトをスクレイピング | Yukkuri Machine Learning

  • 4 users
  • laid-back-scientist.com
  • テクノロジー
  • 2022/07/17

  はじめに Webサイトが静的であれば、requests モジュール等を使ってhtmlの解析ができますが、Javascriptを使った動的サイトであればページが読み込まれてからデータが反映されることもあり、静的サイトのように解析ができません。 そのような動的サイトのスクレイピングは、Selenium というライブラリを使用することで可能になります。ただし、Selenium では走らせるブラウザの WebDriver が必要になります。 今回はSeleniumを使ったWebスクレイピング環境をDockerで構築します。 この記事で使用したソースコードは以下のGitHubで利用できます。

  
• あとで読む

  【統計検定対策】多変量データの扱い方 散布図と相関係数 | Yukkuri Machine Learning

  • 4 users
  • laid-back-scientist.com
  • テクノロジー
  • 2022/06/10

  この記事では多変量データの基本的な扱い方として散布図や散布図行列を、要約の方法として相関係数や、順位相関係数、分散共分散行列について述べます。 使用するプログラムはpythonで記載しており、それは以下のGoogle Colabで試すことができます。 \begin{align*} \newcommand{\mat}[1]{\begin{pmatrix} #1 \end{pmatrix}} \newcommand{\f}[2]{\frac{#1}{#2}} \newcommand{\pd}[2]{\frac{\partial #1}{\partial #2}} \newcommand{\d}[2]{\frac{{\rm d}#1}{{\rm d}#2}} \newcommand{\T}{\mathsf{T}} \newcommand{\(}{\left(} \newcommand{\)}{\

  
• あとで読む

  【Docker】Ubuntuのタイムゾーンと日本語化の設定 | Yukkuri Machine Learning

  • 3 users
  • laid-back-scientist.com
  • テクノロジー
  • 2022/08/27

  この記事はubuntuベースのDockerでタイムゾーンを日本時間にする設定と、日本語入力を可能にする設定の備忘録です。 また、Vimで日本語入力を可能にする設定も同時に行います。 日本語化対応のDockerfile dockerfile FROM ubuntu:latest RUN apt update && apt install -y \ sudo \ wget \ curl \ vim \ tzdata \ locales && \ locale-gen ja_JP.UTF-8 # vim setting RUN echo '\n\ set fenc=utf-8\n\ set encoding=utf-8\n\ set fileencodings=iso-2022-jp,euc-jp,sjis,utf-8\n\ set fileformats=unix,dos,mac\n\ syn

  • docker
  • ubuntu
  • あとで読む