仕事でPythonコンテナをデプロイする人向けのDockerfile (1): オールマイティ編 | フューチャー技術ブログ
BusterとかStretchという名前が見慣れない方もいるかもしれませんが、これはLinuxディストリビューションとしてシェアの大きなDebianのコードネームです。 Debianバージョンが少し古いStretchの方がちょびっとサイズが小さかったりはしますが、まあ実用的にはサポートが長い方がいいですよね。slimを使ってGCCとかのコンパイラを自前でダウンロードしている記事とかもたまに見かける気がしますが、マルチステージビルドであれば、そんなにケチケチしなくていいのと、パッケージダウンロードは逐次処理なので遅く、処理系が入ったイメージのダウンロードの方が高速です。並列で処理されるし、一度イメージをダウンロードしてしまえば、なんどもビルドして試すときに効率が良いです。また、多くのケースでネイティブのライブラリも最初から入っており、ビルドでトラブルに遭遇することはかなり減るでしょう。 Py
仕事でPythonコンテナをデプロイする人向けのDockerfile (2): distroless編 | フューチャー技術ブログ
なお、distrolessのイメージは2種類（3通りの名前）がありますが、Python 3.5はバグ修正はせず、セキュリティ修正のみでサポート期限が2020/9/13というステータスなので、本エントリーでは3.7の方のみを扱います。 gcr.io/distroless/python3: Python 3.5.3 gcr.io/distroless/python3-debian9: Python 3.5.3(上のイメージと同一) gcr.io/distroless/python3-debian10: Python 3.7.3 一応サンプル等もありますが、どれも1ファイルで構成されたサンプルスクリプトばかりです。前回のsite-packagesにコピーする方法を軽く試したところうまく動かず、シェルもpipもensurepipもないため、ビルドイメージにすることもできません。いろいろ調べた結果、
雑にAmazon GuardDutyのFindingsを全リージョンにまたがって取得してくるPythonスクリプト書いた | DevelopersIO
こんにちは、臼田です。 みなさん、GuardDuty運用してますか？(挨拶 今回はパッと思いついてさっと書いた適当スクリプトを共有します。 コンセプト Amazon GuardDutyをはじめセキュリティ系のサービスを使っているとリージョンをまたがって設定しているので、状態を確認するときにいちいち1つずつ確認するのは面倒ですよね。 というわけでGuardDuty Findingsをバッと全リージョン回して取得したくなりました。 全リージョン回すってシチュエーションはよくあるので昔以下のような記事も書きました。これもよく使うので良かったらどうぞ。 スクリプト こちらです。Python3で実行してください。 import boto3 ec2 = boto3.client('ec2') regions = list(map(lambda x: x['RegionName'], ec2.descr
サーバーアプリ開発環境(Python／FastAPI) | フューチャー技術ブログ
Pythonでお仕事する前提で、現在のところで自分が最適と考えるチーム開発のための環境整備についてまとめてみました。今までももろもろ散発的に記事に書いたりしていたのですが、Poetryで環境を作ってみたのと、過去のもろもろの情報がまとまったものが個人的にも欲しかったのでまとめました。前提としては次の通りです。 パッケージ管理や開発環境整備でPoetryを使う 今時はコードフォーマッター、静的チェックは当たり前ですよね？ コマンドでテスト実行、コードチェックとか実行とかができる（CI/CD等を考えて） VSCodeでもコマンドで実行しているのと同じコードチェックが可能(ここコンフリクトすると困る） デプロイはDockerイメージ コンテナのデプロイ環境でコンテナに割り当てられたCPU能力を比較的引き出せて、スケールさせたら線形にパフォーマンスアップできるようなasyncioを前提とした環境構
asyncioでPythonの非同期処理を書いてみる | DevelopersIO
こんにちは、CX事業本部の夏目です。 LambdaでAWSリソースへアクセスする際に直列的に処理するのではなく、並列的に処理したいことは度々あります。 NodeだとPromiseを使えば簡単にできるのですが、Pythonではどうやるのか気になったので調べてみました。 注意 ここではPython3.5以降を使うことを想定して書いてます。 asyncio モジュール Pythonではasyncioモジュールを使って並列的に処理を書くことができます。 超ざっくり言うと、イベントループを使ってコルーチンを実行しているようです。 それ以上の説明は下記記事を見てください。 Pythonの非同期通信（asyncioモジュール）入門を書きました - ゆくゆくは有へと 非同期処理のことから知らない人向けに Python くらいしかろくに知らない人間が書きました。せっかくキーワードが文法に組み込まれたんだから
CodeGuruにコードレビューされてみたらBoto3の便利機能Waitersを知った話 | DevelopersIO
こんにちは。AWS事業本部のKyoです。 スクリプト、便利ですよね。私も先日「CloudFrontのオリジンを別のものへ変更する」というPythonスクリプトを書いていました。主要な部分は、以下のような形です。 update_distribution 待機 create_invalidation（キャッシュクリア） update_distributionはアップデートのリクエストになるので、レスポンスが返ってきた後、各エッジロケーションにアップデートされた設定がデプロイされるのを数分程度待つ必要があります。ここを待たずにInvalidationを行うとアップデート前の情報が再びキャッシュされる可能性があります。 そんなわけで以下のような実装になりました（簡略化しています）。 client = boto3.client('cloudfront') # CloudFront distribut
Google APIs の認証周りをお世話してくれる Python のライブラリ oauth2client が大分前から非推奨になっていた | DevelopersIO
はじめに テントの中から失礼します、CX事業本部のてんとタカハシです！ 以前、下記の記事で OAuth 2.0 の認証を通して YouTube Data API を叩く Python のコードを載っけました。 その際、YouTube Data API のドキュメントに記載してあるサンプルコードを参考したのですが、OAuth 2.0 の認証を通すために使用されているライブラリoauth2clientは大分前から非推奨になっているようです。 Note: oauth2client is now deprecated. No more features will be added to the libraries and the core team is turning down support. We recommend you use google-auth and oauthlib. For
Python の日付時刻とタイムゾーン - Qiita
使用バージョン Python 3.7.6 pytz 2019.3 tzlocal 1.5.1 更新内容 Python 3.7 で確認 fromisoformat() メソッドの記述追加 datetime クラス Python で日付を扱うクラスは datetime モジュールの datetime クラス。 モジュール名とクラス名が同じで紛らわしいため from を使ってクラスのみを import する。 以下 datetime はクラスを指す。 datetime クラスには 2 種類のインスタンスがある。 aware : タイムゾーン情報を持つ naive : タイムゾーン情報を持たない 地域内・短期間における時刻情報を扱うときには暗黙的に同一タイムゾーン内のデータとして扱いタイムゾーンを意識しないことがある。その場合は naive なデータで構わないことになる。 しかし、多国間にまたがる
PythonのデフォルトエンコーディングをUTF-8にするために - methaneのブログ
Python がテキストファイルを開く時のデフォルトエンコーディングがUTF-8でないことは、多くのWindowsユーザー、特にプログラミング初心者にとって障害になっています。 UnicodeDecodeError で検索すると、多くのWindowsユーザーが問題に遭遇しているのがわかります。 https://qiita.com/Yuu94/items/9ffdfcb2c26d6b33792e https://www.mikan-partners.com/archives/3212 https://teratail.com/questions/268749 https://github.com/neovim/pynvim/issues/443 https://www.coder.work/article/1284080 https://teratail.com/questions/2713
【Python】良い書き方と悪い書き方を知って中級者を目指す🐍 - Qiita
Pythonでコードを書くときのGood/Badプラクティス こちらの記事は、DuomlyによりDev.to上で公開された『 Good and Bad Practices of Coding in Python 』の邦訳版です（原著者から許可を得た上での公開です） 元記事：Good and Bad Practices of Coding in Python ※ 記事の内容に注意すべき点と誤りがあるので、詳しくは注釈まで目を通すことをおすすめします。 （以下、翻訳した本文） この記事は元々 https://www.blog.duomly.com/good-and-bad-practices-of-coding-in-python/ に公開されたものです。 Pythonは可読性を重視した高水準のマルチパラダイムプログラミング言語です。Pythonは、「Pythonの禅」、別名ではPEP 20と
[Python]CSVファイルをGoogleスプレッドシートにアップロードする ｜ DevelopersIO
他のチーム・メンバーとのインターフェースがGoogleスプレッドシートな皆様にとって、いかに楽にGoogleスプレッドシートを更新できるか、というのは頑張りどころです。 今回は、ローカルのCSVファイルをプログラマブルに新規Googleスプレッドシートに変換する方法を紹介します。 もちろん、スプレッドシートをブラウザから新規作成し、CSVファイルをアップロードすることもできますが、もっと楽をしたい怠惰なプログラマーにおすすめです。 2種類のアプローチ 以下の2種類のアプローチがあります。 Google Drive API を使い、CSV ファイルとして更新する方法 Google Sheets API を使い、スプレッドシートの追加、シートの更新をする方法 前者は、ローカルに CSV ファイルが有るケース、後者は、DB に SQL を投げたり、S3 のようなオブジェクトストレージからデータを
![[Python]CSVファイルをGoogleスプレッドシートにアップロードする ｜ DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/ee7e23ce2e16bfce4688cdc510c70d090d6d773a/backend=imagemagick;height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2017%2F07%2Feyecatch-google-sheets.png)
Big Sky :: python 補完のVimプラグイン「jedi-vim」がスゲー
pythonの補完は、vimが標準で配布している物で事足りるかなーとか思ってたけど浅墓すぎた。 今日見つけた jedi-vim は良い。 davidhalter/jedi-vim - GitHub Using the jedi autocompletion library for VIM. https://github.com/davidhalter/jedi-vim 何が良いって精度が良い。そして標準配布の pythoncomplete がモジュールとそのモジュール内関数しか補完出来ないのに比べ、jedi は評価値を補完出来る。 そしてスゴイのが構文を仮実行しているのではなく、パースしている点。jedi というモジュールを使って、構文解析している。 davidhalter/jedi - GitHub Awesome autocompletion library for python. I
PNGを結合させてアニメーションを実現·Animation Encoder MOONGIFT
Animation EncoderはPNG画像を結合させてアニメーションPNGを実現させてしまうソフトウェアです。 何らかの説明動画を表示するのにあたってIE6からiPadまで表示でき、かつ減色したりしないで表示するにはどうしたら良いだろうか。Animation Encoderが選んだのはPNGを結合して表示するという無茶な手法だ。 画像の一覧です。これらを結合します。 仕組みとしてはまずスクリーンショットを撮影し、それをミリ秒のタイムスタンプを付けて保存していく。そしてAnimation Encoderを使って複数のPNGを一つのファイルに結合させる。後はJavaScriptを使ってアニメーションさせるという仕組みだ。videoタグやFlashを使うことなく、サイズも大きくて奇麗なアニメーションが作れるようになる。 Animation EncoderはPython製、BSD Licens
時間つぶしにどうぞ。動的迷路生成プログラム·maze MOONGIFT
mazeはPython製のスクリプトで、PDFベースの迷路を自動生成します。 もし暇な時間があって迷路が好きならmazeを使ってみましょう。コマンド一つで動的に迷路を生成してくれるソフトウェアです。 作品例 再度コマンドを実行すれば全く違う迷路に。 mazeはコマンドを実行するだけでPDFとして迷路を生成します。実行するたびに内容が変わるので飽きさせずに遊べます。ちょうど良い具合に入り組んでいて、時間つぶしにちょうど良さそうです。 mazeはPython製のソフトウェア（ソースコードは公開されていますがライセンスは明記されていません）です。 MOONGIFTはこう見る パズルを自動生成するプログラムというのは意外と難しいです。難易度のバランスは特に注意が必要です。予め作られた数独の問題をコンピュータが解くのは簡単ですが、指定したレベルに沿った問題を作るというのはアルゴリズムの問題があります
こんな手が…。Dropbox上で動的システムを動かす「Drapache」 - MOONGIFT|オープンソース・ソフトウェア紹介を軸としたITエンジニア、Webデザイナー向けブログ
DrapacheはDropbox内のファイルを読み込んで動的に動かすWebサーバです。 DropboxではPublicに入れたファイルをHTTPを通じて読み込めるようにしています。この機能を使って静的なWebサイトを提供している人もいます。しかしそれで十分ではありません。時代は動的システム、Dropbox内のファイルを動的システムに対応させるソフトウェアがDrapacheです。 まずドメインを取ります。 次にDropboxをコネクトします。 接続を許可します。 完了です。そうするとアプリフォルダの中にDrapacheフォルダができあがります。 ファイル構成はこんな感じです。 サンプルのスクリプトです。確かに動的ファイルが動いています。 動的です。もちろん修正すれば若干のタイムラグはあれど反映されます。 Drapacheの仕組みとしては登録したユーザのデータを読み込み、DrapacheがWe
Skypeで特定のチャット/人物のみGrowlする - mfumiの日記
僕は普段SkypeのGrowl通知は邪魔なのでオフにしていますが，たまには特定のチャットや人物に対してGrowl通知をして欲しい時もあります．Skypeの通知設定では細かいところまで設定できないのでSkype4Pyを使って作ってみました．Skype version 5になってからSkype4Pyは一部動かないところが出てきちゃったりしてますが*1，まぁこれくらいはできます． 通知にGrowlを使っています．Growl SDKからPython用のbindingをインストールして下さい．また，そこを適当に直せばwindowsでもlinuxでも動作すると思います． 先頭にある handle_names に通知して欲しいユーザーのハンドル名(echo123とか)，names_of_chats に通知して欲しいチャット名を入れます．ちなみにこのチャット名というのはチャットごとに割り当てられているID
ターミナルからSkype その2 -- pepi - mfumiの日記
昔こんなの作ったんですが、あまりにも酷い出来だったので作りなおしました。最初はcurses使えば少しはましなの作れるんじゃないの?と思ってcurses使ってちまちま作ってましたが、その後urwidというコンソール用のユーザーインタフェースライブラリ(普通の人からしたらななんじゃそりゃって感じですね^^;)があることが分かったので、それを使って作りました。 ・使い方 本体 GitHub - mmisono/pepi: terminal interface for skype 必要なもの (1) Python(32bit) (2) Skype4Py (3) Urwid Python2.6,Skype4Py 1.0.32.0,urwid 0.99,Mac OS Xで動作確認してます。 チャットをするのが目的なのでたいした機能はありません。 あくまでも起動しているSkypeに対してAPIを利用する
既存のHTMLやURLからMarkdownへ変換·html2text MOONGIFT
html2textはHTMLをMarkdownフォーマットに変換するPythonスクリプトです。 html2textを使うと普段見ているWebサイトや既存のHTMLページをMarkdownフォーマットに変換できます。Markdownの練習にも良さそうです。 実行しました。引数にURLを渡すだけの簡単実行。確かにMarkdownのテキストが出力されています。 ちょっと余計な情報も出ていますが、きちんとテキスト化されています。 コマンドオプションです。画像やリンクを除いたりすることもできます。 html2textを使うとHTMLをシンプルなテキストにしてくれるのはもとより、Markdown記法であるために可逆的にHTMLにすることもできます（class指定などは飛んでいるのでデザインは戻りませんが）。HTMLで書いてしまったためにメンテナンス性が悪くなった文書を再利用したりするのにも使えそうで
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
defaultvpc-tag/README.md at master · pypypyo14/defaultvpc-tag
Live Draw SDY: Result SDY Hari Ini | Keluaran SDY & Data Togel SDY Akurat