[B! python] kiririmodeのブックマーク

Dev Containersの始め方(2) : Python環境 | フューチャー技術ブログ

前回のエントリーでは、Dev Containersの動作原理を理解したのでそれにあわせたPython環境を作っていきます。ベースの環境まずリポジトリのフォルダを作ります。python-devとします。ここをVSCodeで開き、Dev Containersの設定をしていきます。左下のリモートのボタンを押して Add Dev Container Configuration Files…　を選択します。基本のPython3を選びます。公式を選んでおくのが吉。オプションでPythonバージョンを選びます。Apple Silliconは-busterついているのを選べって言ってますね。半年前にスクリーンショットを撮ったときは3.11までしかありませんでしたが、今は3.12も選べます。 Pythonのイメージをインストールすると、有名どころのツールはすでにインストール済みとなっていますこの辺りは

kiririmode 2024/03/17

Dev Containersを使用してPythonの開発環境を構築する方法について解説。ryeやPoetryを使用して環境を整える方法や、pyproject.tomlの手作り方法、devcontainer.jsonの設定方法などが詳しく説明されている。

リンク

RAG構築のためのAzure OpenAI Serviceリファレンスアーキテクチャ詳解 | SIOS Tech. Lab

◆ Live配信スケジュール ◆ サイオステクノロジーでは、Microsoft MVPの武井による「わかりみの深いシリーズ」など、定期的なLive配信を行っています。 ⇒ 詳細スケジュールはこちらから ⇒ 見逃してしまった方はYoutubeチャンネルをご覧ください【4/18開催】VSCode Dev Containersで楽々開発環境構築祭り〜Python/Reactなどなど〜 Visual Studio Codeの拡張機能であるDev Containersを使ってReactとかPythonとかSpring Bootとかの開発環境をラクチンで構築する方法を紹介するイベントです。 https://tech-lab.connpass.com/event/311864/ こんにちは、サイオステクノロジー武井です。今回は、「RAG構築のためのAzure OpenAI Serviceリファレンスア

kiririmode 2024/03/14

Azure OpenAI Serviceを用いたRAG構築のリファレンスアーキテクチャを解説。

リンク

pyproject.toml とは何か | I Was Perfect

TL;DR pyproject.toml は PEP で提案されているパッケージのビルドに必要なデータを定義するファイルのフォーマット setup.py や setup.cfg の機能を代替し、setuptools 以外のビルドツールを指定できるファイルとして提案ツールの設定を書くファイルとして pyproject.toml に対応するケースが増えつつある pyproject.toml がプロジェクト管理においてどのような役割を持つのかはそのプロジェクトが採用しているツール次第状況に合わせてpyproject.tomlを使うべきか判断をしていくしかない Poetry の隆盛と pyproject.toml しばらく前から Poetry の名前をよく聞くようになりました。プロジェクトのパッケージの依存関係や、そのプロジェクトのPython実行環境を管理するツールです。Node.js でい

kiririmode 2024/01/04

pyproject.tomlの位置付け

python

リンク

Rye

Welcome User Guide Community Changelog Philosophy Rye is a comprehensive project and package management solution for Python. Born from its creator's desire to establish a one-stop-shop for all Python users, Rye provides a unified experience to install and manages Python installations, pyproject.toml based projects, dependencies and virtualenvs seamlessly. It's designed to accommodate complex proje

kiririmode 2024/01/04

pyenvのようにPythonのバージョン管理をしてくれるとともにpoetryのようにパッケージ管理をしてくれる

python

リンク

Introduction - Rye

Welcome User Guide Community Changelog Philosophy Introduction Rye is still a very experimental tool, but this guide is here to help you get started. Before we dive into the installation and basic usage guide it's important for you to understand what Rye actually is. Rye is a one-stop-shop tool. The idea is that as a Python developer all you need to know is Rye, because Rye is your start into the

kiririmode 2023/06/24

flask作者が開発したexperimentalなPython用パッケージマネージャ+α。Python実行環境管理も含む。使い勝手はかなり良い。

python

リンク

1100万行・32GB超の巨大CSVファイルの基本統計量を4GBメモリマシンで算出する - Qiita

はじめにこの記事は，Kaggle Advent Calendar 2022第6日目の記事になります。本記事では、 32GB超のCSVデータの基本統計量を、小規模マシンでも省メモリかつ高速に計算するテクニックについて解説します。 Kaggleコンペに限らず、マシンスペックが低いため、大きなデータセットを満足に処理できず困っている毎回行うファイル読み込みが遅いので、もっと高速化したい ⚡ といった悩みや課題を抱えている方の参考になれば幸いです。モチベーションデータ分析業務やKaggle等のコンペティションで初めてのデータセットを扱う場合、いきなり機械学習アルゴリズムを行うことはまず無く、最初にデータ観察を行うのが一般的です。テーブルデータであれば、各カラムの基本統計量（最小値、最大値、平均、分散、四分位数）などを計算・可視化し、データクレンジングの要否や特徴量設計の方針などを検

kiririmode 2023/06/09

メモリに載らない量のデータの基本統計量の算出

リンク

2022年度版Python環境構築徹底解説 - Qiita

各機能とツールについて、説明していきます。エディタ Visual Studio Code エディタやIDE(統合開発環境)は好きに選んでいただければ良いとは思いますが、特に希望がないならば、Visual Studio Codeを選んでおけば間違いないでしょう。 Pythonを含む幅広い言語に対応し、豊富な拡張機能を備えている非常にリッチなエディタです。とりわけPython プロジェクトについては、これさえ有れば、特にIDEなどは必要ないと思います。インストールは↓から。バージョン管理ソフト Python3系は日夜アップデートされていて、2022年12月現在の最新verは、3.11.1が提供されています。とはいえ、プロジェクトによっては、3.7.1までしか動作が担保されていないもの、3.9.0で現在開発中のもの...などがあります。最新のPythonが常に必要、というわけでは決してなく

kiririmode 2022/12/26

2022の仮想環境はPoetry。

リンク

Python: Selenium + Headless Chrome で Web ページ全体のスクリーンショットを撮る - CUBE SUGAR CONTAINER

スクレイピングした Web サイトからページ全体のスクリーンショットを撮影したい機会があった。そこで Selenium の Python バインディングと Headless Chrome を使ったところ実現できたのでメモしておく。ちなみに、ページ全体でなければ Headless Chrome 単体でも撮れる。その方法についても末尾に補足として記載しておいた。使った環境は次の通り。 $ sw_vers ProductName: Mac OS X ProductVersion: 10.13.5 BuildVersion: 17F77 $ python -V Python 3.6.5 $ pip list --format=columns | grep -i selenium selenium 3.13.0 $ chromedriver --version ChromeDriver 2.

kiririmode 2018/07/29

リンク

2018年のPythonプロジェクトのはじめかた - Qiita

4/30 公開 5/1 増補改訂: 大幅加筆しました。この記事では、2018年以降に実現可能になったモダンなPython プロジェクトのはじめかたを整理して紹介します。 PythonにもPipenvという公式推奨の高機能なパッケージマネージャーが登場し、さらに2018年に入ってからの機能向上で、npmやyarnのような開発体験が得られるようになってきました。私はここしばらくはフロントエンドやNode.jsに携わっていて、npmやyarnに慣れきっていたせいか、pipenv導入以前はvirtualenvやpipを組み合わせた開発が面倒で仕方なかったですが、Pipenv導入によって一変しました。これからはPythonのプロジェクトがよりクリーンかつ簡単にはじめられるようになり、開発体験も向上するでしょう。それでは、まずはPythonのインストールからです。 Pythonのインストール P

kiririmode 2018/05/03

pythonの開発環境こんなことになってたのか。前と隔世の感ある

リンク

なぜ私達は Python から Go に移行したのか - Frasco

新しい言語に移行するのは常に大きな決断です。その言語をよく知る人がチームメンバーに1人しかいない時などは特にそうです。今年の初め、我々は Stream の主要言語を Python から Go に切り替えました。この記事では、なぜ私達が Python から Go に移行しようと決断したのか、その理由を説明します。 Go を使う理由理由1 - パフォーマンス Go は速いです! Go は極端に速い。そのパフォーマンスは Java もしくは C++ に匹敵します。私達のユースケースでは、Go は Python より30倍速いです。Go と Java を比較したベンチマークはこちらです。理由2 - 言語パフォーマンスの問題多くのアプリケーションにとって、プログラミング言語は、単にアプリとデータベースを繋ぐものにすぎません。言語そのもののパフォーマンスは通常あまり重要ではありません。しかしな

kiririmode 2017/10/29

リンク

Awesome Python：素晴らしい Python フレームワーク・ライブラリ・ソフトウェア・リソースの数々 - Qiita

元記事: Awesome Python Awesome List in Qiita Awesome Ruby Awesome Java Awesome JavaScript Awesome Node.js Awesome Go Awesome Selenium Awesome Appium 管理パネル管理インタフェース用ライブラリ ajenti - サーバ用管理パネル. django-grappelli - Django 管理インターフェースのためのジャズスキン. django-jet - 改良された機能を備えた Django 管理インターフェース用の最新のレスポンシブテンプレート. django-suit - Django Admin インターフェースの代替 (非商用の場合のみ無料). django-xadmin - Django 管理者のドロップイン置換. jet-bridge -

kiririmode 2017/02/13

リンク

[Python]pyenvとvirtualenvとpyenv-virtualenv - dackdive's blog

pyenv とか virtualenv を使いだしてだいぶ経つけど、メモ。 web 上の記事で、virtualenv と呼んでいるものが実は pyenv-virtualenv のことだった、というのがたびたびあってしばらく自分も勘違いしてました。結局、最初に pyenv とか virtualenv の使い方を学ぶ時に参考にしたこちらのサイトが一番わかりやすく、正確でした。 http://blog.ieknir.com/blog/pyenv-with-virtualenv/ pyenv https://github.com/yyuu/pyenv 1台のPC内で異なるバージョンの Python を管理するためのツールインストールは mac の場合 Homebrew から行うことができる $ brew install pyenv サンプル $ pyenv versions * 2.7

kiririmode 2016/02/09

リンク

Pythonライブラリメモ

分野別メモ(一部、趣味嗜好による偏りがあります) Contents 日付 webプログラミングデータ処理クライアント WSGI/フレームワーク WSGI/ツール、ライブラリストレージ RDBドライバ ORM NoSQL キャッシュドキュメンテーションテスト開発パッケージング/配備構成管理日付 python-dateutil arrow mxDateTime webプログラミングデータ処理 simplejson lxml pycrypto クライアント requests openid2rp httplib2 WSGI/フレームワーク pyramid flask bottle wheezy web2py turbogears2 pylons WSGI/ツール、ライブラリ webob pastedeploy repoze.* zope.* jinja2 mako chamel

kiririmode 2014/01/25

python

リンク

PythonでExcelスプレッドシートを出力しよう

斎藤です。こんにちは。今日は、Pythonの"xlutils"ライブラリを利用してExcelスプレッドシートの生成をしてみます。「使い方」「書式定義のしかた」そして「注意点」の3点について、順にお話しします。 Excelを用いて、サーバ管理台帳など、ITインフラ運用に用いるドキュメントを作られる方もいらっしゃるかと思います。そのときに、これからお話しする"xlutils"ライブラリを用いると、お手製CSV出力ツールや、それこそ手動で作るよりも手間を省きつつExcelスプレッドシートを作成できます。 ※Python 2.7.4, xlutils 1.6.0, xlwt 0.9.2, Excel for Mac 2011 (14.3.6), Mac OS 10.7.5 を用いて検証しています使い方インストールインストールはとても簡単です。 # easy_instal xlutils