fsspec: Filesystem interfaces for Python — fsspec 2024.6.0.post1+g8be9763.d20240613 documentation
fsspec: Filesystem interfaces for Python Filesystem Spec (fsspec) is a project to provide a unified pythonic interface to local, remote and embedded file systems and bytes storage. Brief Overview There are many places to store bytes, from in memory, to the local disk, cluster distributed storage, to the cloud. Many files also contain internal mappings of names to bytes, maybe in a hierarchical d
uvでPython仮想環境を作ってみた
uvとは 私が少し触った感想は めっちゃ早くて高機能なvenv + pip(pip-tools) です。 公式の説明を翻訳に投げた結果です。 Rust製のPythonパッケージインストーラとリゾルバー（依存関係を解決するもの） 従来のpipやpip-toolsのワークフローを置き換えることを目的としてる 下記にuvの特徴もいくつか示します。 ⚡️ Rustで開発されており、高速かつ信頼性が高い、さらに使いやすい pipおよびpip-tools（pip-compileやpip-syncなど）よりも10〜100倍早い) 🐍 簡単にインストール可能 curl, powershell, pip, pipx , brew 💻 マルチプラットフォーム対応 macOS, Linux, Windows 🧰 依存関係のバージョンオーバーライドや代替の解決戦略などを提供 !? 衝突追跡リゾルバーによる最
Talk Python To Me Podcast
Latest episode: #506 ty: Astral's New Type Checker (Formerly Red-Knot) The folks over at Astral have made some big-time impacts in the Python space with uv and ruff. They are back with another amazing project named ty. You may have known it as Red-Knot. But it's coming up on release time for the first version and with the release it comes with a new official name: ty. We have Charlie Marsh and Car
dltHub: ELT as Python Code
Join dlt+ Early Access to upgrade your data platformThousands of companies run dlt in production, but when it comes to upgrading their Pythonic data platforms, many end up building essential components in-house to meet requirements. To address this challenge, we introduce dlt+ concepts such as Project, Cache, Iceberg, and AI workflows that are designed to be easy to use and loved by the dlt commun
GitHub - tobymao/sqlglot: Python SQL Parser and Transpiler
SQLGlot is a no-dependency SQL parser, transpiler, optimizer, and engine. It can be used to format SQL or translate between 21 different dialects like DuckDB, Presto / Trino, Spark / Databricks, Snowflake, and BigQuery. It aims to read a wide variety of SQL inputs and output syntactically and semantically correct SQL in the targeted dialects. It is a very comprehensive generic SQL parser with a ro
オートモーティブの大規模データ処理を支える技術 後編: 大規模地図データ構造の最適化 | BLOG - DeNA Engineering
はじめに こんにちは。システム本部 分析推進部の鴨志田良和です。 [DeNA TechCon 2020] (https://techcon.dena.com/2020/) にて発表する予定だった内容をBlog記事としてお届けします。 今回は「オートモーティブの大規模データ処理を支える技術」と題して、前後編でお送りします。 (前編は こちら ) 後編となる本稿では、 マップマッチ処理で使用される、大規模な地図データを効率よく格納して 扱うための工夫についてご紹介します。 大規模地図データを扱う上での問題 マップマッチ処理(生のGPSデータの誤差を補正して道路上の位置を推定し、経路情報を得る処理) においては、 道路同士の位置や接続関係をグラフ構造のデータとして格納した地図データ (以下、「道路ネットワーク」と呼びます)があらゆる段階で利用されます。 日本全国の地図のように、 扱うデータの規模
Anthropicで利用されているモダンなPython開発のベストプラクティス
はじめに Anthropic といえば、最近はコード生成ツールが大きな話題になっていますよね。 ＡＩ企業アンスロピック、今年の売上高30億ドルに急増へ 売上高を牽引しているのはコード生成機能です。グーグルの親会社であるアルファベット（[GOOGL.O](https://jp.reuters.com/markets/companies/GOOGL.O)）や、アマゾン・ドット・コム（[AMZN.O](https://jp.reuters.com/markets/companies/AMZN.O)）が支援しているアンスロピックは、コンピュータープログラミングに特化した AI として知られています。 このコード生成機能を活用する際に使用するのが、CLI コマンドの claude です。このツールの完成度は非常に高く、最近ではコード生成時に積極的に利用するエンジニアも増えてきています。 この cla
Pythonで美しいコンソール出力を実現する：Richライブラリの完全ガイド - Qiita
はじめに プログラミングの世界では、コンソール出力は重要なデバッグツールであり、ユーザーとのインターフェースでもあります。しかし、従来のプレーンテキスト出力では、情報を効果的に伝えることが難しい場合があります。ここで登場するのが、Pythonの「Rich」ライブラリです。Richは、コンソール出力を劇的に改善し、色やスタイル、テーブル、プログレスバーなどの豊富な機能を提供します。この記事では、Richの基本から応用まで、15の章に分けて詳しく解説します。各章では、具体的なコード例と詳細な説明を通じて、Richの魅力と実用性を探っていきます。 第1章：Richのインストールと基本設定 Richライブラリは、Pythonのコンソール出力を豊かにする強力なツールです。まずは、Richをインストールし、基本的な使い方を学びましょう。Richは、pipを使って簡単にインストールできます。インストール
Introduction — Rich 13.6.0 documentation
Introduction¶ Rich is a Python library for writing rich text (with color and style) to the terminal, and for displaying advanced content such as tables, markdown, and syntax highlighted code. Use Rich to make your command line applications visually appealing and present data in a more readable way. Rich can also be a useful debugging aid by pretty printing and syntax highlighting data structures.
【Python】Pillowでまとめて画像圧縮！圧縮率も自由自在！
PythonのPillowライブラリを使って、画像を圧縮する方法 「jpg」,「png」,「WebP」の3つの画像フォーマットの画像を、希望の圧縮率で、一括で圧縮する方法 この記事では、PythonのPillowライブラリを使い、画像を簡単に圧縮する方法を紹介します。 また、圧縮したい画像の種類によって異なるフォーマットごとに希望の圧縮率を指定し、フォルダ内の画像ファイルを一括で圧縮するためのPythonコードを紹介し、初心者の方でも分かりやすいように解説しています。 Pythonコードは、そのままコピペするだけで使えるように作成しましたので、自身の環境ですぐに画像圧縮の作業を効率化できます。 この記事を読むことで、Python初心者の方でもPillowライブラリを使い、画像を簡単に圧縮できるようになりますので、ぜひ参考にしてください
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - jdx/mise: dev tools, env vars, task runner
GitHub - meta-llama/llama-prompt-ops: An open-source tool for seamless migration from other LLMs to Llama, and for general prompt optimization.
DuckDB and Python: Ducks and Snakes living together
Great Tables
The PyArrow Revolution
Agentic AI Workflows with LangGraph
Ahoy, Narwhals are bridging the data science APIs
Python dataframe API standard — Python dataframe API standard 2023.04-DRAFT documentation
GitHub - Mause/duckdb_engine: SQLAlchemy driver for DuckDB
Welcome - YData Profiling
