Visual Studio Code Dev Containers でシンプルに Python w/ CUDA を動かす
はじめに なるべく少ない設定でDev Container上でPythonを動かす方法を検討してみました。 2024年11月末現在、Python 環境のセットアップには uv を使うのがよさそうな雰囲気です。そこで、Dev Container 側では uv をセットアップするにとどめ、Python やそのパッケージのインストールは uv に任せる方針にします。 Dev Container の設定 ベースコンテナは Microsoft が公開している devcontainers-base を使いました。以下のように .devcontainer/devcontainer.json を作成します: // .devcontainer/devcontainer.json` { "name": "CUDA + uv", "image": "mcr.microsoft.com/devcontainers/
日本語に特化したOCR、文書画像解析Pythonパッケージ「YomiToku」を公開しました｜Kotaro.Kinoshita
はじめに最近、LLMへのRAGを用いた文書データの連携等を目的に海外を中心にOCRや文書画像解析技術に関連する新しいサービスが活発にリリースされています。 しかし、その多くは日本語をメインターゲットに開発されているわけではありません。日本語文書は、英数字に加えて、ひらがな、漢字、記号など数千種類の文字を識別する必要があったり、縦書きなど日本語ドキュメント特有のレイアウトに対処する必要があったりと日本語特有の難しさがあります。 ですが、今後、海外の開発者がこれらの課題に対処するため、日本のドキュメント画像解析に特化したものをリリースする可能性は低く、やはり自国の言語向けのサービスは自国のエンジニアが開発すべきだと筆者は考えています。 もちろん、Azure Document Intelligenceをはじめとした、クラウドサービスのドキュメント解析サービスはありますが、クラウドを利用できないユ
Python で簡易ローカルHTTPSサーバを立てる｜npaka
「Python」で簡易ローカルHTTPSサーバを立てる方法をまとめました。 ・Python 3.10 ・macOS 1. ローカルHTTPSサーバを立てるローカルHTTPSサーバを立てる手順は、次のとおりです。 (1) SSL証明書と秘密鍵の準備。 以下のコマンドで「cert.pem」「key.pem」が生成されます。 openssl req -x509 -newkey rsa:2048 -keyout key.pem -out cert.pem -days 365 -nodesCountry Name (2 letter code) [AU]:JP State or Province Name (full name) [Some-State]:Tokyo Locality Name (eg, city) []:Bunkyo Organization Name (eg, company)
Pythonでのデバッグ、print()からic()に置き換えよう！ - Qiita
みなさん、こんにちは！私は株式会社ulusageで技術ブログを担当しているエンジニアです。最新の情報や、日々の開発で役立つTipsを皆さんと共有していきたいと思います。どうぞよろしくお願いします。（もしこのブログの仕組みやシステムフローに興味があれば、ぜひお知らせください。皆さんのご要望に応じて、詳細な記事を作成します！） Pythonでのデバッグ：print()からic()へ、革新の手法 はじめに Pythonで開発を進める中で、皆さんも一度は「なぜこのコードは期待通りに動かないのだろう？」と頭を抱えたことがあるのではないでしょうか。そのようなとき、print()関数を使って変数の値を出力し、デバッグを行うのは一般的な手法です。しかし、複雑なコードや大規模なプロジェクトでは、print()だけでは限界があります。今回は、そのデバッグ手法を一歩進めるためのライブラリ「IceCream」とそ
Pythonのstructを使ってバイナリデータを処理する10の方法
※Japanシーモアは、常に解説内容のわかりやすさや記事の品質に注力しております。不具合、分かりにくい説明や不適切な表現、動かないコードなど気になることがございましたら、記事の品質向上の為にお問い合わせフォームにてご共有いただけますと幸いです。 (送信された情報は、プライバシーポリシーのもと、厳正に取扱い、処分させていただきます。) ●Pythonのstructモジュールとは？ データ処理は避けて通れない重要な課題です。 特に、バイナリデータの取り扱いは多くのエンジニアが直面する難題の一つです。 Pythonを使用している皆さんも、バイナリデータを扱う機会があったのではないでしょうか。 そんな時に強い味方となるのが、Pythonのstructモジュールです。 structモジュールは、Pythonの標準ライブラリに含まれる強力なツールで、バイナリデータとPythonのネイティブデータ型の間
GitHub - Veinar/dracan: Dracan is a lightweight middleware for Kubernetes that enhances filtering and validation capabilities. It ensures that only valid requests reach your applications, featuring HTTP method filtering, JSON validation, Header validation
Dracan is a specialized software solution designed to enhance filtering and validation capabilities within Kubernetes (k8s) environments. It aims to be lightweight middleware between ingress and applications. This tool focuses on several key functionalities: HTTP Method Filtering: Dracan allows you to filter specific HTTP methods, ensuring that only allowed request types can interact with your app
The Ultimate Guide to Error Handling in Python
I often come across developers who know the mechanics of Python error handling well, yet when I review their code I find it to be far from good. Exceptions in Python is one of those areas that have a surface layer that most people know, and a deeper, almost secret one that a lot of developers don't even know exists. If you want to test yourself on this topic, see if you can answer the following qu
jc
Skip to the content. Home jc JC - JSON Convert kellyjonbrazil@gmail.com This package converts the output of many standard unix command line tools and file-types to dictionaries and lists of dictionaries. Interactive Documentation Using jc in your python programs: >>> help('jc') >>> help('jc.lib') >>> jc.get_help('parser_module_name') Developing jc parsers: >>> help('jc.utils') >>> help('jc.streami
VS CodeのPythonデータサイエンス拡張パック、リリース 4つの拡張機能で何ができる？
Python インテリセンス、デバッグ、フォーマット、リンティング、コードナビゲーション、リファクタリング、変数エクスプローラ、テストエクスプローラなど、Python言語のサポートを提供する。 Jupyter Jupyter Notebookの作成と編集、コード／マークダウンセルの追加と実行、プロットのレンダリング、HTMLやPDFへのエクスポートによるプレゼンテーション用ノートブックの作成などに利用できる。 GitHub Copilot 速く、スマートにコードを書くためのAIペアプログラマーツール。 Data Wrangler コード中心のデータ表示およびクリーニングツール。表形式のデータを探索、可視化、クリーニングできる。 この拡張パックは、Visual Studio Code MarketplaceのPython Data Science Extension Packページからダウン
Python in Excel が正式リリースされたので触ってみる
Python in Excel が GA (General Release) Microsoft 365 Insider Program で公開されていた Python in Excel が一般提供開始され、Windows 版 Excel アプリで利用できるようになったので、試してみた。 Python in Excel の導入により、Excel のデータを Python ライブラリを使用して分析できるようになった。 これにより、開発者などが Excel 上でのデータ分析を行うにあたり、使い慣れた Python を用いることができるようになるとのことで、Python ユーザーとしてはうれしいアップデート。 インターネット接続前提の機能 Python in Excel は、裏で Python ランタイムがある Microsoft Cloud にあるコンテナーが利用され、コンテナー内で Pyth
PythonでPDFからテキスト/表情報の抽出精度を比較してみた - Taste of Tech Topics
はじめに こんにちは。ついにジム通いを始めて四六時中筋肉痛を感じながら過ごしているイワツカです。 最近はLLM（大規模言語モデル）とRAG（検索拡張生成）を用いて企業内ドキュメントを活用する取り組みが多く見受けられます。 ドキュメントは基本PDFで保存されているため、PDFからテキストを抽出して、検索対象にすることが必要です。 そこで今回は、PythonでPDFからテキストを抽出するためのライブラリを比較して、どれが良いのか検証しました。 はじめに 概要 実装 PyMuPDF pdfplumber unstructured 比較結果 テキスト抽出 サンプル1のテキスト抽出結果 サンプル2のテキスト抽出結果 表の抽出 サンプル3の表抽出結果 サンプル4の表抽出結果 検証結果 まとめ 概要 今回はPDF読み取りライブラリとして、PyMuPDF、pdfplumber、unstructuredの3
【Python】非同期処理が何もわからなかったあの頃の自分に向けて
はじめに こんにちは。GMO アドパートナーズ新卒の樋笠です。 最近業務で、Pythonの非同期処理を書いているのですが、初めて非同期処理を学んだときに苦悶したことを思い出しました。 そこで、過去の自分に「こう伝えたら理解できるんじゃないかな」と考えながら記事を書きました。 非同期処理について学んだことがない人でも、これを読めば、「非同期処理がやろうとしていること」や「Pythonの非同期処理の基本的な書き方」が分かるようになる、というものを目指しました。 ぜひ最後までお読みください🙇🏻♂️ ※ わかりやすく説明するために、あえて言い切っている箇所があります。ご了承ください。 非同期処理ってなに？ まず、非同期処理ってなに？という話ですが、「非同期処理」を理解するために、その対になる「同期処理」を考えてみましょう。 たとえして、こんな状況を考えてみましょう。 AとBの2つのタスクがあ
ハイパーモダンPython
ハイパーモダン（hypermodern）という言葉は20世紀初頭を代表するチェスプレーヤーたちが考案した、当時モダンであると考えられていたオープニング戦略を超える斬新な戦略に由来するものです。本書はPythonを使った開発におけるハイパーモダンな戦略を提示します。Poetry、Nox、pytest、Ruff、uv、Ryeといった新しいツールを活用して、ワークフローをさらに効率化し、堅牢かつ信頼性の高いプロジェクトにする手法を紹介します。ハイパーモダンな戦略を通じて、開発において本当に重要なことを学べる1冊です。 訳者まえがき はじめに Ⅰ部 インストールと環境 1章 Pythonのインストール 1.1 複数のPythonのバージョンをサポートする 1.2 Pythonインタプリタを探す 1.3 WindowsにPythonをインストールする 1.4 Windows用Python 1.5 m
Excel上でWebAssembly版Pythonを実行可能にするアドオン「Anaconda Code」が登場
Python関連のツールベンダとして知られるAnacondaは、Excel上で直接Pythonコードを実行できる新機能「Anaconda Code」を含むExcelのアドオンツール「Anaconda Toolbox in Excel」をパブリックベータとして公開しました。 You can now run Python directly in Excel locally w/ the new Anaconda Code add-in! Public beta is live! Faster performance, flexible data handling, editable initialization, & customizable environments. Read more in our blog & follow @anacondainc: https://t.co/9LAy
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - jiaaro/pydub: Manipulate audio with a simple and easy high level interface
GitHub - Textualize/toolong: A terminal application to view, tail, merge, and search log files (plus JSONL).
Textualize
GitHub - pypdfium2-team/pypdfium2: Python bindings to PDFium, reasonably cross-platform.
GitHub - capjamesg/jamesql: An in-memory NoSQL database implemented in Python.
ゼロから作る自作Python Package Manager入門 【M3 Tech Talk 第241回】
