自作データセットでWhisperをファインチューニングしたら、独自用語だらけのクラロワ実況でも使えるようになった：「データセット作成編」
自作データセットでWhisperをファインチューニングしたら、独自用語だらけのクラロワ実況でも使えるようになった：「データセット作成編」 とりあえず結果 40分くらいの動画で一旦文字起こししてとりあえずファインチューニングしてみた。 いったん試しくらいでやったから適当だったが、その学習済みモデルで別動画の推論をした結果以下の結果になった クラロワ実況の一文 正解の文章 めっちゃしやすくてで迫撃にもアチャクイを当てられるでしょ だもうマジで環境でゴレとかにもまあポイズンウッドだから普通に強くてエリポンも別にディガーで潰せると三銃士が来ても勝てるロイホグ系もねゴーストアチャクイゴブリンウッドだからめっちゃ強いんですよ 元のWhisperでpredictした文章 めっちゃしやすくてで迫撃にもあ着いを当てられるでしょ だもうマジで環境で5例とかにもはポイズングッドだから普通に強くてエリポンも別にリ
PyMuPDF 1.25.4 ドキュメント
This software is provided AS-IS with no warranty, either express or implied. This software is distributed under license and may not be copied, modified or distributed except as expressly authorized under the terms of that license. Refer to licensing information at artifex.com or contact Artifex Software Inc., 39 Mesa Street, Suite 108A, San Francisco CA 94129, United States for further information
株式会社ベイストリーム | 横浜 Python Django Webシステム開発
01 『ビジネスイノベーション』 Web・AI・IoTを活用したトータルソリューションを提供することで、ビジネスが抱える様々な課題を解決し、共に業務プロセスの変革を実現します
Backlogの課題とwikiとファイルをPythonでええ感じに出力（エクスポート）する方法 | DevelopersIO
こんちには。 データアナリティクス事業本部 インテグレーション部 機械学習チームの中村です。 今回はBacklogの課題とwikiとファイルをPythonでええ感じに出力（エクスポート）する方法を紹介します。 なお、本記事と似たようなことは過去に以下の記事で投稿していますが、今回はwikiやファイルを含めて取り扱いました。 本記事の方法でできること・できないこと 本記事の方法では以下ができます 課題 課題の記載内容とコメント（テキストファイルとして、コメントには日時・作成者を包含）の出力 課題に添付されたファイルの出力 添付ファイルもダウンロード wiki wikiの記載内容の出力 wikiの階層構造はディレクトリ構造として維持 wikiの添付ファイルもダウンロード ファイル ファイルにアップロードされているもの出力 ディレクトリ階層構造は維持 その他 プロジェクトIDはプロジェクト名から
【Python3.14】getoptとoptparseが非推奨でなくなった - Qiita
Pythonにはコマンドライン引数をパースする標準モジュールがgetopt・optparse・argparseの3種類あります。 このうちoptparseは14年も前の2011/02/20にリリースされた3.2から非推奨になっています。 そしてgetoptは先日2024/10/07にリリースされた3.13で非推奨になりました。 従って、今後はargparseに一本化されます。 となるはずだったのですが、一本化されるどころか逆に3.14でoptparse・getoptの非推奨が外されました。 すなわち、argparse・optparse・getoptいずれも同列で使用してかまわない機能であるということになりました。 optparseなんか14年経ってから復活です。 どうしてこんなことが起きたのでしょう？ ソフトな非推奨 Pythonの非推奨には通常のDeprecationとSoft Depr
CythonでPythonコードのフリーで安全な難読化 - GO Tech Blog
この記事は GO Inc. Advent Calendar 2024 の7日目です。 こんにちは、KUUグループの宮園です。仕事は何でも屋さんです。 今回は、業務とは全く関係ない話をします。趣味のコードの話です。社内で使っている技術ではありません。 Pythonで難読化したくありませんか? Pythonでつくられたプロダクトのソースコードを見られたくなかったり、改ざんされたくないケースがあります。 例えば、 Pythonソフトウェアをハードウェアに組み込んでアプライアンスとして販売する場合 有料で買い切りのソフトウェアの販売をする場合 ライセンスを更新し続けないと使えないソフトウェアの販売をする場合 無償で期限付きの試用版を頒布する場合 など、知的財産の保護をしたいときです。(悪意のある用途は触れません) 私は趣味でアプライアンス1を作成し、同人で有償頒布することがあります。 また、これも
Pyodide — Version 0.25.1
Pyodide# Pyodide is a Python distribution for the browser and Node.js based on WebAssembly. What is Pyodide?# Pyodide is a port of CPython to WebAssembly/Emscripten. Pyodide makes it possible to install and run Python packages in the browser with micropip. Any pure Python package with a wheel available on PyPI is supported. Many packages with C extensions have also been ported for use with Pyodide
実際にソケット通信を行うプログラムをPythonで作ってみた - matobaの備忘録
こんにちは。matobaです。 この記事は、BeProud Advant Calendarの16日目の記事です。 先日、ソケット通信の仕組みを改めて勉強していたので、今回は、実際にソケット通信を行うプログラムをPythonで作ってみて思ったことを書きたいと思います。 HTTPのクライアントを作ってみる クライアントを作って思ったこと サーバーを作る サーバーを作って思ったこと Python標準ライブラリのhttpserverのコードを読む 終わり HTTPのクライアントを作ってみる とりあえず、ざっくりクライアントを作ってみました。 import socket HOST = "127.0.0.1" PORT = 8000 CRLF = "\r\n" def main(): # IPv4のTCP通信用のオブジェクトを作る # note: socket.AF_INET はIPv4 # note
pip installの-c/--constraintオプション使ってますか?
pip installの-c/--constraintオプション使ってますか? pip installの-c/--constraintオプションがあるけれど、あまり普及していなさそうに見えるので啓蒙として書いてみます tl;dr 前提として、venvによる仮想環境作成・アクティベート済み コマンド pip install -c constraints.txt, setup.py / setup.cfgのinstall_requires, extras_requireオプションを使う 具体例 初回セットアップ時 setup.pyをこのように書いて、 from setuptools import setup install_requires = [ # ここはrequirements.txtに書き出すのもアリ "fastapi", "sqlalchemy ~= 1.4.32", # その他必要
Cloud TasksのワーカーとしてCloud Runを利用する - goodbyegangsterのブログ
Cloud TasksのQueueに投入されたタスクを、Cloud Run上のコンテナ環境で実行する手順を調べます。 構成 構成図です。 環境 Python 3.8.10 google-cloud-tasks 2.5.0 google-api-core 1.31.0 protobuf 3.17.3 Cloud Runにコンテナのデプロイ Cloud Run上のコンテナは、Cloud TasksからのPOST Requestを受ける必要があるため、POSTを受け取れるAPIサーバーのコンテナイメージを用意しておく必要があります。本内容では、コンテナイメージ作成部分の手順は割愛してしまいます。 作成したコンテナイメージをArtifact Registryにpushした後、Cloud Runへデプロイする部分のみ備忘として記載します。 以下コマンドでコンテナへデプロイします。 $ gcloud
Pythonのlogging.exceptionには例外ではなく説明を入れるべき - Qiita
logging.debug() logging.info() logging.warning() logging.error() logging.critical() これらの違いはログレベル(log level)によるもので、緊急度などに応じて設定しておけば「開発時は debug も含めて出力」「本番では warn 以上（または info 以上）」のように出力するレベルを変更できます。 これと並んでもう一つ、 logging.exception() があり、ライブラリのリファレンスには次のように書いてあります。 レベル ERROR のメッセージをこのロガーで記録します。引数は debug() と同じように解釈されます。例外情報がログメッセージに追加されます。このメソッドは例外ハンドラからのみ呼び出されるべきです。 https://docs.python.org/ja/3/library/
簡単な算数でできる文章校正
【初心者向け】Pythonで手軽に始める文章校正というイベントで登壇した発表資料です。 https://churadata.connpass.com/event/234308/Read less
AES対応のPython暗号化ライブラリを比較検証してみた | DevelopersIO
こんにちは。DA事業本部の春田です。 PythonでAES方式の暗号化を実現したかったため、暗号化系のライブラリが複数あったので比較検証してみました。 さっそくですが、「Python 暗号化」でググるとよくヒットするpycryptoというライブラリは、今回対象外としました。pycryptoライブラリはバグの報告が上がっているものの2013年10月以降アップデートが止まっているので、そもそもの使用を控えることにします。 今回比較するのは、PyCryptodomeとpyca/cryptographyです。 PyCryptodome PyCryptodomeはLow-levelな暗号化機能が使えるPythonライブラリです。Python 2.6, 2.7, 3.4+に対応しています。先のPyCryptoからフォークしたライブラリで、後方互換性もある程度意識されているみたいですが、主要クラスのメソ
最近やってるLambdaとAPI Gatewayの開発方法の話
先日ちょっとしたAPIをLambdaとAPI Gatewayを使って作ったので、これを機会に最近の弊社のLambda構築状況について書きたいと思います。 TL;DR あるいは まとめ LambdaはECRによるイメージで起動。こうすることで、開発はイメージを作るところまで、インフラはイメージから後、というように分業できる aws-lambda-powertoolsはいいぞ API GatewayはOpenAPIをterraformに読み込ませることで簡単に設定できる Lambdaのruntime Lambdaは2020年12月からコンテナイメージをサポートしました。これは、ECRに置かれたコンテナイメージをLambdaが読み込んで起動する、というものです。 弊社ではLambdaは基本的にこのコンテナイメージからの起動で構築しています。 コンテナイメージを使う利点は以下の2つです。 コンテナ
PythonのctypesでDLLの関数から様々な戻り値を受け取る その２（参照渡し） - MRが楽しい
本日は Python の技術調査枠です。 Python の ctypes で DLL の関数から様々な戻り値を受け取る方法について記事にします。 今回は参照渡しを利用して、値を受け取ってみます。 前回記事の続きです。 bluebirdofoz.hatenablog.com 参照渡しを利用する 関数で参照渡しを利用して、Python スクリプトに値を受け取る例を試してみます。 最初に int 型の参照を受け取って値を代入する関数を用意します。 前回のプロジェクトを修正し、DLL に int* 型を受け取る関数を追加します。 ・TestLib.h #pragma once #ifdef TESTLIB_EXPORTS #define TESTLIB_API extern "C" __declspec(dllexport) #else #define TESTLIB_API extern "C"
Gmail API取得できたけど、OAuth認証でひっかかった話 - FANCOMI Ad-Tech Blog
こんにちは。ファンコミュニケーションズのr_nakayamaです。 初ブログです！ 今日のBlogは、 『 社内メールで利用しているGmail、 そのうちプログラマティックに使うだろうし、下準備でもしておこうかしら。』 ということで、Gmailをスクリプトから送信してみた話です。 Gmail APIを使った記事は他にもたくさんありますが、 認証コードの取得に関して詳しくまとめているつもりなので、 『 認証コード取得できないんですけど！』 という方にぜひ読んでいただければと思います。 【目次】 Gmail API の取得 認証コードの取得 --noauth_local_webserver オプション gmail_sender の実行 最後に 参考にしたページはこちら。 http://thinkami.hatenablog.com/entry/2016/06/10/065731 Gmail A
Python3 + google-api-python-clientで、Gmail APIを使ってメールを送信する - メモ的な思考的な
前回はPythonの標準ライブラリを使って、Gmailからメールを送信しました。 Python3.5 + smtplib.SMTP_SSL.send_message()で、Gmailからメールを送信する - メモ的な思考的な ただ、Googleアカウント名とパスワードをスクリプト上に書いておく必要があったため、何となく嫌な感じでした。 調べてみたところ、GmailのGmail APIを使うことで、Googleアカウントのパスワードの記載が不要になることがわかったため、今回試してみます。 目次 環境 事前準備 Google Developers Console で Gmail API を有効化 アプリケーション環境の準備 実装 認証部分 メッセージの作成 ブラウザでの許可 ソースコード その他 Gmail APIのリミットについて GoogleのOAuth2.0について 環境 Windows
HTTPX
>>> import httpx >>> r = httpx.get('https://www.example.org/') >>> r <Response [200 OK]> >>> r.status_code 200 >>> r.headers['content-type'] 'text/html; charset=UTF-8' >>> r.text '<!doctype html>\n<html>\n<head>\n<title>Example Domain</title>...' Which now allows us to use HTTPX directly from the command-line... Sending a request... Features HTTPX builds on the well-established usability of reques
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
pytest-playwright
Migration Guide — pytz_deprecation_shim 0.1.0.post0 documentation