2024年最新版：Pythonデータ解析ライブラリ総まとめ - 実践的ガイド - Qiita
はじめに Pythonのデータ解析エコシステムは日々進化を続けています。2024年現在、効率的なデータ処理、直感的な可視化、高度な機械学習の自動化など、様々な新しいツールが登場しています。本記事では、最新のPythonデータ解析ライブラリを紹介し、それぞれの特徴や使用例、実際のユースケース、そして導入方法まで詳しく解説します。 1. データ操作ライブラリ 1.1 Polars: 高速データ処理の新標準 Polarsは、Rustで実装された高速なデータ操作ライブラリです。pandasに似たAPIを持ちながら、大規模データセットでより高速に動作します。 特徴: 高速な処理速度 メモリ効率が良い pandasに似たAPI 使用例: import pandas as pd # サンプルデータを作成 data = { "age": [25, 32, 28, 35, 40, 50], "categor
ウクライナの夏休み | 何丘ブログ
妻の郷里であるオデッサ州の某村に里帰りにきている。その日記。 登場人物：私、妻、義父母、太郎（4歳児） ※渡航の経緯については「盗む」の記事参照 7月22日 ただいま7月22日の日本時間22時44分、三鷹の陋屋に帰り着いた、まことしんどい道のりであった、ドアツードアの移動時間は26時間、このかん私と妊婦は睡眠時間よくて累計1時間半、子供だけは一応7時間くらい寝ている、なんとか親子3人無事に帰りついた。という報告まで。明日も仕事 7月21日 出立の日。子連れで大変な道のりである。どきどきしている。 3時間半か4時間かかけてキシニョフへ。そっからイスタンブールまで空路1時間。イスタンブール空港で3時間待って、イスタンブールから東京まで13時間。 基本的にこの記事はもう書き終わった。書ききれなかった内容を帰国後少し書き足す。 本記事になんらか教えられることあった、考へるヒントになった、また、この
【詳報】バイデン氏大統領選 撤退表明 後任候補ハリス氏支持 | NHK
アメリカ国民の皆さんへ この3年半、私たちは国家として大きな進歩を遂げた。こんにち、アメリカは世界で最も強い経済力を有している。私たちは歴史的な投資を行って、国の再建や高齢者向けの薬価の引き下げ、そして、記録的な数のアメリカ国民に手がとどきやすい医療を拡充してきた。有害物質にさらされた多くの退役軍人に、不可欠な医療を提供した。過去30年で初めて銃規制に関する法律を成立させた。最高裁判事に初めてアフリカ系アメリカ人の女性を任命した。世界の歴史上最も重要な気候変動対策に関する法律を成立させた。 アメリカがこんにちほど主導的な立場にいたことはない。どれもアメリカ国民なしには成しえなかったことだ。私たちは共に100年に一度のパンデミックと、大恐慌以来、最悪の経済危機を克服した。私たちは民主主義を守り、維持してきた。そして世界中の同盟関係を活性化し、強固にした。 みなさんの大統領を務めることは、私の
JALのWebサイトで障害 国際線の全サービスが利用できず、国内線にも影響【復旧済み】
7月19日午後5時20分現在、JALの公式Webサイトで障害が発生している。国際線の予約や購入、予約変更など全サービスが利用できない状態だ。同様に、国内線と国際線の特典航空券も全サービスが利用停止になっている。 同社は原因を明かしておらず、状況が変わり次第Webサイトを更新するとしている。 同日午後2時半ごろからは、PCがブルースクリーンで動かないとする報告が世界中で相次いでいる。米サイバーセキュリティ企業CrowdStrikeの製品が原因とみられている。 関連記事 世界規模でWindowsがブルスクに うちのPCには影響あるの？ 7月19日午後2時半ごろから、PCがブルースクリーンになり、動かないとする報告が世界中で相次いでいる。今使っているあなたのPCに影響はあるのか 「会社のWindows PCが突如ブルースクリーンに……」 世界中で報告相次ぐ 「仕事ができない」 ネット上で「会社の
2024年7月19日に発生したWindowsサーバーの障害による影響について - 株式会社サーバーワークス
本ページは随時更新を行っております。 弊社エンジニアによる検証記事をアップしておりますので、合わせてご確認ください。 【2024年7月19日に発生したWindowsサーバー障害に関する記事】レスキュー用Windows EC2インスタンスを作成し、復旧対象のWindows EC2インスタンスから不要なファイルを削除する方法 本記事にもございますが、最新情報は、AWS サービスヘルスダッシュボードのアナウンスを参照することをお勧めします。ダッシュボードは現在も更新されており、最新情報を確認するためにリンク先を参照することを強く推奨します。アナウンスの内容が変更されることもあるので、定期的な確認が重要です。 （2024年7月20日 6:50更新） 引き続き、Windowsサーバーにてブルースクリーンエラーが同時多発的に発生している状況となっております。 AWSより対処方法等の更新がありました。
CTOから見た事業開発とプロダクト開発 / My Perspective on Business and Product Development as CTO
DevelopersIO 2024 でお話したスライドです
BigQueryとGemini 1.5 Proによるラーメン店クチコミの定量分析 - G-gen Tech Blog
G-gen の神谷です。本記事では、Google Maps API から取得したラーメン店のクチコミデータに対する定量分析手法をご紹介します。 従来の BigQuery による感情分析の有用性を踏まえつつ、Gemini 1.5 Pro の導入によって可能となった、より柔軟なデータの構造化や特定タスクの実行方法を解説します。 分析の背景と目的 可視化イメージ 分析の流れとアーキテクチャ クチコミデータ取得と BigQuery への保存 API キーの取得 データ取得のサンプルコード クチコミ数の制限と緩和策 料金 感情分析とデータパイプライン Dataform の利点 Dataform を使った感情分析のパイプライン定義例 感情分析の結果解釈 ML.GENERATE_TEXT（Gemini 1.5 Pro） 関数を使用した高度な分析 ユースケースに応じた独自の評価観点によるクチコミの定量化
Rustで有名アルゴリズムに挑戦(20) RustとTcl/TkでGUIアプリを作ろう
普段使うツールをRustで作る場合、コマンドラインベースのものが多いと思います。それでも、Rustを使ってデスクトップアプリを作ることもできます。今回は、実績のあるGUIツールキットの「Tcl/Tk」をラップしたクレートを使って簡単なGUIを作成してみましょう。 Rustで単位変換ツールを作ったところ GUIツールキット「Tcl/Tk」のインストール Rustのライブラリを集約したcrates.ioを見ると、多くのGUIライブラリが存在します。Rustはさまざまな環境で動作することを想定していることもあり、「これこそGUIの定番」というものはありません。多くの選択肢があり、用途に応じて使い分けるのが正しい作法です。 WebブラウザベースのTauri、ゲーム開発と相性の良いegui、GTK+を利用するGTK-rs、Tcl/Tkをラップしたライブラリのtcl/tkなど、いろいろなクレートがあり
中野サンプラザ 3Dデータを公開します！
2023年7月に惜しまれながら閉館した中野サンプラザ。 中野のランドマークとして、音楽の殿堂として、多くの方から愛されたこの建物を、文化財としてアーカイブ化するため、外観と建物内部を計測し、3Dモデル化を行いました。 今回作成したデータは、広く皆さまにお使いいただけるよう、オープンデータとして公開します。 VR空間に中野サンプラザを蘇らせ、バーチャルツアーやコンサートを開催するなど、自由な発想でデータをご活用ください。商用利用も可能です。 また、建物内部の3Dモデルを閲覧できるビューアも公開します。こちらもぜひご覧ください。 中野サンプラザ外観、エントランス、コンサートホール、チャペル、レストランをレーザスキャナ等により計測し、3D点群データ（las形式。x、y、zの三次元座標の情報と色情報を持った点の集まりから構成されるデータ）を作成するとともに、点群データを基に、3Dモデル（ifc、n
AWS RDS/Auroraでモニタリング＆チューニングを始めるための資料11選
これはなに ども、レバテック開発部のもりたです。 もりたはデータベースが好きなんですが、最近は特にAWS RDS/Auroraでのモニタリングとパフォーマンスチューニングについて興味があります。ただ、これらのうちモニタリングは扱っている話題が若干ローレベルであまりピンとこず、またチューニングもどこから手をつければいいのかわかりませんでした。 この記事では、もりたがモニタリング＆チューニングを学習する上で役に立った書籍やWeb上の資料をロードマップ形式で紹介していきます。対象読者はDBのモニタリングとチューニングをやりたいけどどこから手をつければいいか分かんないなとなっている人、ゴールはそんな人がモニタリング＆チューニングの第一歩を踏み出せることです。 スコープ 今回扱うもの、扱わないものは以下の通りです。 扱う モニタリング＆チューニングの概要 モニタリングの前提知識 チューニングの前提知
CrowdStrike社のセキュリティソフトに起因するWindowsのシステム障害（BSOD）について - セキュリティ事業 - マクニカ
CrowdStrike社のセキュリティソフトに起因するWindowsのシステム障害（BSOD）について 7月19日に発生しましたWindowsを搭載したパソコンでの全世界的なシステム障害につきまして、CrowdStrike社（以下CS社）のセキュリティソフトFalcon Sensorのアップデートに起因する障害であると、同社から連絡を受けております。マクニカでは、CS社の国内販売代理店として、本障害に関する情報を入手し次第、弊社ホームページ上にてご報告してまいります。 すでに、CS社からは、問題の原因は突き止め、復旧とお客様へのサポートに全力を尽くしていると報告を受けています。弊社でも、現在、ご契約のお客様の業務が復旧するよう全力でサポートに当たっております。お客様、販売パートナー様におかれましては、下記を参考の上、ご不明な点等ございましたら、弊社問い合わせ先までご連絡いただけますよう、ご
NeverThrow入門 | TypeScriptでResult型を使いたいんじゃ＾〜
会社でNeverThrowというライブラリを使っています。 とても便利なので、とても便利だよ〜という記事を書きます。 NeverThrowとは？ NeverThrowは、TypeScriptで「Result型」を実現できるライブラリです。 Result型とは？ Result型は、関数の中でエラーをthrowする代わりに、エラーを戻り値として返すようにすればいいじゃね？な仕組みのことをいいます。 もっと噛み砕いて説明します。 たとえば「50%の確率で足し算してくれるけど、50％の確率で💩をthrowする」という関数があるとします。 コードで表すと👇になります。 function add(a: number, b: number) { if (Math.random() >= 0.5) { throw new Error('💩'); } return a + b; }
AIと一緒に新しい言語処理系を作ってみた｜shi3z
Claude-3 Sonnetがだいぶ良いので、前々から考えていた、「Lispっぽい記法で書けるけど他の言語に慣れた人にも使える言語」の処理系を作ってみた。仮にEasyLispという名前にした。 この言語ではこんな感じでプログラムが書ける (define person (object)) (set! person.name "Alice") (set! person.age 30) (print person.name)personというオブジェクトのプロパティをnameやageがあって、これをドット記法で指定するとpersonオブジェクトのプロパティにアクセスできる。 同じことをCommon-Lispでやろうとするとこうなる (defun example () (let ((person (make-object :name "Alice" :age 30))) (format t "N
AWS 上で大規模な GitHub Actions のセルフホステッドランナーを使用する際のベストプラクティス | Amazon Web Services
Amazon Web Services ブログ AWS 上で大規模な GitHub Actions のセルフホステッドランナーを使用する際のベストプラクティス 注記: お客様は自身の GitHub ランナーを管理する必要がなくなりました。AWS CodeBuild を使用すると、管理された GitHub Actions セルフホストランナーを利用できるようになり、強力なセキュリティ境界と低い起動レイテンシーを備えた一時的でスケーラブルなランナー環境を提供します。CodeBuild を使えば、独自のインフラストラクチャを維持したり、スケーリングロジックを構築する必要がありません。すべてが CodeBuild によって完全に管理されます。開始するには、単に Webhook を作成して、CodeBuild で GitHub Actions ジョブを自動的にトリガーするだけです。 概要 GitHu
Technical Details: Falcon Update for Windows Hosts | CrowdStrike
What Happened? On July 19, 2024 at 04:09 UTC, as part of ongoing operations, CrowdStrike released a sensor configuration update to Windows systems. Sensor configuration updates are an ongoing part of the protection mechanisms of the Falcon platform. This configuration update triggered a logic error resulting in a system crash and blue screen (BSOD) on impacted systems. The sensor configuration upd
エンジニアを10年以上やって視力2.0を保つ秘訣
前書き エンジニアを始めて１４年、独立して９年経つ。 この仕事を始めた時に「さすがに眼が悪くなるかな」と思ったが、４０過ぎていまだに裸眼1.5／2.0だ。（昨年はどっちも2.0。） ↓今年の検査結果(右列が昨年) これはなんなら、始めた時より眼が良くなっている。（始めたころは1.2／1.5だった。） 先日知人のエンジニアと話していると、彼は２００人規模のエンジニアを抱える会社でリーダーをしているが「メガネをしてないエンジニアなんて会った事ない」と驚かれた。 実はそこに秘訣があるのでシェアしたい。 ちなみに妻はこの方法で片目だけだが0.9 → 1.2になった。 結論 「平行法を覚えろ」 これに尽きる。 遺伝の影響か ちなみに自分の親族・家族は実は須らく眼が悪い。 逸話的にも、若くして眼鏡を掛けていた父が、母をお見合いで最初に見た時に、「こいつも眼鏡掛けてる。」「もし子どもが出来ても全員目が悪
例のブルースクリーン障害で「初出社でやらかしてクビ」のネタツイ、反響がデカすぎて世界的な教材に
まとめ 「助けて尻の穴壊れる」世界中で発生のブルースクリーンが最悪のタイミングで起きてしまった話 ウォシュレット、離れれば止まるとは言うけどこわいよね 82834 pv 124 75 users 42
米CISAが“強く”推奨する「ネットワークセキュリティのベストプラクティス」を発表
米国国土安全保障省サイバーセキュリティインフラセキュリティ庁（CISA）は2024年6月18日（米国時間）、ネットワークセキュリティにおけるガイダンスを公開した。CISAは以下のように説明している。 ガイダンスは、CISAの他、連邦捜査局、ニュージーランドおよびカナダのセキュリティ責任者が共同執筆した。あらゆる規模の企業の経営者に対し、ネットワークアクティビティーの可視性を高めるゼロトラスト、SSE（Security Service Edge）、SASE（Secure Access Service Edge）などのより堅牢（けんろう）なセキュリティソリューションへの移行を推奨している。加えて、このガイダンスは、従来のリモートアクセスとVPNの導入に関連する脆弱（ぜいじゃく）性、脅威、慣行およびリモートアクセスの誤った構成によって組織のネットワークにもたらされる固有のビジネスリスクを組織がよ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
シャオミ、「Xiaomi Smart Band 9」を発表
【Ubuntu日和】 【第56回】例のミニPC「MS-01」にNVIDIA RTX A1000をセットしてStable Diffusionを動かしてみる
