2024年最新版：Pythonデータ解析ライブラリ総まとめ - 実践的ガイド - Qiita
はじめに Pythonのデータ解析エコシステムは日々進化を続けています。2024年現在、効率的なデータ処理、直感的な可視化、高度な機械学習の自動化など、様々な新しいツールが登場しています。本記事では、最新のPythonデータ解析ライブラリを紹介し、それぞれの特徴や使用例、実際のユースケース、そして導入方法まで詳しく解説します。 1. データ操作ライブラリ 1.1 Polars: 高速データ処理の新標準 Polarsは、Rustで実装された高速なデータ操作ライブラリです。pandasに似たAPIを持ちながら、大規模データセットでより高速に動作します。 特徴: 高速な処理速度 メモリ効率が良い pandasに似たAPI 使用例: import pandas as pd # サンプルデータを作成 data = { "age": [25, 32, 28, 35, 40, 50], "categor
幸せな人生はテクノロジーの力で具体化できるのか？ ウェルビーイングをテクノロジーの観点で考える5冊【スゴ本の中の人が選ぶ】 - lala a live(ララアライブ)│フォーネスライフ
人はずっと健康でありたい・幸せでありたいと願ってきました。近年では確かなエビデンスをベースとしたヘルスケア・予防医療のサービスが注目されるなど、生活を便利にするテクノロジーだけでなく、人生をより良く・より豊かにする「ウェルビーイング」の領域でもテクノロジーの活用が試みられています。 新しい考え方であるウェルビーイングとテクノロジーの関係を、私たちはどのように捉えればよいのでしょう。「スゴ本」の愛称で知られるブログ「わたしが知らないスゴ本は、きっとあなたが読んでいる」の中の人で、年間120冊もの本を読むという読書好きブロガーのDainさんに、独自の観点から5冊の参考図書を選んでもらいました。 フォーネスライフが提供する疾病リスク予測サービス「フォーネスビジュアス」では、4年以内の心筋梗塞・脳卒中など各種疾病の発症リスク・再発リスクを予測することができ、結果に応じてコンシェルジュ（保健師）が、
時系列データのための大規模言語モデル
近年の大規模言語モデル（LLM）の出現は、自然言語処理（NLP）においてパラダイムシフトをもたらし、ChatGPTをはじめとする様々な革新的サービスを生み出している。LLMの急速な進化は、NLPの領域を超えて、より広範なデータモダリティへのLLMの適用可能性を探る研究への発展を促している。その中で今回注目したのが、時系列データへのLLMの適用である。例えば、[Gruver+, 2023] では、GPT-3やLLaMA-2などの既存のLLMが、ダウンストリームタスクで教師あり学習した時系列モデルの性能に匹敵するか上回るレベルで、zero-shotで時系列予測ができることを報告しており、大変興味深い。本ブログでは、2024年に公開されたサーベイ論文「Large Language Models for Time Series: A Survey」を参考にLLM for Time Seriesの全
―本書は統計検定の準１級と１級（統計数理，統計応用）の内容にもほぼ対応している―初版第２刷以降の「はじめに」には，この文言が入っています。はたして，これは本当か，本稿では忖度なく一刀両断にしていきます。 本書（以下，青本と呼ぶ）は2023年10月に共立出版から出版されました。現在，著者の久保川達也先生は東大経済学研究科の教授であり，同じ出版社から出ている「現代数理統計学の基礎（以下，白本と呼ぶ）」の著者としても有名ですね。著者の慧眼によって様々な統計手法の本質が審らかにされていく様子は読んでいてとても刺激的であり，青本は私も好きな１冊です。本稿を読んで興味をもった人は，本書をぜひ購入してみてください。 青本は統計検定１級対策として適している 準１級は統計学の初学者や文系出身者でも努力すれば合格できる知識主体の試験であるのに対して，１級は難関国立大学理系２次試験を彷彿とさせるガチの数学力勝負
「はやぶさ2」が次に向かう小惑星の形の推測の論文出たが解析手法が『DOUSHITE(ドウシテ) 』で困惑する皆様→天才が考え出した名前だった
京都大学OASES/PONCOTSプロジェクト @OASES_miyako 論文&プレスリリースが出ました！ doi.org/10.1093/pasj/p… 「はやぶさ2」の次のフライバイターゲット小惑星、(98943) 2001 CC21による恒星掩蔽について、アマチュア天文家を中心とする観測グループが取得したデータを解析し、その影の形状をモデル化しました。 我々の開発した新しい掩蔽データ解析手法DOUSHITE(ドウシテ)を活用し、限られた観測データから形状を導き出すことに成功しました。 本研究は2026年に予定されているはやぶさ2のフライバイミッションにも貢献します。 画像credit: 有松亘/JAXA
この記事では、実験ノートの売っている場所をはじめとして、実験ノートの選び方や、普通のノートやルーズリーフが適しているかどうかについても解説していきます。 実験ノートの役割と重要性 実験ノートは、研究の進行状況や結果を記録するための重要なツールです。 正確なデータをノートに書き残すことで、後々のデータ解析や論文執筆に役立ちます。 また、実験ノートは特許出願や研究の再現性確認など、法的な証拠としても使用されることがあります。そのため、信頼性のある適切なノートを選ぶことが重要です。 実験ノートの選び方 実験ノートを選ぶ際には、以下のポイントに注意しましょう。 耐久性 実験ノートは頻繁に使用するため、耐久性のあるものを選びましょう。ハードカバーのノートや厚手の紙を使用したものがオススメです。 紙質 特にウェット系のラボだと、エタノールや有機溶媒を使う頻度が高いので、耐水性・耐薬品性が高く、インクの
Django 開発の最新トレンドを知りたいですか？ PyCharm は Django Foundation と連携して世界中 4,000 人以上の Django 開発者を調査し、その回答を基にフレームワークの使用に関するトレンドを解析しました。 このブログ記事では、次のような主な結果をご紹介します。 Django 開発者の 3 人に 1 人が Flask または FastAPI も使用している。 ほとんどの開発者がフルスタック開発と API 開発の両方に Django を使用している。 Django 開発者の 61% が非同期テクノロジーを使用している。 その他にも多くのインサイトがあります！ これらの結果を詳しく確認し、インフォグラフィックによる図説も利用しながら Django 開発のその他のトレンドを発見しましょう。 バックエンド: Django 開発者 3 人に 1 人が Flask
大学4年生や大学院生にとって、配属される研究室に夏休みがあるのかは非常に気になるポイントです。今回の記事では、一般的な研究室には夏休みがあるのか、夏休みについてどのように聞けば良いのかについて、注意点をふまえて解説します。 大学の学事暦における夏休み期間 東京大学の学事暦(年間行事予定)では、夏休み期間は以下のように記載されています。 夏季休業(自): 8/1 夏季休業(至): 9/30 東京大学 令和6 (2024)年度 研究科等別授業日程 つまり、暦上は8月～9月下旬まで夏季休業ということになっていますが、研究室の夏休みは学事歴に従わない場合が多いです。 次からは研究室の夏休み期間について詳しく見ていきます。 【結論】夏休みの期間は研究室によって違う 結論としては、夏休みの期間や取り方は研究室ごとに大きく異なります。 また、研究テーマの進捗や実験のスケジュールに左右されることも多いです
はじめに AI技術の進化が目覚ましい今日、エンジニアにとってAIツールはもはや欠かせない存在になっています。でも、世の中には無数のAIサービスが溢れていて、どれを選べばいいのか迷ってしまいますよね。 そこでこの記事では、エンジニア向けの最新AIツールをジャンルごとに徹底的に紹介します。これを読めば、自然言語処理、画像処理、音声処理、データ解析、自動化、開発支援など、様々な分野で使えるAIツールの全貌がつかめるはずです！ このガイドを参考に、自分のプロジェクトにぴったりのAIツールを見つけて、効率アップを目指しましょう！それでは、ジャンルごとにAIサービスを紹介していくので、あなたに合った最適のものを見つけていきましょう。 弊社Nucoでは、他にも様々なお役立ち記事を公開しています。よかったら、Organizationのページも覗いてみてください。 また、Nucoでは一緒に働く仲間も募集して
こんにちは。開発本部 たんぽぽ室 DevRel グループの杉田です。 遅ればせながら、今年も新卒向け技術研修の資料と動画を公開しました。 MIXI の新卒向け技術研修は、一部の科目を除いて、実際の開発現場で活躍する MIXI のエンジニアが講師を務めており、現状に合わせて見直しも行われていますので、最新の情報で学習することができます。是非、自己学習や勉強会の教材として、スキルアップや成長支援にお役立てください。 <<おねがい>> 公開している資料や動画は、是非、勉強会や社内の研修などにご自由にお使いいただければと思いますが、以下のような場でのご利用はご遠慮ください。 受講者から参加費や授業料など金銭を集めるような場での利用 （会場費や飲食費など勉強会の運営に必要な実費を集める場合は問題ありません） 出典を削除または改変しての利用 なお、資料や動画、リポジトリは非公開の科目もございます。予め
林 和弘 氏: 生成AI時代のオープンサイエンスと知的創造活動のゲームチェンジ 2024年7月23日（オンライン・Zoom） - こくちーずプロ
文部科学省科学技術・学術政策研究所データ解析政策研究室長 東京大学大学院在学中の1995年ごろより取り組み始めた化学会の英文誌の電子ジャーナル化と事業化をきっかけに、学術情報流通の変革を軸とした科学、社会、科学と社会の変容（オープンサイエンス）の調査研究と実践に幅広く取り組む研究者。”社会の仕組みを、データ主導の”開かれた科学”を基底としたものに組み替えて問題解決を図る。”（プレジデント2024年4月12日号）ことを目指す。 日本化学会に15年勤務した後、2012年より文部科学省科学技術・政策研究所に着任し、政策科学研究に取り組む。オープンサイエンスのあり方と政策づくりに関する調査研究、およびその実践に取り組み、日本学術会議、内閣府、文部科学省の委員等で日本のオープンサイエンス政策形成を支援。 G7科学技術大臣会合、OECD、UNESCOのプロジェクト等においては、世界でも珍しい実際に電子
検察官の誘導テクニックは、一流の不動産営業マンに似ている──作家・新庄耕が、プレサンス元社長・山岸忍に聞く【前編】 | 新庄耕「商人の土地」
検察官の誘導テクニックは、一流の不動産営業マンに似ている──作家・新庄耕が、プレサンス元社長・山岸忍に聞く【前編】 Netflixシリーズ『地面師たち』の原作や不動産営業マンを描いた傑作『狭小邸宅』で知られる作家・新庄耕さんが、「土地」にまつわる様々な事象や事件を取材する新連載がスタートします。 今回は、2019年に大阪地検特捜部により逮捕され、21年に無罪を勝ち取った、プレサンス元社長・山岸忍さんへのインタビューの前編をお届けします。 （やまぎし・しのぶ）1963年、滋賀県生まれ。同志社大学法学部卒業後、大京観光（株）入社。（株）創生を経て97年に(株)プレサンスコーポレーションの前身会社設立。2020年全国分譲マンション供給戸数トップの業界大手に成長させる。19年12月、大阪地検特捜部に横領容疑で逮捕されるも、21年11月、無罪判決確定。 山岸忍氏の人間性を一言であらわすなら、「不屈の
NTT東日本が異業種と組み、先端技術で睡眠の質を高める「スリープテック」でイノベーションを起こそうとしている。日本人の平均睡眠時間は主要国で最も短く、不眠による経済損失は18兆円規模とみられる。斬新な睡眠サービスを生むコミュニティーを発足させ、2年足らずで10倍の140社になった。健康経営で社員の「かくれ不眠」の解消に動く企業もあり、睡眠テックの経済圏が広がる。「スリープツーリズムの森林浴や森
ミッションは健康寿命10年延長。レトロが描く「不老長寿」への道筋 | Forbes JAPAN 公式サイト（フォーブス ジャパン）
1900年代から行われてきた老化の研究。今、その研究成果をもとにスタートアップ企業や世界の富豪たちが「不老長寿」を実現しようとしている。生涯健康。そんな人類の夢が叶う日はやってくるのか。 日本国内で100歳以上の人口は約9万2000人。53年連続で増えている。長生きは喜ばしいことだが、欲を言えば、病気に苦しまず健康なまま寿命を全うできたら理想的だ。その望みは、世界の富豪によって、まもなくかなえられるようになるかもしれない。 米アマゾン創業者ジェフ・ベゾスやペイパル共同創業者のピーター・ティールは、老化関連疾患の治療薬を開発するスタートアップ「ユニティ・バイオテクノロジー」に個人で出資しているほか、グーグル共同創業者のラリー・ペイジは、老化の研究所「カリコ」を2013年に立ち上げている。米国の国立老化研究所は予算を右肩上がりに増やしており、23年は6000億円にも上る。さらには「Longev
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【統計検定１級】データ解析のための数理統計入門を読む | とけたろうブログ
実験ノートはどこに売ってる？普通のノートやルーズリーフでも良いのかについても解説！【大学生・大学院生】
2024 年 Django の現状 | The PyCharm Blog
【理系】大学4年生・大学院生に研究室の夏休みはあるのか？実体験をもとに解説します！
【178選】エンジニア必見！最新AIサービス完全ガイド - Qiita
【2024年版】MIXI 新卒向け技術研修の資料・動画を公開しました！
睡眠テック、異業種140社連合 データ解析で「快眠の家」も NTT東が旗振り、ノウハウ共有 - 日本経済新聞