［データ分析］折れ線グラフで「変化」を可視化 ～ 売り上げは本当に上がっているか？：やさしいデータ分析 データ分析の初歩から応用まで少しずつステップアップしながら学んでいく連載の第8回。グラフを利用して時間的な変化を可視化する方法と、それに関連するさまざまな考え方を追いかけます。具体的には折れ線グラフを使いますが、データの取り扱い、結果の見方などに関して、考慮すべき点や見落としがちな点について見ていきます。

こんにちは。ヴァリューズでデータアナリスト(※以降DAと表記)をしている本間と申します。 今日は、これからDA職に就く人や、DAという仕事に興味を持っている学生の皆さんに向けて、データ分析職における考え方や心構えの参考になる書籍を紹介していきます。 株式会社ヴァリューズ　データアナリスト　本間 花 東京都出身、津田塾大学総合政策学部卒業。1998年生まれ。 2021年にヴァリューズへ新卒入社。 ヴァリューズのWEBログデータの分析を手掛ける。 本文に入る前に、あえて技術書ではなく、「データ分析者の考え方や心構え」をテーマと設定している背景について少しお話できればとおもいます。 私が学生や新卒DAだった頃、技術書や、技術に関する発信に触れる機会は豊富にあった一方で、実際にDA職に就いている人たちの仕事観や、技術面以外で参考になったとされる情報を知る機会はあまり多くありませんでした。 そして、

Fast and versatile, the NumPy vectorization, indexing, and broadcasting concepts are the de-facto standards of array computing today. NumPy offers comprehensive mathematical functions, random number generators, linear algebra routines, Fourier transforms, and more.

# Road to NumPy 2.0 > **_Note:_** This is a living document. We are prepared to modify it through

BigQuery Studio を発表 - データから AI へのワークフローを加速するコラボレーション指向の分析ワークスペース ※この投稿は米国時間 2023 年 8 月 31 日に、Google Cloud blog に投稿されたものの抄訳です。 最近の調査によると、データと AI を効果的に活用している組織は、競合他社よりも収益性が高く、さまざまなビジネス指標においてパフォーマンスが向上していることが報告されています。過去 2 年間にデータと分析への投資を増やした組織は 81% にも上ります。しかし、多くの組織が依然としてデータのビジネス価値を最大限に引き出すことに苦慮しており、40% 以上の組織が、分析ツールやデータソースが異なることや、データ品質が低いことを最大の課題として挙げています。 統合された、インテリジェントでオープンな Google Cloud は、セキュアなデータおよ

三行要約 LLM のファインチューニングでは事実の学習ができないという話があったので、事実の学習の例として、シェイクスピアのRomeoをBobに置き換える実験を行った 実験では、訓練対象とする層による結果の違いを確認した。アテンション層のみを訓練した場合は、Bobへの置き換えはできなかった。一方、全結合層を含めて訓練した場合は、学習率を調整するとBobへの置き換えができた ファインチューニングが事実の学習に向いているかはさておき、工夫次第でファインチューニングも事実の学習に利用できる可能性はある 背景 先月 ChatGPT(GPT-3.5 Turbo) のファインチューニングがリリースされました。いろいろな方が試されて、うまくいった、いかなかったという話がちらほらありました。例えば以下の記事では、一晩試してみた程度では、ChatGPTに最新の知識を教え込む目的での Fine-tuning

G-gen 又吉です。Google Cloud (旧称 GCP) の生成 AI (Generative AI) である PaLM 2 を用いて、Cloud Run 上に社内 LLM Web アプリを構築してみました。 はじめに 前提知識 Vertex AI PaLM API Gradio Cloud Runサービスへのアクセス制御 準備 ディレクトリ構成 app.py requirements.txt Dockerfile デプロイ 動作検証 はじめに 今回は、Google Cloud の生成 AI である Vertex AI PaLM API を用いて、社内向け LLM Web アプリを Cloud Run 上にデプロイします。 また、Cloud Run サービスの認証には Identity-Aware Proxy (IAP) を用いることで、社内ユーザーのみがアクセスできる状態を構成で

紹介 本書は、ChatGPTのAPIとLangChainを使って、大規模言語モデル（LLM）を本番レベルのシステムに組み込むための知識をステップバイステップで学習し、手を動かしながら実践できる書籍です。 生成AIが登場し、APIやフレームワークのエコシステムが充実してきたことによって、これまで機械学習やプログラミングの十分な知識が必要だったことに対してアプリケーション開発者が挑戦しやすくなりました。LLMの性質を活かしたサービスや業務システム構築の基礎を理解し、LLMのモデルやワークフローを抽象化して取り扱ううえで、LangChainというフレームワークが非常に便利です。本書でOpenAI APIやLangChainをしっかり学ぶことで、生成AI関連の知識を体系的にイメージできるようになります。 本書ではまず、OpenAI APIとLangChainについて解説します。ChatGPTのよう

■寺田学（てらだ まなぶ） ［担当：第1章、第2章（「parquet形式」除く）、第7章（Pythonを使った文字列処理）、第8章（Pillowを使った画像の加工）、付録A・B］ Python Web関係の業務を中心にコンサルティングや構築を株式会社CMSコミュニケーションズ代表取締役として手がけている。ほかにも、一般社団法人PyCon JP Association理事や一般社団法人Pythonエンジニア育成推進協会 顧問理事を務める。 Pythonをはじめとした技術話題を扱うPodcast「terapyon channel」https://podcast.terapyon.net/を配信中。共著『見て試してわかる機械学習アルゴリズムの仕組み 機械学習図鑑』『Pythonによるあたらしいデータ分析の教科書 第2版』（いずれも翔泳社）、監修『スラスラわかるPython 第2版』（翔泳社）、監

Stability AI は、音楽とサウンド生成のための初のAIモデルとなる Stable Audio を発表しました。 Stable Audio は、最新の生成 AI 技術を駆使し、使いやすい Web インターフェースを介して、より高速で高品質な音楽とサウンドエフェクトを提供する世界初の製品です。Stability AI は、45秒までのトラックを生成してダウンロードできる Stable Audio の基本無料版と、商用プロジェクト用にダウンロード可能な90秒のトラックを提供する「Pro」サブスクリプションを提供しています。 StabilityAI の CEO である Emad Mostaque は、「唯一の独立した、オープンでマルチモーダルな生成 AI の会社として、音楽クリエイターをサポートする製品を開発するために私たちの専門知識を活用できることを嬉しく思います。私たちの願いは、St

はじめに 数か月ほど前、住所の正規化が話題になりました。こちらの記事が特に有名ですね。 関連して、こちらの記事も話題になりました。 当時はほかにも色々な人が日本のヤバい住所の例をあげてくれて、とても楽しかったです。 実は弊社でもAddressianという住所正規化サービスを提供しています。初めて目にする変わった住所を見かけたら、とりあえず自社のAPIに投げてみて「おお、正規化できた」「すごい！」などといいながら遊んで働いています。 サービスは無料で利用できますが、今までは利用の手順が面倒でした。 ユーザー登録する APIキーを発行する 住所正規化APIを呼び出すプログラムを用意する（サンプルコードあり） プログラムを実行して住所を正規化する そこで、もっと気軽に住所正規化を試してもらえるように、ユーザー登録しなくても使えるデモ機能を作ってみました。 デモ機能の概要 住所正規化デモ画面 こち

【シリコンバレー=奥平和行】Chat（チャット）GPTの開発を手がける米オープンAIのサム・アルトマン最高経営責任者（CEO）は12日、生成AI（人工知能）に対する規制について「不完全であっても今から動くことが好ましい」と述べた。同氏は米議会上院が13日に開くAIに関する会議に出席し、ルール整備の加速を求める見通しだ。米IT（情報技術）大手のセールスフォースが12日に米サンフランシスコ市で開い

「Generative AI 時代のサービス開発者への道」というタイトルで登壇したのは、日本マイクロソフト株式会社・大森彩子氏。Generative AIの歴史、サービス開発にGenerative AIを活用するための心構えとTipsを日本CTO協会が主催の「Developer eXperience Day 2023」で発表しました。全3回。1回目は、AIの歴史と「Bing Chat」のデモ。 登壇者の自己紹介とアジェンダ紹介 大森彩子氏：みなさんこんにちは。マイクロソフトの大森です。私からはGenerative AI、生成AIを使ったアプリケーション、サービスを考えている方々に向けて、どのようにGenerative AIを捉えたらいいのか。そして、それを使ったサービスやアプリケーション開発に至るまでのヒントをお話できればと思います。 自己紹介になりますが、あらためまして、マイクロソフトの

Googleは2023年9月11日（米国時間）、「Digital Futures Project」の創設を発表した。AI（人工知能）の機会と課題を理解し、これらに対処する取り組みを促進するため、さまざまな声を結集することを目的としたプロジェクトだ。 AIイノベーションを加速させるための助成金を提供 Googleは同プロジェクトを通じて、責任あるAI開発に向けて、研究者を支援し、会議を開催し、公共政策ソリューションに関する議論を促進する。同プロジェクトの一環として、Google.orgは2000万ドルの基金「Digital Futures Fund」を設立し、AIに関する対話と調査を促進するために、世界中の主要なシンクタンクや学術機関に助成金を提供する。

マイクロソフトは、同社が提供する生成AIによるさまざまな支援機能を提供する「Copilot」製品群が、著作権侵害の心配なく使えると約束する「Copilot Copyright Commitment」を発表しました（英語、日本語） マイクロソフトは、生成AIがソースコードを生成してくれるGitHub Copilotや、プレゼン資料などを生成してくれる「Microsoft 365 Copilot」など、生成AIを活用した「Copilot」製品群を積極的に展開しています。 一方で、こうした生成的AIは既存のソースコード、画像、文書などを学習しているため、何らかの要因で既存のソースコードや画像、文書の複製に相当するものが生成され、それを知らずに利用した場合に利用者が著作権侵害により訴えられる可能性があるのではないか、と心配されています。 今回のマイクロソフトの発表した「Copilot Copyri

京都大学とベンチャー企業のテラバースムは9月12日、仏教の経典を学習させ、ユーザーの悩みに答えるチャットボット「親鸞ボット」「世親ボット」を開発したと発表した。米OpneAIのLLM「GPT-4」を活用。従来からの「ブッダボット」とあわせ、「仏教対話AIの多様化に成功した」としている。 浄土真宗の開祖・親鸞（12～13世紀）の聖典「正信偈」と、大乗仏教の「唯識」を大成し、アジア各地で教えを広めた菩薩の世親（4世紀）の聖典「倶舎論」をそれぞれ学習させたチャットボット。 AR技術を活用し、現実を映した背景に親鸞や世親の仏像画像を重ねるなどして視覚・聴覚を用いたコミュニケーションも可能にした。 研究チームはこれまで、仏陀の聖典を学習させた「ブッダボット」を2種類開発。1つめはGoogleの「Sentence BERT」を応用し、Q＆A形式で機械学習させてそのままの形で回答を生成するもの。2つめは

昨年の末、ChatGPTが登場し、生成AIの能力を一般の人が実感できるようになりました。 大きく世の中が変わった、と感じる人も多いかもしれません。 特に、今年の3月にリリースされた生成AIモデルのGPT-4は、ChatGPTの能力を大きく高めたので、世の中が騒然となりました。 中には「AIが人類を滅ぼすかもしれない」と本当に心配した人もいたようです。 企業の経営者たちも同じ感想を抱いたようで、例えば日清食品のCEOは、「どうしてこんなことができるのか。恐ろしい時代になったものだ」という感想を述べて、3週間で生成AIを全社導入したといいます。＊１ ＊ しかしGPT-4のリリースから半年ほどたち、当初の「ChatGPT狂騒曲」も収まりつつあります。 例えば、上述した日清食品では、社内の利用は1日150～200人程度で、全体約5000人のうち、5％未満だと明かされていました。 また、ロイターによ

生成AIがもたらした“5つのゲームチェンジ”　日本の「脱・ガラパゴス化」が目前に迫るワケ：言語の壁を壊す（1/2 ページ） 筆者は普段から、ベンチャー企業や大企業を対象に、AIなど先進テクノロジーと呼ばれる分野で、コンサルティング支援を通じてビジネス成長を考えている。 今回は”生成AIが「ガラパゴス日本市場」を崩壊させるワケ”というテーマについて、さまざまな業界の中で最も影響を受けるであろうIT業界を前提に、この生成AIのインパクトを解説していく。2022年11月からGPTをはじめ生成AIが爆発的に流行した。AIの歴史ではいまだかつてないスピードで普及し始めていて、本記事を執筆している時点でも大流行となっている。その上で、まずは生成AIがもたらした5つのゲームチェンジを紹介する。 関連記事 NEC、ワンストップ生成AIサービス提供　日本市場向けに開発 NECは7月6日、日本市場向けの生成A

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day

生成AIを活用すると、自由に試しながら、既成の枠にとらわれないものを作り、短時間で最大限の価値を生み出すことができます。アドビはこの技術を、開発に10年を費やしたAdobe Senseiの次の段階と位置づけています。うまく利用すれば、人間の想像力のすばらしさはそのままに、クリエイティビティを高めインテリジェンスを磨くことができます。 これからは生成AIの時代です。

この生成 AI ユーザー ガイドライン（「本ガイドライン」）は、お客様がアドビの生成 AI 機能を使用する場合に適用されます。さらに、お客様とアドビとの契約にアドビ基本利用条件（adobe.com/go/terms_jp に掲載）が適用される場合、お客様によるこの生成 AI 機能の使用については、Adobe 生成 AI 追加条件（adobe.com/go/adobe-gen-ai-addl-terms_jp に掲載。これは参照により本ガイドラインに組み込まれます）も適用されます。 本ガイドラインには、2 つの目標、つまり、一連のアドビの製品およびサービスを使用して生成されたコンテンツの高品質を維持することと、ユーザーがアドビの製品およびサービスに対して創造性と生産性を高めるような魅力的で信頼できる方法でアクセスできるようにすることがあります。 1. 人工知能/機械学習（AI/ML）トレーニ

アドビは9月13日、コンテンツ生成AI「Adobe Firefly」のWeb版と、同社の一部デスクトップアプリに統合されたFireflyの機能を一般公開した。これにより、Fireflyによって生成されたコンテンツの商用利用が解禁される。 一般公開版の概要 Fireflyは2023年3月からβテストが行われてきた。当初はプロンプト（文章）によるコンテンツ生成は英語にのみ対応していたが、日本語を含む多言語対応を進めるなど、機能の拡充を進めてきた。「Adobe Photoshop」「Adobe Illustrator」などのデスクトップ向けβアプリにも、Fireflyの技術が順次搭載されている。 →初登場時の記事 →Photoshopアプリへの実装時の記事 →Illustratorアプリへの実装時の記事 Adobe（アドビの親会社）によると、これまでにFireflyを使って生成されたコンテンツは

“When will there be a Rust IDE?” We get this question from our users quite frequently, and today we’re happy to announce that the day has arrived. Please welcome RustRover, our standalone IDE for Rust. As many of you are aware, we’ve worked for years to bring support for Rust functionality as a plugin that works in both IntelliJ IDEA and CLion. However, time and time again, we’ve received requests

Kotlin言語や統合開発ツールIntelliJ IDEAなどの開発を行っているJetBrainsは、Rust言語用の統合開発環境「RustRover」のプレビュー公開を発表しました。 Let's hear it for RustRover – our new dedicated Rust IDE! We’re announcing a free public preview and encourage you to check it out. Enjoy this IntelliJ-based IDE with on-the-fly analysis, code completion and debugger. Head over to the https://t.co/egUhhh29Hn — RustRover (@rustrover) September 13, 2023 Rust