近年データ分析に取り組む企業が増えた結果、データサイエンティストという職業が注目されています。ところが実際の業務内容については、意外に知らない人も多いものです。そこで本特集では書籍『ビジュアル データサイエンティスト 基本スキル84』（日経BP 日本経済新聞出版）から厳選・再編集し、データサイエンティストが現場で遭遇する「課題あるある」をお届けします。今回はデータサイエンティストが職場で直面しがちなリソース上の制限について見ていきましょう。 「機械学習」という言葉だけが独り歩きして、簡単にデータサイエンスができるという誤解があります。しかし現実にはそう簡単にいかないことも多く、分析には時間が必要です。 データ分析は「試行錯誤」の連続です。最初からきれいに仮説通りに結果が出るわけではなく、分析してはやり直しの繰り返しです。しかし機械学習という言葉を耳にして具体的に理解していない人の場合、「機

Drag and drop off-the-shelf ML components with Visual Blocks. A fast, easy way to prototype ML pipelines – no expertise or coding required.

Google I/O 2023 の #WebML （ブラウザで実行できる機械学習）のセッションで気になった部分をざっくり日本語で記事にしてみたJavaScript機械学習TensorFlow.jsMediaPipeGoogleIO2023 はじめに この記事は、以下のツイートに書いている Google I/O 2023 の #WebML のセッションに関する話です。 話の内容は、ブラウザで実行できる機械学習の話です。 どんな技術的なキーワードが関係するかを書いてみると、例えば、今まで自分が触ったことがある内容・キーワードでは、以下の内容が関係しています。 ・JavaScript（ブラウザ上での実行） ・TensorFlow.js ・MediaPipe の JavaScript版 ・WebAssembly その他、まだ自分がきちんと手を出せていない内容のキーワードでは、以下に関する話も登場し

Image credit: Google 5月10日の Google I/O における大きな人工知能（AI）に関するニュースは、大規模言語モデル「PaLM 2」の発表だが、このイベントにおけるAIニュースはそれだけではない。 Google は、オープンソースの機械学習（ML）技術のアップデートと、成長中の TensorFlow エコシステムの機能強化を相次いで発表した。TensorFlow は、Google が主導するオープンソース技術の取り組みで、開発者がモデルを構築して訓練するのに役立つ ML ツールを提供している。 Google は、Google I/O で新技術「DTensor」を発表した。この技術は、MLト レーニングに新しい並列化技術をもたらし、モデルトレーニングとスケーリング効率の向上を支援するものだ。 また、TF Quantization API のプレビューリリースもあり

「LLM」の「LoRA」「RLHF」によるファインチューニング用のツールキットをまとめました。 1. PEFT「PEFT」は、モデルの全体のファインチューニングなしに、事前学習済みの言語モデルをさまざまな下流タスクに適応させることができるパッケージです。 現在サポートしている手法は、次の4つです。 ・LoRA ・Prefix Tuning ・P-Tuning ・Prompt Tuning ◎ LLaMA + LoRA 「Alpaca-LoRA」は、「LLaMA」に「LoRA」を適用して「Alpaca」の結果を再現するためのコードが含まれているリポジトリです。「finetune.py」がLoRAの参考になります。 ・tloen/alpaca-lora ◎ RedPajama-INCITE + LoRA 「INCITE-LoRA」は、「RedPajama-INCITE」に「LoRA」を適用する

What are the pre-requisites for this bootcamp? Our goal is to get you 100% caught up to state-of-the-art and ready to build and deploy LLM apps, no matter what your level of experience with machine learning is. Please enjoy, and email us, tweet us, or post in our Discord if you have any questions or feedback! Learn to Spell: Prompt Engineering High-level intuitions for prompting Tips and tricks fo

GitHub Copilot chatのウェイティングリストが通過して本日使えるようになりました。 結構本日通っている方が多かったようです。 アイコンがかわいいですね。 このかわいいアイコンと対話することになります。 使えるようになったので何ができるかを試してみました 準備 まだCopilot chatに関しては公式でも文献がおいておらず招待のメールを見ながら準備を進めるのですが必要なのはVSCode Insiders とGitHub Copilot Nightlyになります。 またVSCode InsidersにGitHub Copilot拡張をいれるとNightlyと競合するようなのでその点が注意です。 使い方 コード上で右クリックを押すとCopilotメニューが追加されています。(Chatでない標準のCopilotだとこれはなかった） 基本的にできること /helpででてきます。 た

コンテンツブロックが有効であることを検知しました。 このサイトを利用するには、コンテンツブロック機能（広告ブロック機能を持つ拡張機能等）を無効にしてページを再読み込みしてください。 ✕

Google、MLハードウェアとフレームワークの統合を簡素化する「PJRT」を発表：MLインフラの断片化を解決する取り組みの一環 Googleは、オープンソースの機械学習（ML）コンパイラエコシステム「OpenXLA」プロジェクトの一部として、「PJRT」をオープンソースとして公開した。PJRTは、MLハードウェアやMLフレームワークに依存しないMLコンパイラインタフェースやMLランタイムインタフェースを提供する。 Googleは2023年5月8日（米国時間）、オープンソースの機械学習（ML）コンパイラエコシステム「OpenXLA」プロジェクトの一部として、「PJRT」をオープンソースとして公開した。PJRTは、MLハードウェアやMLフレームワークに依存しないMLコンパイラインタフェースやMLランタイムインタフェースを提供する。 Googleは、MLインフラがさまざまなフレームワーク、コン

ここ数か月、AIの進化が加速していて、時代についていけなくなりそうです。音楽関連のものも次々と登場していて、いつも驚くばかりですが、ここ数日SNSのタイムラインで何度か目にしたのがSongRなるもの。「これ、何だろう？」とリンクを踏んでみたところ、AIが自動作曲・編曲してくれ、作詞もしてくれるし、自分で歌詞を入力すればそれに合わせて歌ってもくれるというサービスだったのです。 アプリをインストールしたりする必要もなく、ブラウザで使えるサービスであるためWindwosでもMacでもiPhone、Androidでも何でもOKというもの。まだスタートして1、2週間のようですが、現在ベータ版という扱いだからか、誰でも無料で使うことができ、サービスとなっています。まだ発展途上という感じではありますが、今後進化していくと、かなり凄いものになりそうな気もするシステムだったので、ちょっと紹介してみましょう。

AIの「情報漏えい」リスクにどう対応する？――日本マイクロソフトCSO河野氏が「Security Copilot」を紹介：チャットAIは、あくまで「頭の良いインタフェース」 日本マイクロソフトは2023年4月20日、「Chat AIを活用した 新しいセキュリティ運用」と題する記者発表会を開催した。内容は3月28日に発表された「Security Copilot」をベースとしたもので、MicrosoftにおけるAI活用として、どのように安全性を向上させつつ、実務に展開するかを紹介した。 AIを「コパイロット」（副操縦士）として活用するためには MicrosoftはAIを、パイロットである利用者の隣に座る“副操縦士”（コパイロット）として定義している。昨今では日本の国会答弁でもOpenAIの「ChatGPT」を使う事例もあったが、日本マイクロソフト 技術統括室 チーフセキュリティオフィサー（CS

米カリフォルニア州ハリウッドにあるネットフリックス社屋前でのWGAのデモ（2023年5月2日撮影）。(c)Frederic J. BROWN / AFP 【5月13日 AFP】米ハリウッドの脚本家団体が今月、報酬をめぐりストライキを断行した。動画配信大手ネットフリックス（Netflix）やディズニー（Disney）といった製作スタジオは、将来的に人工知能（AI）に脚本を執筆させる可能性を排除しないとしており、団体側は反発を強めている。 対話型AI「チャットGPT（ChatGPT）」のような人工知能プログラムは、人間の会話を不気味なほどに模倣する能力を高めており、さまざまな業界を震撼（しんかん）させている。ジョー・バイデン（Joe Biden）政権もこのほど、ビッグテック（巨大IT企業）のトップを招き、AIの潜在的なリスクについて意見交換を行った。 そうした中、脚本家が加入する全米脚本家組合

大手スーパーのイオンが、AI（人工知能）を使った需要予測と発注のシステムを13日から導入しました。 このシステムは、店ごとの過去の販売実績や、曜日、価格、気温などの情報を組み合わせて、AIが最適な発注数を提案します。 発注にかかる時間は1部門あたり平均およそ90分から45分に半減し、過剰発注を防ぐことで3割ほどの在庫削減にもつながるということです。 イオンリテール・システム企画本部、川舩直純さん：「作業の効率化ができたことで、お客様への接客であったり、売り場のメンテナンスの方に時間を使うことができております」 人手不足や食品ロスの対策としてAIの需要予測による発注は他の小売企業でも広がっています。

「Chirper」は「東京在住の魔法少女」「地球観測中の宇宙人」など個性豊かなAIアカウント(チャーパー)たちによる日常投稿やレスバトルを観察できるサービスです。新たにチャーパーたちと会話できる機能が追加されたので、どんな会話を楽しめるのか確かめてみました。 AI Social Network | chirper https://chirper.ai/ja 上記のリンクからChirperにアクセスすると、「ポケモンの展覧会に行きたい」「瞑想(めいそう)するのが日課」といった短文投稿がずらりと表示されます。しかし、これらの投稿はすべて「チャーパー」と呼ばれるAIアカウントによって投稿されたもので、人間による投稿は存在していません。 チャーパーたちは互いにリプライを送り合うこともあれば、インターネット上に実在するニュース記事を引用して投稿したり、画像を投稿したりすることもあります。 人間のユー

","naka5":"<!-- BFF501 PC記事下（中⑤企画）パーツ＝1541 -->","naka6":"<!-- BFF486 PC記事下（中⑥デジ編）パーツ＝8826 --><!-- /news/esi/ichikiji/c6/default.htm -->","naka6Sp":"<!-- BFF3053 SP記事下（中⑥デジ編）パーツ＝8826 -->","adcreative72":"<!-- BFF920 広告枠）ADCREATIVE-72 こんな特集も -->\n<!-- Ad BGN -->\n<!-- dfptag ＰＣ誘導枠５行 ★ここから -->\n<div class=\"p_infeed_list_wrapper\" id=\"p_infeed_list1\">\n <div class=\"p_infeed_list\">\n <div class=\"

中国でテクノロジーをマネーに変える速度は往々にして試行錯誤をしないので速い。最近流行りのAI画像生成もそのひとつ。Stable DiffusionやMidjourneyなどのアルゴリズムが更新され、実在のモデルやインフルエンサーのような人物と見紛う画像を生成できるようになり、これが早速ビジネスに適用され、AIで描かれた女性がSNS「小紅書（RED）」やECの「淘宝」や「天猫」などで見るようになった。 少なくとも現時点でAIが生成した美人画像は中国でウケがよく、小紅書では生成したAI画像を自撮り画像であるかのように投稿して数万のフォロワーを抱えるアカウント（ここでは便宜上「AI美人ブロガー」とする）が続々と登場している。AI美人ブロガーを作成した人はほぼ全員が男性でありAI関連分野に仕事や研究で携わっている。一方女性の作成者についてはアニメーターやデザイナーが参入していて、キャリアや感性を生

「高品質なアニメ画像でNSFWコンテンツを生成したい」 「MeinaMixを画像生成のモデルとして利用している」 このような場合には、MeinaHentaiがオススメです。 この記事では、MeinaHentaiについて解説しています。 本記事の内容 MeinaHentaiとは？MeinaHentaiの利用方法MeinaHentaiの動作確認 それでは、上記に沿って解説していきます。 MeinaHentaiとは？ MeinaHentai – V3 | Stable Diffusion Checkpoint | Civitai https://civitai.com/models/12606/ 上記ページは、NSFWのコンテンツなので要注意です。 そして、ページにアクセスするにはログインが必要となっています。 MeinaHentaiとは、Meinaシリーズのモデルです。 Meinaシリーズと言

AIの発展が目覚ましい。 Twitterをみていると、お絵かきAIやChat GPTによる優秀な仕事がサラサラと流れていく。 その仕事のお点前は、既に平均的なビジネスパーソンの域を超えているようにすら見え、かつそれが数日単位でレベルアップする有様である。 自分はそれをみて「はー」と感心するだけだったのだが、つい最近になって翻訳AIで有名なDeep Lを使用し、卒倒するぐらいの衝撃を受けた。 今日はその衝撃を書いていこうかと思う。 日本の研究者を悩ませる英語問題 古より日本人研究者の頭を悩ませてきたのが英語である。 日本人の英語の酷さは海外では有名なようで、有名な論文の投稿規定に「日本人は英文校正サービスを使用した後に論文を投稿してください」という意図の事がやんわりとした表現で書かれていた事があったという程である。 例に漏れず、僕も英語はそこまで得意な方ではない。簡単な日常会話や専門誌の読解

こんにちは、CX事業本部 Delivery部の若槻です。 今回は、ChatGPT plugins のベータ提供が開始されていたので、現在利用可能なプラグインと、実際に試してみた内容についてご紹介します。 ChatGPT plugins とは ChatGPT UI 上で 3rd-party アプリケーションを利用できるようにする機能です。 プラグインを追加することにより、ChatGPT に対して次のような機能拡張を行うことができます。 リアルタイムな情報の取得（例：スポーツのスコア、株価、最新ニュースなど） プライベートなナレッジベースからの情報取得（例: 社内ドキュメント、個人的なメモなど） チャットベースのアクション代行（例: 航空券の予約、フードの注文など） 各社が ChatGPT 向けのプラグインをこぞって開発するようになれば、ChatGPT がツールの枠を超え一種のプラットフォーム

前のブログでも紹介したのだけど、ChatGPTプラグインのローリングアウトが始まって使えるようになっていて、結局みんな使うのはこの3つくらいかなーとなったので、まとめておきます。 前のブログはこれ。 Bardも世の中のサービスぜんぶGoogle製と思ってるらしい - きしだのHatena 同時に使えるのは3つまでのようだけど、他のプラグインはアメリカの不動産情報など日本からは使いづらかったり、作ってみたレベルだったりなので、結局この３つに落ち着くかなーという気がします。 WebPilot これは手放せなくなります。Web記事を読み込んでくれるプラグイン。 ChatGPTには「この記事を要約して」しか入力しなくなりそう。 このエントリを要約してもらっています。 大規模言語モデルの「脳波」が反応してる部分を壊すとどうなるか試した - きしだのHatena ※ 追記 15:21 ぼくのところには

米OpenAIは5月12日（現地時間）、3月に発表したWebブラウジング機能とサードパーティ製プラグインを、実験的な新機能として「ChatGPT Plus」ユーザーに提供開始すると発表した。15日の週に全Plusユーザーにロールアウトしていく。 利用できるようになると、ChatGPT Plusの画面左下のユーザー名をクリックし、［Settings］→［Beta features］を開くと「Web browsing」と「Plugins」という項目が表示されるようになる。これらの項目を有効にすれば、機能を利用できるようになる。 筆者の環境ではまだWebブラウジング機能しか使えないが、例えば「Sam Altomanの最新ツイートを教えてください」と尋ねると、米Microsoftの「新しいBing」と同様に検索、読み込みの過程を表示しつつ、答えを表示する。この場合、正しい答えが得られた。

ChatGPTなどの対話型AIは、高精度なテキストを生成できる一方、入力が可能な言語の最小単位である「トークン」には限度があります。OpenAIのGPT-4は約3万2000トークンまでの入力が可能ですが、AI研究スタートアップのAnthropicがテキスト生成AI「Claude」のトークンを9000から10万へ拡張したことを発表しました。 Anthropic | Introducing 100K Context Windows https://www.anthropic.com/index/100k-context-windows Anthropic’s latest model can take ‘The Great Gatsby’ as input | TechCrunch https://techcrunch.com/2023/05/11/anthropics-latest-mode

米Antrhopicは5月11日（現地時間）、米OpenAIの「ChatGPT」と競合するプレビュー段階の汎用チャットbot「Claude」のコンテキストウィンドウを、従来の9000トークンから10万トークンに拡張したと発表した。これにより、例えば複数の長文ドキュメントをプロンプトに投げて内容をまとめるよう命じることが可能になるとしている。 コンテキストウィンドウとは、プロンプトに対する応答を生成する際にAIモデルがアクセスできるトークンの範囲を指す。OpenAIのヘルプページによると、GPT-4の標準モデル（サブスクユーザーが利用できているもの）のコンテキストウィンドウは8000トークン、拡張モデルでも3万2000トークンだ。 10万トークンは、英単語では約7万5000ワードに相当するとAnthropicは説明する。ユーザーは数百ページ文の資料をプロンプトとして投げられる。 Anthro

サインインした状態で「いいね」を押すと、マイページの 「いいね履歴」に一覧として保存されていくので、 再度読みたくなった時や、あとでじっくり読みたいときに便利です。

①弁護士の約3割がChatGPTを利用 ChatGPTの利用状況について尋ねたところ、「知っているが未使用」が39.7％と一番高く、「業務・私的に活用」「私的に活用」と活用自体したことがあるは28.8％という結果となりました。 また、具体的な使い方として、以下のような例が寄せられました（抜粋）。 ・メール文案作成 ・法律相談の回答の概要の作成 ・契約条項の確認　込み入った事案の類似判例の調査 ・音声の文字起こし。必要書類のリスト化、関連判例の抽出 ・一般論（非法律事項、法律事項問わず）の概略の説明 ②7割を超える弁護士がAI導入に期待と回答 弁護士業務にAIが導入される期待感と不安感について尋ねたところ、「やや期待している」「期待している」を合わせると73.9％という結果となりました。 ③業務利用は期待と不安が表裏一体 また、具体的に弁護士業務にAIが導入される期待と不安についてを尋ねたと

未来の司法の形を考えるきっかけにしてほしいと、対話型AI「ChatGPT」を裁判官役とした、模擬裁判のイベントが東京大学で行われ、判決の行方に注目が集まりました。 このイベントは公正で中立な裁きが求められる裁判で、裁判官が「人間」ではなく「機械」だった場合、複雑な法律判断の可否や機械が人を裁く未来を受け入れられるのかといったことについて問題提起するために、東京大学の学生が中心となって企画し、会場の安田講堂には多くの人が傍聴に訪れました。 模擬裁判のシナリオは、元交際相手から嫌がらせを受けた女性が、現在の交際相手に相談したところ元の交際相手を殺害し、女性も殺害に共謀したとして殺人の罪に問われるという、架空の事件を想定し、検事や弁護士などは人間が務め、裁判官役を対話型のAI「ChatGPT」が担いました。 まず書記官役から「この法廷では裁判の正確性と迅速性を高めるために、人工知能を裁判官として