連載概要 本連載はPythonについての知識を既にある程度は身に付けている方を対象として、Pythonでデータ処理を行う上で必須ともいえるNumPyやpandas、Matplotlibなどの各種ライブラリの基本的な使い方を学んでいくものです。そして、それらの使い方をある程度覚えた上で、それらを活用してデータ処理を行うための第一歩を踏み出すことを目的としています。 ベクトルや行列の積にもいろいろある 前回はNumPyが提供する多次元配列（numpy.ndarray）の最大値／最小値を得る方法はたくさんあることを見ました。それと同時にデータがないことを意味するnumpy.nanオブジェクトについても紹介をしました。 今いったように多次元配列の最大値／最小値を得る方法はたくさんありますが、実は多次元配列同士の積を求める方法もたくさんあります。今回は主にその方法を紹介していきましょう。 例えば、N

はじめに Microsoftの提供するVisual Studio Code（VSCode）は、2015年の最初のリリースから、今では開発用エディタの定番の座を占めるまでになりました。これには、無償で使えることも大きいですが、何よりエディタとしての使いやすさ、そしてさまざまな拡張機能によっていくらでも使い勝手を向上させたり、利用の領域を拡げられたりすることも大きいでしょう。本連載では、このVSCodeにフォーカスし、基本的な使い方から拡張機能の活用、そして本格的な開発現場での利用を想定した高度な機能までを紹介していくことで、読者がVSCodeマスターになるお手伝いをします。 対象読者 テキストエディタメインで開発してきた方 Visual Studioより軽い環境が欲しいと考えている方 Visual Sudio Codeをもっと使いこなしたい方 必要な環境 本記事の内容は、以下の環境で動作を確

最近のLLMの学習法 (SFT・RLHF・RAG) をまとめました。 1. 教師ありファインチューニング (SFT : Supervised Fine-Tuning) 2. 人間のフィードバックからの強化学習 (RLHF : Reinforcement Learning from Human Feedback)

くふうカンパニーの舘野(@hotchpotch)です。先日行われたYANS2023にスポンサー企業として参加し、ブースで「大規模言語モデルは絵文字の分散表現をどう見るか」という展示を行いました。 Webブラウザー上で、絵文字の分散表現(特徴量)を使ってインタラクティブにぐりぐり動かしながら、色々な視点から絵文字を見ることができます。 🎨Emoji Embedding Projector🌐 https://emoji-emb.netlify.app/ 🔼 こちらのURLから、ブラウザで絵文字の分散表現を視覚的に弄れます スマートフォンでも横表示にすれば操作できますが、PC ブラウザでの閲覧がおすすめです 🤗 楽しみ方絵文字アイコンをクリックすると、その絵文字の類似 Top-100 が表示されます。 左下の PCA タブでは、主成分の上位1-10が表示され、そのうち3つを使い3D空間に

こんにちは。データエンジニア 遠藤（TVerにJOINしてまだ3ヶ月）とアドテクエンジニア 鶴貝です。 2023年8月29日～31日にGoogle Cloudの技術カンファレンスGoogle Cloud Next '23がサンフランシスコで開催されました。（4年ぶりのオフライン開催） 弊社では、民放公式テレビ配信サービスTVer・TVer広告のデータ分析で用いるビッグデータ基盤にGCPを採用しています。そこで、先述したエンジニア2名がGoogle Cloud Next '23に現地参加させて頂きました。 Next '23ではGCPの新機能リリースや世界中での活用事例が多く紹介されました。本記事では、Next '23で発表された話題のうち、BigQuery data clean roomsを重点的に報告します。 さらに、サンフランシスコまではるばる出向きましたので、撮って出し写真と共にGoo

※この投稿は米国時間 2023 年 3 月 30 日に、Google Cloud blog に投稿されたものの抄訳です。 さまざまな業界の企業は、データを共有し、自社データを外部ソースと組み合わせることにより、新しい分析情報を得てパートナーと連携しています。実際、毎週 6,000 以上の組織が、BigQuery を使用して組織の境界を越えて 275 PB を超えるデータを共有しています。昨年、Google は BigQuery 上に構築された Analytics Hub を市場にリリースしました。これにより、お客様はデータ移動に関する課題を最小限に抑えながら、費用対効果の高い方法でデータを共有、交換できます。ただし、お客様は多くの種類のデータを共有しており、その中にはより厳しい規制とプライバシー要件の対象になるものもあります。そのような場合、お客様は、マルチチャネル マーケティング データ

凄いものが出てきてしまった。 ChatGPTの「Code Interpreter」が話題になったが、あれはあくまでクラウド上で動いているだけ。それを模してローカルで動作するようになった「Open Interpreter」は、衝撃的な成果である。 Open Interpreterのインストールは簡単。コマンド一発だ $ pip install open-interpreter起動も簡単 $ interpreter -yこれだけでOK。 あとはなんでもやってくれる。 たとえばどんなことができるのかというと、「AppleとMetaの株価の推移をグラフ化してくれ」と言うとネットから自動的に情報をとってきてPythonコード書いてグラフをプロットしてくれる。 凄いのは、ローカルで動くのでたとえばApplescriptを使ってmacOSで動いているアプリを直接起動したり操作したりできる。「Keynot

「ChatGPT Meetup」は、プロンプティングからOpenAI API、さらには周辺のライブラリやHubのエコシステムまで広く活用の助けになる知見を共有し、みんなで手を動かして楽しむためのコミュニティです。2回目に登壇したのは、株式会社リンクアンドモチベーションの岡田大輔氏。OpenAIからAzure OpenAI Serviceへの移行について発表しました。 登壇者の自己紹介 岡田大輔氏：機能開発を「ChatGPT」を使ってやってみたので、そこからわかったことを共有させていただければなと思います。 最初に自己紹介です。岡田大輔といいます。リンクアンドモチベーションで働いていて、今4年目です。アプリのエンジニアをしています。ふだんはRailsとVueでWebアプリを作っているのですが、今回は、機能開発のところで（ChatGPTを）いろいろ触ってみました。 ChatGPTを使った機能開

＜AI業界の勢力図が急速に変動か──OpenAIが企業向けプランを発表し、従来のパートナーであったMicrosoftとの関係に変化の兆しが＞ ＊エクサウィザーズ AI新聞から転載 ChatGPTを開発したOpenAIが、自社開発のAIモデルのセキュリティ面などを大手企業向けに強化させた「企業向けプラン（Enterprise Plan）」を発表した。これまでOpenAIは基本的な技術を開発し、それに追加機能を加えて発売するのは、OpenAIの大株主でありパートナー企業であるMicrosoftの役割だった。いわばOpenAIがメーカー、Microsoftは小売店という関係であり、メーカーは直販店を作って小売店の邪魔をしない、というような関係に思われていた。そういう強力なスクラムを組むことで、OpenAIとMicrosoftは宿敵Googleに対抗する。AIの業界勢力図をそう読む意見が主流だった

米Microsoftは9月7日（現地時間）、同社が企業向けに提供している一連の生成AIツール「Copilot」の顧客に対し、このサービス使用中に著作権侵害で訴訟を起こされた場合、法的責任を負うと発表した。 副会長兼プレジデントのブラッド・スミス氏は公式ブログで、「Copilot Copyright Commitment」と呼ぶ新たな取り組みについて説明した。 生成AIツールに関しては、Authors Guild（全米作家協会）がMicrosoftのサティア・ナデラCEOを含む主な企業のCEO宛に作品をトレーニングに使うなという書簡を送るなど、著作権侵害の懸念が高まっており、「一部の顧客も訴訟リスクを懸念している」とスミス氏。 この懸念に対処するため、新たなコミットメントの下、商用顧客が提訴された場合、「当社は顧客を弁護し、顧客が使用していた限り、訴訟の結果生じる不利な判決または和解金を支払

第88回人工知能セミナー 「ChatGPTにできることを正しく理解する」 ①ChatGPTの技術概説 前編 高村 大也 先生（産業技術総合研究所） ※ 00:13の所属について、正しくは「産業技術総合研究所」となります 撮影日：2023年6月19日(月) 企画・撮影・編集：人工知能学会 企画委員 #人工知能 #AI #JSAI #ChatGPT

BlackBerry独自調査、日本の組織の72%が、業務用デバイス上でのChatGPTおよび生成AIアプリケーションの使用を禁止する方針であることが明らかにAIサイバーセキュリティのパイオニアBlackBerryは、職場における生成AIツールの使用は、エンタープライズ版の利用を推奨 2023年9月7日 – BlackBerry Japan 株式会社（本社：東京都港区、執行役員社長 Area Vice President：吉本 努、以下BlackBerry）は本日、新たな調査結果 < https://blogs.blackberry.com/en/2023/08/why-companies-ban-chatgpt-ai > を発表し、日本の組織は72%が現在、職場でのChatGPTやその他の生成AIアプリケーションの禁止を実施、あるいは検討していることを明らかにしました。日本で調査対象者とな

データ侵害、知的財産へのリスク、誤った情報の拡散などが懸念材料 調査結果によると、職場で「ChatGPT」やその他の生成AIアプリケーションを禁止している（もしくは禁止を検討している）日本企業の割合は72％だった。また、「安全ではないアプリケーションが企業のIT環境にサイバーセキュリティ上の脅威をもたらすことを懸念している」と回答した人の割合は81％だった。 関連記事 企業は生成AIのセキュリティリスクとどう付き合うべきか、うっかり情報漏えいやプロンプトインジェクションへの対応方法とは ChatGPTをきっかけとして、生成AIへの関心が急速な高まりを見せている。だがセキュリティリスクも考える必要がある。企業はリスクを制御しながら、生成AIをどう活用していくべきか、NRIセキュアによる説明をお届けする。 生成AIは人間が思うほど賢くはないが、人間も同じだ 生成AIのチャットエンジンから一見知

「東京都府中市」は「京都府」なんです：こうしす！　こちら京姫鉄道 広報部システム課 ＠IT支線（40） 情報セキュリティの啓発を目指した、技術系コメディー自主制作アニメ「こうしす！」の＠ITバージョン。第40列車は「住所の整合性」です。※このマンガはフィクションです。

Discover amazing ML apps made by the community

自動運転EV開発のチューリング、日英言語対応のマルチモーダル学習ライブラリ「Heron」と最大700億パラメータの大規模モデル群を公開〜日本語で対話可能な画像-言語複合モデルを実現〜 完全自動運転車両の開発・販売に取り組むTuring株式会社（千葉県柏市、代表取締役：山本 一成、以下「チューリング」）は、日本語を含む複数言語対応の大規模マルチモーダル学習ライブラリ「Heron（ヘロン）」と、それにより学習した最大700億パラメータのモデル群を公開したことをお知らせします。 チューリングでは高度な自動運転を実現するため、視覚情報によって得られた情報を、人間のように言語化して高度な文脈を理解できるAIモデルを開発しています。今回公開したマルチモーダルモデルの学習技術と知見を活かし、完全自動運転にむけた開発を進めてまいります。 マルチモーダルについて 近年注目されている大規模言語モデル（LLM）

Heronは、各モジュールを追加学習するための学習コードと日本語を含むデータセット、学習済みのモデル群で構成。画像認識モデルと大規模言語モデル（LLM）をつなぎ、画像を入力に使えるようになる。例えば、Heronで学習したAIモデルは、画像に何が写っているかを正確に把握しつつ、前の質問を含む文脈を理解しながら画像について回答することができる。 Heronの学習ライブラリでは、学習するLLMを自由に変換可能。「既存の言語モデルの性能を生かしつつ、今後開発・公開される新たなLLMに対しても容易に対応できる柔軟性がある」（同社）という。 公開中の学習済みのモデル群は「Llama 2-chat」（700億パラメータ）「ELYZA-Llama 2」（70億パラメータ）「Japanese StableLM」（70億パラメータ）などをベースにHeronで追加学習し、マルチモーダル化させたもの。これらのモデ

AOSテクノロジーズ（東京・港）傘下のリーガルテック（同）は特許の出願に必要な書類作成を生成AI（人工知能）で支援するサービスを始めた。発明に関する語句や短文を入力すると、書類の形式に沿った文書が自動で生成される。出願にかかるコストを下げ、中小企業の知的財産保護につなげる。リーガルテックの子会社が提供している特許検索エンジン「プライベート特許検索」に、生成AIによるテキスト作成の機能を新設した

中国のIT大手「テンセント」は企業向けに生成AIのサービスを開始したと発表しました。中国では別のIT大手も独自に同様のサービスを提供するなど、開発競争が激しさを増しています。 中国でSNSの「ウィーチャット」などを運営するIT大手「テンセント」は、独自に開発した生成AIサービスを7日から企業向けに開始したと発表しました。 利用者の中国語と英語の質問に対話形式で答えることができ、会社ではアメリカの生成AI「ChatGPT」と比べ、長文での回答や数学的な処理などで優れているとしています。 生成AIをめぐって、中国ではIT大手の「百度」が先月末に同様のサービスを一般向けに公開するなど、開発競争が激しさを増しています。 テンセントは2017年に提供した対話式AIのサービスが、中国共産党を批判する内容を回答したことが話題となって、サービス停止に追い込まれた経緯もあり、中国政府が生成AIへの規制を強め

PRESS RELEASE 2023年9月6日 富士通株式会社 富士通、AIについて楽しく学べる学習ドリル「Fujitsu×うんこドリル AIとのつきあい方」を公開 教育支援プログラムなどを通じて、全国の小学生に学習機会を提供 当社は、このたび当社のマテリアリティ（注1）のひとつであるデジタル社会の発展につながるコミュニティ活動の一環として、AIについて楽しく学べる学習ドリル「Fujitsu×うんこドリル AIとのつきあい方」（以下 本ドリル）を制作しました。本ドリルは当社ホームページなどで本日公開するほか、希望する教育機関へ冊子を無償提供します。 本ドリルは、当社の富士通研究所 人工知能研究所が制作に関わるとともに、当社がスカラーシップパートナーとして参画している、学校法人神山学園 神山まるごと高等専門学校（注2）（以下 神山まるごと高専）の学生たちのアイデアを盛り込み、これからのデジタ

「世界ＡＩ原則」を発表　日本新聞協会など世界２６団体 2023年09月06日22時00分配信 対話型人工知能（ＡＩ）「チャットＧＰＴ」の画面 日本新聞協会など世界の報道・メディア２６団体は６日、生成ＡＩ（人工知能）技術の開発や規制に当たっての考え方をまとめた「世界ＡＩ原則」を発表した。「知的財産」や「透明性」など８分野にわたり、記事などコンテンツの無許諾使用の防止などを求めている。 米メディア、生成ＡＩに苦慮　活用模索も、「ただ乗り」対策急務 原則では、ＡＩ技術は社会に多大な利益を与え得る一方、「知識、ジャーナリズム、科学に対する人々の信頼、民主主義の健全性にリスクをもたらす」と指摘。「ＡＩが私たちの分野に与える機会を全面的に受け入れるとともに、ＡＩシステムの責任ある開発と展開を求める」とした。 具体的には、「知的財産」分野では無許諾使用の防止やコンテンツ価値の尊重、「透明性」分野ではＡＩ