Amazon Web Services ブログ Amazon SageMaker と Amazon QuickSight による自然言語処理ダッシュボードの作成 インターネットやスマホ、SNS の広がりによりテキストデータなどの非構造化データの分析のニーズが急増しています。企業内の大量の文書、メール、SNS のテキスト、コンタクトセンターのログ等、テキスト情報には多くの知見が埋もれており、これらを活用することで、より正確な意思決定が行えると考えられます。このような分析を目的としたテキストマイニングのツールは数多く存在しますが、高価であったり、処理の拡張性に課題があるものも少なくありません。この記事では AWS のクラウドサービスを活用し、簡単、迅速に構築可能な自然言語処理ダッシュボードを紹介します。オープンソースの形態素解析ツールである GiNZA を Amazon SageMaker ノ

Language Models The progress on larger and more powerful language models has been one of the most exciting areas of machine learning (ML) research over the last decade. Important advances along the way have included new approaches like sequence-to-sequence learning and our development of the Transformer model, which underlies most of the advances in this space in the last few years. Although langu

ChatGPT is not all you need. A State of the Art Review of large Generative AI models 🧑🏽‍🔧Authors:Roberto Gozalo-BrizuelaQuantitative Methods Department, Universidad Pontificia Comillas, Madrid, Spain Eduardo C. Garrido-MerchánQuantitative Methods Department, Universidad Pontificia Comillas, Madrid, Spain 🔋ABSTRACT During the last two years there has been a plethora of large generative models s

実用的なソフトウエアを開発するにはアルゴリズムの知識は欠かせない。基礎から機械学習まで、厳選した10個のアルゴリズムをPythonによる実装とともに解説する。 ［7　動的計画法］ レーベンシュタイン距離 多くの人にとって、アルゴリズムの学習の最初の壁となるのが、「動的計画法」ではないでしょうか。動的計画法は、「問題の部分的な結果を記録・利用しながら、最終的な結果を求める」手法の総称です。クイックソートや深さ優先探索のような手法よりも、1 段か2段、抽象的な概念である点と、アルゴリズムを可視化しにくい点が、難しく感じる原因なのだと思われます。また、“動的計画法”という名称が内容に合っていないことも、動的計画法をわかりにくくしていると言えるでしょう。 しかし、多くの有用なアルゴリズムは動的計画法の手法を使っているので、避けて通ることはできません。 ここでは、動的計画法で「レーベンシュタイン距離

はじめに データサイエンスで誰もがまず間違いなく扱うであろうテーブルデータ。pandasや最近ではpolarsを使って解析・可視化する人も多いでしょう。一方で、データサイズがそれほど大きくないときは、インタラクティブに編集・プロットしたり、セルの中でちゃちゃっと平均とかを計算できるExcelの方が便利な場合が多いです。 pandasGUIというものもあるのですが、かなり操作性が悪いし、開発もそんなホットではないですね... テーブルデータをExcelみたくいじりながら、いつでもDataFrameでデータを回収してPythonで解析できるソフトがあったらいいなあと思ったので、tabulousというのを作りました。この記事ではこれを簡単に紹介したいと思います。 名前はtabularとfabulousを掛けたものです。GUIはQtで作っています。 なお、詳しいドキュメント（英語）はこちらにありま

こんにちは、Choimirai Schoolのサンミンです。 0  はじめに先日Twitterに投稿したツイートに対し、添削で使えるプロンプトを教えてほしい、というコメントがありましたのでこのnoteでシェアします。 実は英語を教えてる全ての方にお勧めしたいのが、ChatGPTです。添削ツールとしても超優秀で、作文を渡すと改善が必要な箇所を直してくれる。また、"直した理由を含めテーブルにまとめて"、と指示すれば表にしてくれるのも大変助かる。うまく活用すればより付加価値の高い学習体験を提供できるはず👏。 https://t.co/tCQMXkCe6e pic.twitter.com/84q7y52EqZ — sangmin.eth @ChoimiraiSchool (@gijigae) January 17, 2023 1  一連の流れツイートでシェアした添削は下記の流れで実施された結果で

鐘の音（除夜の鐘）ダイエット中−30kg @kanenooto7248 画像生成AIについて、思うこと。 実際に触ってみた結果、 ①個性が食われる ②自分よりも上手い ③創作意欲のすべてが消滅する という結構大きい副作用があって、回復しきれてない。 例えて言うのなら、「手にした魔剣に自由意志をすべて奪われる感覚」とはこういうものかと、擬似的に体験できた。 2023-01-17 22:22:15 鐘の音（除夜の鐘）ダイエット中−30kg @kanenooto7248 一番でかい副作用が、 ③創作意欲のすべてが消滅する だった。 ここまでヤバい勢いで減るのかと思って、個人の問題かもしれないが、一気に減衰した。正直、「勉強のために触ってみるかな？」と思って触ってみたのが間違いだった。ミスった。 2023-01-17 22:26:03 鐘の音（除夜の鐘）ダイエット中−30kg @kanenooto

ロイヤリティフリーの写真や画像といったコンテンツを有料で配信しているサービス「Getty Images」が画像生成AI「Stable Diffusion」開発元のStability AIがGetty Imagesの知的財産権を侵害したとして、法的手続きを開始したことを明らかにしました。 Getty Images Statement - Getty Images https://newsroom.gettyimages.com/en/getty-images/getty-images-statement Getty Images is suing the creators of AI art tool Stable Diffusion for scraping its content - The Verge https://www.theverge.com/2023/1/17/2355851

ガジェット全般、サイエンス、宇宙、音楽、モータースポーツetc... 電気・ネットワーク技術者。実績媒体Engadget日本版, Autoblog日本版, Forbes JAPAN他 先週金曜日、オープンソースのAI画像生成ツールとして人気を集めるStable Diffusion(Stability AI)と、Midjourney、最近Stable Diffusionをベースとする独自のAI画像生成ツール「DreamUp」を開発したDeviantArtに対して、3人のアーティストが著作権侵害などを訴える訴訟を起こしました。 昨年以来、AIを使った画像生成は人気のトピックになっています。いくつかのツールは、生身のアーティストが描いたものと同等レベルのアートワークを、入力されたテキストから生成・出力できます。しかしその生成されたアートワークはアーティストたちの間での議論やSNS上での抗議などを

画像素材サイト「PIXTA」などを運営するピクスタは、画像にアノテーション（画像を説明する情報）を付与する専門部署を立ち上げたと発表した。背景には、機械学習案件での売り上げは1年で3倍に拡大した経緯があるという。 画像素材サイト「PIXTA」などを運営するピクスタは1月19日、画像にアノテーション（画像を説明する情報）を付与する専門部署を立ち上げたと発表した。海外開発拠点のPIXTA VIETNAMと連携し発足する。背景には、機械学習案件での売り上げが1年で3倍に拡大したいきさつがあるという。 同社ではこれまでも機械学習用素材として画像データの提供を行っていた。アノテーション付き画像も以前から提供していたが、提携企業に付与を依頼していたという。ピクスタ内で専門部門を発足したことにより、条件によっては従来の半分の期間での納品や約6～7割のコスト抑制が可能になるとしている。 付与できるアノテー

オープンAIの創業者の1人、サム・アルトマン氏とマイクロソフトのサティア・ナデラCEO。マイクロソフトは2019年にオープンAIに10億ドル出資している（写真：Ian C. Bates／The New York Times） 特集「ChatGPTの衝撃」の他の記事を読む 昨年末に「ChatGPT（チャットGPT）」というチャットボットがインターネット上で話題になったとき、シリコンバレーの多くの企業の幹部たちは、突然、自分たちのビジネスを破壊しかねない新しい人工知能（AI）技術を扱うことになったとの懸念を抱いた。 しかし、マイクロソフトでは、それは祝福すべきことだった。数年前から、マイクロソフトのサティア・ナデラCEOは、この瞬間のためにピースを用意していたのだ。 2019年に出資していた 2019年、マイクロソフトはチャットGPTを設計したサンフランシスコの小さな会社、OpenAI（オープ

summate.it Quickly summarize web articles with OpenAI (experimental). Developers: This site uses Full-Text RSS for article extraction and OpenAI for article summarization. Anyone can sign up and use the same APIs. Please don't use the summate.it site in any automated fashion. Limitations: The OpenAI API does not allow submission of large texts, so summarization may only be based on a portion of th

【シリコンバレー=佐藤浩実】米マイクロソフトは18日、3月までに世界で従業員1万人を削減すると発表した。景気後退への懸念が強まり収益の伸びが鈍るなか、人件費の抑制に動く。米アマゾン・ドット・コムなども大規模な雇用調整を進めており、IT（情報技術）企業の間で低成長に備える動きが広がっている。 マイクロソフトの従業員数は2022年6月時点で22万1000人にのぼり、半数近くは日本など米国外で働いている。解雇の対象は全体の5%弱にあたる。サティア・ナデラ最高経営責任者（CEO）は従業員向けの手紙で「コスト構造を収益と顧客の需要に見合うよう調整する」とし、人員整理への理解を求めた。 同社は22年にもパソコンやゲーム部門でリストラを実施した。ここにきて大規模な人員削減を打ち出したのは、業績の停滞が目立ってきたためだ。ナデラ氏は「景気後退への懸念から、あらゆる業界・地域の企業が（投資に）慎重になってい

米Microsoftが同社の全製品にAI機能を搭載する方針であると、米Wall Street Journal（WSJ）が1月18日に報じた。 米Microsoftが同社の全製品にAI機能を搭載する方針であると、米紙「Wall Street Journal」（WSJ）が1月18日に報じた。WSJ主催の討論会にて、Microsoftのサティア・ナデラCEOは「マイクロソフトのあらゆる製品に、製品を一変させるようなAI機能を搭載していく」と話したという。 Microsoftは、AI言語モデル「ChatGPT」などを開発する米AI研究企業OpenAIに出資している。16日（米国時間）に「Azure OpenAI Service」の一般提供を始めると発表した際、ChatGPTについても近日中に利用可能にするとしていた。Azure OpenAI Serviceではクラウドサービス「Microsoft

AIで救急要請が集中する地域を予測し、救急隊の到着時間を短縮しようと、川崎市は千葉大発のスタートアップ「Smart119」に予測システム製作の業務を委託した。AIで救急要請を予測すれば、最大約3分の到着時間短縮の可能性が確認された。 人工知能（AI）技術で救急要請が集中する地域を予測し、救急隊の到着時間を短縮しようと、川崎市は千葉大発のスタートアップ（新興企業）の「Smart119」に予測システム製作の業務を委託した。同社によると、AIを使った実証実験で救急要請を一定以上の精度で予測でき、効率的な救急隊配置で最大約3分の到着時間短縮の可能性が確認されたとしている。川崎市は2023年度以降のシステムの活用を目指している。（橋本愛） 市は現場到着時間を短縮するための方法として、救急要請が集中する地域を事前に予測し、付近の消防署や出張所にあらかじめ救急隊を手厚く配置しておくことを想定。AIを活用

どうも、まさとらん（@0310lan）です！ 今回は、話題のAIをうまく活用したWebアプリやサービスを厳選してご紹介します！ AIを使うことで、これまでのWebサービスがどのように変化するのかをざっくりと確認するのに最適だと思います。誰でも使いやすくて楽しめるものを厳選しているので、初心者の方もぜひ遊びながら試してみてください！ ■著名人になりきってAIが質問に回答してくれるサービス 【 AskNow 】 イーロン・マスクやポール・グレアム…など、世界的に名前が知られている著名人に質問できるちょっと変わったサイトです。 と言っても…本人が回答するわけではなく、代わりにAIが質問に対して答えになりそうなツイートを分析したうえで、内容を整理して表示してくれるのが大きな特徴です。 2023年1月時点でおよそ8名の著名人がリストアップされていますが、今後さらに質問できる人物を増やしていくそうです

高精度自動翻訳ツール「DeepL翻訳」を提供するDeepLが、AIの力を利用して文章を瞬時に校正できる無料ウェブアプリ「DeepL Write」を公開しました。英文の校正にめちゃくちゃ役立ちそうだったので、実際に使ってみました。 DeepL Write：AIを活用した文章作成アシストツール https://www.deepl.com/write 上記のURLからDeepL Writeにアクセスすると、画面左側に例文の入力欄が表示され、右側にその校正結果が出力されます。校正はリアルタイムに行われ、記事作成時点では「イギリス英語」「アメリカ英語」「ドイツ語」の校正が可能です。 試しに、「I listen to music on my iPhone and am unhappy that I cannot use wired earphones.(私はiPhoneで音楽を聞いていますが、有線イヤ