投資家用・スタートアップ支援用・大学支援用に改良中 更新中）tfidf etc embeddings cluster reconstructing vis: 特許など長文の、動的な文章間類似俯瞰図可視化・迅速閲覧・解析・探索手段。および第三の特許検索手法、動的な知識抽出管理手法、特許自動生成 （類似度ベクトルと小規模言語モデル及びChatGPTを用いた空白領域における特許生成追加） - Qiita
投資家用・スタートアップ支援用・大学支援用に改良中 更新中）tfidf etc embeddings cluster reconstructing vis: 特許など長文の、動的な文章間類似俯瞰図可視化・迅速閲覧・解析・探索手段。および第三の特許検索手法、動的な知識抽出管理手法、特許自動生成 （類似度ベクトルと小規模言語モデル及びChatGPTを用いた空白領域における特許生成追加）自然言語処理NLP可視化Visualization特許 追記を繰り返しており整合性も取れておらず非常に読みにくい状態です．近日中に再整理します． 技術だけではなく方法論が重要となります。後ろ向きに検証し、前向きに予測することが重要となるでしょう。現在検証中です。 お題をいただけますと助かります。後ろ向き検証ではどうもわかりきったものを恣意的に選んで言えるかもしれない危惧があるところです。 個人的には、会社の方針に
REALKYOTO – CULTURAL SEARCH ENGINE » 対談：ホー・ツーニェン×浅田彰《旅館アポリア》をめぐって
あいちトリエンナーレ2019が波乱の内に閉幕する前日に、主会場のひとつである豊田市で参加アーティストと批評家による対談が行われた。対談のテーマは、近現代史に材を取った新作インスタレーション。神風特攻隊、京都学派の哲学者たち、小津安二郎、横山隆一……さまざまな要素が盛り込まれた作品はどのようにつくられたのか。作品が持つ現代的意味とは何か。スリリングな対談を、ほぼ完全な形で採録した。 構成：編集部 通訳：田村かのこ 翻訳：新井知行 写真：谷川ヒロシ（展示写真とも） 協力：あいちトリエンナーレ2019 浅田 最初に、あいちトリエンナーレ全体について話しておきたいと思います。昨日は台風19号が吹き荒れましたが、あいちトリエンナーレは「表現の不自由展・その後」をめぐって、「メディア台風」に襲われた。つまり、ネット右翼が巻き起こしマス・メディアにまで広がったストームですね。それはたいへん不幸なことでし
今年も始まりました、Microsoft Ignite 2023！本日発表された、CEOのSatya Nadella氏のキーノートを日本語でまとめました。ChatGPTが発表されてから1年が経過しました。 進化のペースは凄まじいものです。我々は新しい時代に入ろうとしています。ただの新しい技術に留まりません。 このAIの時代によって、製品を作ったり、安全性を考えたりと、実課題を解決しています。 Airbnb、Shopifyや、BTや電通などもMicrosoft Copilotを展開しています。そして、組織は独自のCopilotを作成しています。 そして、Copilotは非常に生産性を向上させています。より少ない時間で情報を集めたり、ミーティングを行ったりすることができます。 Copilot はタスクを素早くこなすことが可能になり、新しいUI（ユーザーインターフェース）として、世界のナレッジだけ
GitHub Actionsでactions/setup-nodeだけでnode_modulesをキャッシュできるのか試してみた | DevelopersIO
こんにちは、CX事業本部 IoT事業部の若槻です。 GitHub Actionsでは、CI/CDでよく使われる処理がActionsとして公開されており、Workflow内で自由に使うことができます。 GitHub Marketplace · Actions to improve your workflow 今回は、actions/setup-nodeを使用してWorkflowの実行時にnode_modulesをキャッシュできるのか試してみました。 actions/setup-nodeとは actions/setup-nodeを使用すると、指定したバージョンのNode.js distributionのダウンロードおよびキャッシュをしたり、npm/yarn/pnpm dependencyをキャッシュしたりすることができるようです。 actions/setup-node: Set up your
最近，因果推論や因果探索に興味を持ち，勉強している．というのも最近，ゆううきさん と一緒に分散システムの異常の原因を即時に診断するための研究を進めている．原因を診断するためのアプローチとして，サーバやコンテナ等から取得できる様々なメトリック（CPU使用率やメモリ使用率など）を（グラフ理論における）ノードとして，因果グラフを構築することを考えている．メトリック同士の単なる「相関」ではなく，結果と原因の関係である「因果」を捉えようとするアプローチである．例えば，システムの障害が発生した場合，相関だけでは，AとBが関連がありそうというところまでしか言えないが，因果を特定できると理想的には，Aの原因はBであるといった議論ができるため，有用だと考えている． 実際に，前述のような因果グラフを構築して障害の原因を特定しようというアプローチは，以下の例に挙げるようにここ数年で増えている印象がある． 「Mi
Google 検索ランキング システムのご紹介 | Google 検索セントラル | ドキュメント | Google for Developers
フィードバックを送信 コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 Google 検索ランキング システムのご紹介 Google は、多種多様な要素やシグナルを検討する自動ランキング システムを使用して、検索インデックスにある数千億のウェブページやその他のコンテンツから、最も関連性の高い、有益な結果が一瞬で表示されるようにしています。 これらのシステムは厳格なテストと評価により定期的に改善されており、コンテンツの制作者などにとって有益と思われる場合には、ランキング システムのアップデートの通知を行っています。 このページは、Google の重要なランキング システムについて理解を深めていただくためのガイドです。ここでは、検索クエリに対して検索結果を生成する基盤テクノロジーである、コア ランキング システムの一部をご紹介します。また、特定のランキング ニー
生成AI と Wikipedia記事 で 子供向けお仕事提案bot を作ってみよう(Azure OpenAI + RAG) - ENGINEERING BLOG ドコモ開発者ブログ
NTT コノキューに出向中の澤山です。 今年の7月にドコモから、コノキューにやってきました。 この記事は、NTTドコモ アドベントカレンダー2023 21日目の記事です。 この記事では、Wikipedia記事 と Azure OpenAI API、既存のモデルの3つを用い、RAG(Retrieval-Augmented Generation)のためのデータ作成と、RAGを活用した子ども向けお仕事提案botを作ります。 (記事の情報は2023/11月のものです。) 生成AI / ChatGPT の大流行 子供のための、生成AI活用方法、ってある？ 子供向けお仕事提案チャットボットを作ってみる 全体像 ステップ1 Wikipedia + Azure OpenAI service でお仕事情報をまとめよう Wikipedia 記事からのお仕事情報・概要の抽出 お仕事情報・概要に基づく、情報の整理
RecSys 2021採択論文の中で気になっていた "Towards Unified Metrics for Accuracy and Diversity for Recommender Systems" を読んだ。 独特かつ曖昧な表記の数式が並ぶ「読んでいてイライラするタイプの論文」ではあったものの、推薦結果の Relevance（履歴に基づく類似度；古典的な“精度”に直結）と Novelty（ユーザにとっての推薦結果の新規性・多様性；セレンディピティに寄与）を相互に検討する際の論点、手法に求められる性質、実験のフレームワークのリファレンスとして有用な研究であるように思う。 一方、提案手法の筋の良さ、およびその実用性は疑わしい。定義の曖昧なパラメータを内在し、データに関して十分に事前知識のあるオフラインでの性能評価にユースケースを限定しているためだ。 いずれにせよ「精度の先にある、ユーザ
過去に起こった個人情報流出で、自分のメールアドレスやユーザー名から自分の個人情報が流出しているかどうかをチェックできるサイト「Have I Been Pwned?」が2023年で設立10周年を迎えたと、設立者のトロイ・ハント氏が明らかにしました。 Troy Hunt: A Decade of Have I Been Pwned https://www.troyhunt.com/a-decade-of-have-i-been-pwned/ 「Have I Been Pwned?」設立直後の2012年12月4日に投稿されたツイートが以下。 It's alive! "Have I been pwned?" by @troyhunt is now up and running. Search for your account across multiple breaches http://t.co
正規表現を使ったパターンマッチはとても便利なのだが、なんだか難しそうというイメージを持っていないだろうか。正規表現はワイルドカードを拡張したものと考えて基本だけを覚えるだけでも、いろいろな場面で活用できる。今回は、正規表現を使って大量ファイルの自動分類に挑戦してみよう。 正規表現でファイルをフォルダに分類したところ 正規表現とは？ 正規表現とは文字列を特殊なパターンを使って表現するものだ。ファイル操作に使うワイルドカードを拡張したものと言えば分かりやすいだろうか。今や、正規表現は大抵のテキストエディタに実装されていることもあり、正規表現を覚えるなら、Pythonのプログラミングだけでなく、日々のあらゆる場面で役立つとも言える。 なお、以前本連載の33回目でも正規表現について紹介したが、今回はPythonでファイルを分類する目的のため、基本の基本に絞って紹介しよう。 Pythonで正規表現を
機械学習、NLP論文の書き方（英語）
はじめに Kotoba Technologies, Inc. Co-Founder/CTO、Toyota Technological Institute at Chicago, Research Assistant Professorの笠井淳吾です。これまで自然言語処理（NLP）、機械学習の国際学会（ACL、ICLR、NeurIPS、EMNLP、ICCVなど）にて、投稿や発表を積み重ねてきましたが、一度自分なりに論文を書く際に考えていること、留意点、コツのようなものを言語化して共有したいと思います。個人の好みによるところも多々あるかと思いますので、取捨選択していただいて、皆さんの論文執筆の一助になることを願っています。 全体のストラクチャー まずは全体の流れから考えていきます。基本的に、論文を書く際には（多くの場合そもそもプロジェクトを始める前に）、タイトルをイメージしていきます。タイトル
C++ のパッケージマネージャーの選択メモ( conan vs. vcpkg vs. Hunter on Windows and Ubuntu ): C++ 実装がサブプロジェクトとして内包されるクロスプラットフォームアプリのリポジトリーの場合 - C++ ときどき ごはん、わりとてぃーぶれいく☆
タイトルが少しややこしいので最初に整理します。 このメモは: C++ のパッケージマネージャーの選択のはなし ただし: アプリはクロスプラットフォーム ( このメモでの具体例は Windows-10 & Ubuntu-19.04 ) アプリ全体(=このメモでは「ソリューション」とします)はいくつかの構成部品(=このメモでは「プロジェクト」とします)に分けて作られる プロジェクトの1つ以上に C++ を採用したい そのプロジェクト単位で C++ のライブラリーを管理できるパッケージマネージャーを導入したい → どうするのが楽そうかな のメモです。 選択肢と大雑把な検討 conan https://conan.io/ クロスプラットフォーム対応の C++ のパッケージマネージャーが欲しいの悩みに答えてくれる定番。 CMake でごにょごにょする vcpkg https://github.com
【2020年版】上級者向けの17のSEO戦略 - SEO Japan｜アイオイクスのSEO・CV改善・Webサイト集客情報ブログ
無料で資料をダウンロード SEOサービスのご案内 専門のコンサルタントが貴社サイトのご要望・課題整理から施策の立案を行い、検索エンジンからの流入数向上を支援いたします。 無料ダウンロードする ＞＞ SEOを行う際は、検索エンジンとユーザーの両方に配慮しなければなりません。 そして、検索エンジンとユーザー（行動や嗜好）は常に変化・進化を続けているため、必然的にSEOの施策もアップデートしていく必要があるでしょう。いわゆる、SEOの普遍となる基本的な項目を網羅したリストは多くありますが、それ以外の最新トレンドに対応した施策リストも有用です。 今回の記事はBacklinkoの「上級者向け」の施策となりますが、時代に即した施策も盛り込まれています。 この記事は、17の上級版SEOの戦略、テクニック、戦術のリストである。 事実、これらの戦略は、私のサイトがGoogleから月間で350,973の訪問を
ピーター・ティール率いるパランティア・テクノロジーズが、シリコンバレーと決別する理由 | エンジニア採用の羅針盤｜HRmedia
ピーター・ティール率いるパランティア・テクノロジーズが、シリコンバレーと決別する理由 2021年12月2日 コラム かつて、レイ・カーツワイルは「AIのみならずテクノロジーの進化スピードが無限大になり、人間の能力が根底から覆り変容するシンギュラリティが、2045年に到来する」といった。 人口知能の世界的権威のこの提言により、シンギュラリティの概念は瞬く間に広がり、AI全盛の時代における世界の在り方について世間でも盛んに議論されるようになる。 シンギュラリティ後の世界を想像する時、ユートピアを想像するのか、ディストピアを想像するのかは人それぞれだが、概ね似たようなシナリオに帰結する。 それは、GAFAのようなテックジャイアントが神の代理人のように人々を導くという近未来の風景だ。 今日、それなしには生活が成り立たなくなるほど人々の生活に深く浸透しているシリコンバレーのサービスの影響力を考えれば
Amazon Bedrockの基本情報とRuntime APIの実行例まとめ － 参考資料、モデルの特徴、価格、使用方法、トークンと推論パラメータの説明 - NRIネットコムBlog
小西秀和です。 今回は2023-09-28にGeneral Availability(GA)になったAmazon Bedrockの基本情報、Runtime APIの実行例についてまとめました。また、トークンやパラメータのイメージをつかむための必要最小限の用語説明も所々入れています。 最終更新日：2024/06/21 ※本記事および当執筆者のその他の記事で掲載されているソースコードは自主研究活動の一貫として作成したものであり、動作を保証するものではありません。使用する場合は自己責任でお願い致します。また、予告なく修正することもありますのでご了承ください。 今回の記事の内容は次のような構成になっています。 Amazon Bedrockの基本情報 Amazon Bedrockの参考資料・学習リソース Amazon Bedrockとは テキストを扱うGenerative AIにおけるトークン(to
動画やWebページの調べ物を良くする人はOtio AIを使ったほうが良い。効率がめちゃくちゃ良くなる。逆にたまにしかページを読み込んだりしっかり動画をみたりしないという人も使った方が良い。なれない自分がやるよりも10倍しっかりポイントを掴んで教えてくれる。 Otio AIとは Otio AIとは、指定した資料の中に調査する内容を限定して調べ物をすることに特化したAIだ。WebページやYoutube動画のURLを貼って概要を把握、追加質問をしていく形でさらに掘っていくことができる。日本語のYouTubeの動画を1/10の時間でまとめてくれたのには感動したし1、OpenID for VCI のまとめを作って、それに追加質問して内容を識っていったりするのもハードルがすごく低い。調査の内容を、指示したソースだけに限定できるのは、結果の信頼度を上げるのに結構大きい。ただし、今のところ実質的にPCやM
社内システムで生成AIを活用するコツは業務理解と事前準備 - 弁護士ドットコム株式会社 Creators’ blog
こんにちは。税理士ドットコム事業部の @komtaki です。 ChatGPT が 2022 年 11 月 30 日に出て一年が経ちました。みなさんも生成 AI を本番サービスで活用できてますか。 弁護士ドットコム株式会社でも実運用の壁を乗り越えて、実際にビジネスを変革するため本番サービスへの活用が進んでいます。「Developers Summit 2024」で市橋がプレゼンしていますので、よろしければご覧ください。 GenAI in Production～生成AIに君がみた光と、僕がみた希望～ / 20240215_devsumi2024 - Speaker Deck その事例を踏まえて、社内システムで生成 AI を組み込む流れとその勘所についてお話しします。生成 AI のカスタマイズに関する専門的な話（ファインチューニングや RAG など）には一切触れず、プロンプトエンジニアリングだけ
本記事では、2024年4月18日からVersion 2 になったAssistants APIの使い方を1から解説します。 この記事は、OpenAI公式サイトの内容と、実際に手元で実践した結果を混合したものになっています。 まだ探りきれていないので、この記事をアップデートしていく予定です。 まず、以下が新機能の概要です： Assistants API v2（ベータ版）の新機能 -- 2024年4月 -- Assistants APIに様々な新機能と改良を発表し、ベータ版を新しいAPIバージョン`OpenAI-Beta: assistants=v2`に移行します。 新機能は以下の通りです。 * 改良された検索ツール`file_search`を導入しました。アシスタントあたり最大10,000ファイルを取り込むことができ、以前の500倍となります。高速化され、マルチスレッド検索による並列クエリをサ
コンピュータビジョン分野のトップカンファレンスであるECCV2022からワークショップの模様を紹介（前編） - NTT Communications Engineers' Blog
目次 目次 はじめに ECCV2022概要 Workshop Instance-Level Recognition Workshop Keynote talk: Image Search and Matching Kaggle Google Universal Image Embedding Challenge Keynote talk: Few-Shot Learning for Object Aware Visual Recognition Language Assisted Product Search Granularity aware Adaptation for Image Retrieval over Multiple Tasks Where in the World is this Image? Transformer-based Geo-localization in t
この記事は Enigmo Advent Calendar 2021の6日目の記事です。 こんにちは。BUYMAでWebエンジニアをやっております、岡本です。エニグモに入ってから約1年が経過しました。 学生の時にプログラミングを始めてしばらくbashを使っていたのですが、イケイケの先輩にzshを教えてもらい、zshの機能を拡張するためのプラグインマネージャーにはOhMyZshを勧められ、数年利用していました。この時期に使っていたmacOSの標準シェルはbashで、zshはわざわざインストールするものでした。 1年前にエニグモに入社した頃、支給されたMacBookProに搭載されているmacOSの標準シェルは既にzshになっていました。（標準シェルがzshになったのはmacOS 10.15 Catalina以降です） せっかくの機会なので気持ちを新たにプラグインマネージャーも替えてみようと思い
Amazon Web Services ブログ AWS で生成系 AI を使用した構築のための新ツールを発表 ※本お知らせは、米国西海岸時間4/13, 5:30AM（日本時間4/13, 9:30PM）に公開されたAWS Machine Learning Blogの日本語翻訳版です。 機械学習のパラダイムシフトは数十年前から続いていますが、スケーラブルなコンピューティングリソースが容易に入手できるようになったこと、データの急増、機械学習技術の急速な進化により、さまざまな業界のお客様がビジネスの変革を進めています。最近、ChatGPT をはじめとしたGenerative AI（以下、生成系AI）が広く注目を集め、人々の想像力をかき立てています。機械学習の活用が広がるなか、刺激的な転換点が訪れていることは間違いありません。お客様の体験とアプリケーションのほとんどが、生成系AI によって新たに作り
はじめまして。株式会社ナレッジセンスの門脇です。普段はエンジニア兼PMとして、「社内データに基づいて回答してくれる」チャットボットをエンタープライズ企業向けに提供しています（一応、200社以上に導入実績あり）。ここで開発しているチャットボットは、ChatGPTを始めとしたLLM（Large Language Models）を活用したサービスであり、その中でもRAG（Retrieval Augmented Generative）という仕組みをガッツリ利用しています。本記事では、RAG精度向上のための知見を共有していきます。 はじめに この記事は何 この記事は、LlamaIndexのAndrei氏による『A Cheat Sheet and Some Recipes For Building Advanced RAG』[1]という記事で紹介されている「RAGに関するチートシート」について、And
クイックサマリー：2021年のWebパフォーマンスを高速化しましょう。 毎年恒例のフロントエンドパフォーマンスのチェックリスト（PDF、Apple Pages、MS Wordに対応）は、指標やツールからフロントエンドのテクニックに至るまで、現代のWebで高速なユーザ体験を生み出すために知る必要があるすべてを提供します。 このチェックリストは2016年から更新を続けてきました。 メールのニュースレターでも、フロントエンドに関する便利な情報をご確認いただけます。 このガイドは、LogRocketに勤務する筆者の友人の厚意によるサポートを受けています。 LogRocketは、フロントエンドパフォーマンスのモニタリング、セッションリプレイ、製品分析を組み合わせ、顧客体験の向上に貢献するサービスです。 また、DOM完了時間、サーバ初期応答時間（TTFB）、初回入力までの遅延時間（FID）、クライアン
Zo DIgitalでは、日本で最も影響力のあるSEOの専門家に、2021年の予測とトレンドを聞いてみました。EAT、コアウェブバイタル、UX、英語と日本語での市場の違いなど、ホットなトピックをご紹介しています。 今回参加いただいた5人のスペシャリストには、毎日何千人もの人に読まれているSEOブログの鈴木謙一氏、英語のSEOに関する出版物で数多く引用されているハント肇子氏、ベストセラーのSEO本を執筆した松尾茂起氏、日本で最初のSEOエージェンシーを立ち上げた渡辺隆広氏などの専門家が含まれています。素晴らしい実績を持ったSEOの専門家たちです。 私たちは、以下のトピックについて意見を聞いてみました。 Q1. この2年間で日本のSEOはどう変わったのか？ Q2. 2021年に最も効果的なSEO対策と技術は？ Q3. 日本語SEOと英語SEOの主な違いは？ 鈴木 謙一 氏（海外SEO情報ブログ
おはようございますまたはこんにちはまたはこんばんは，カイヤンです． 本記事はIQ1 Advent Calendar 2019（主催者 id:chakku000 ）における12月9日の記事です． 参考：IQ1 Advent Calendar 2018 2018/12/11の拙著記事「IQが1のデータ分析：respects いつも何度でも尋ねられること」 おことわり 今回は，ベイズ推論の特異学習理論（Watanabe理論，W理論）についての記事です．IQ1なので数学的に厳密な書き方でないどころか数式が登場しませんのでご了承ください． また，IQ1なために各論文を肯定的に読んでいます（理論が中心の紹介ですが一部の数値実験についても）．クリティカルリーディング要素はありません．申し訳ありません． よりおことわりらしいおことわりはIQ1AdCの雰囲気をぶち壊すので折り畳みます． IQ1AdCそのもの
こんにちは。ようやく家のPCをIvyBridgeから卒業してZen2に突撃することを決めたR&Dチームの齋藤（@aznhe21）です。 さて、本日、日本時間7/5(金)、Rust 1.36がリリースされました。 この記事ではRust 1.36での変更点を詳しく紹介します。 なお、この記事は公式リリースノートをベースに、意訳・追記をしています。 ピックアップ Futureが安定化された MaybeUninitが安定化された allocクレートが安定化された 変更点リスト 言語 ライブラリ 安定化されたAPI VecDeque::rotate_{left,right} Iterator::copied io::IoSlice io::IoSliceMut Read::read_vectored Write::write_vectored str::as_mut_ptr mem::MaybeUn
Red Hat Enterprise Linuxのマイナーリリースは固定せずに適宜アップデートして欲しい件 | DevelopersIO
RHELだからマイナーバージョンアップしないというのは危うい こんにちは、のんピ(@non____97)です。 皆さんは定期的にRed Hat Enterprise Linux(以降RHEL)のマイナーリリースは固定して運用されていますか? 全てのパッケージのマイナーリリースを固定するのは止めましょう。 RHELにおいて、基本的にパッケージが修正されるのは最新のマイナーリリースのみです。 抜粋 : Red Hat Enterprise Linux ライフサイクル EUS, AUS, ELSの考え方 P.4 そのため、最新でないマイナーリリースを使い続ける場合、パッケージの修正があったとしても適用することができません。 Errataの重要度や優先度が限定的ではありますが、特定マイナーリリースのサポート期間を2年間に延長する仕組みとしてEUS(Extended Update Support)が
はじめに 地政学ブームが続いている。今年発売されたものだけでも出口治明・立命館アジア大学長の『教養としての地政学入門』（日経B P）、船橋洋一監修の『こども地政学』（バウンド）など、「地政学」をタイトルに掲げた本の勢いはここ数年、止まるところを知らない。変化の激しい現代においてこの5年ほどの間に、「地政学」と言う言葉は、出版・言論界で例外的に不動の地位を築いたようにさえ見える。 だが、地政学とは何なのか。近年刊行されたビジネス書などによると、地政学は、世界の動きを正確に把握するために不可欠である。【注1】それは世界の「見え方」であり、「勝利の方程式」であり、知れば知るほど面白い、現代人必携の知識であるらしい。しかしこれらの本に登場するのは、ナチスドイツと繋がりがあったと言われるカール・ハウスホーファー（1869-1946）、英国帝国主義の理論家ハルフォード・マッキンダー（1861-1947
ニューラルネットワークのPruningの最新動向について - Ridge-institute R&D Blog
こんにちは．株式会社Ridge-iの@zawatsky_rと@machinery81です． 本記事ではPruningと呼ばれるニューラルネットワークの軽量化手法を紹介します． TL;DR Pruningとは？ Pruning手法の概要 手法の違いのポイント Structure Scoring Scheduling Fine-Tuning Pruningに関する論文の紹介 Unstructured Pruning Structured Pruning 自動モデル圧縮 Amc: AutoML for Model Compressionとその亜種 AutoPruner The Lottery Ticket Hypothesis メタ研究 To Prune, or Not to Prune: Exploring the Efficacy of Pruning for Model Compressi
AWS CloudShell を Serverless Framework × Python のデプロイ環境として使ってみた - サーバーワークスエンジニアブログ
AWS CloudShell がリリースされ、ブラウザ上でシェル環境が使えるようになりました。 aws.amazon.com このアップデートによって、「ローカルを汚さないCLI環境」が簡単に手に入るようになりました。 GCP では以前から "Cloud Shell" という名称で存在していたサービスですね。個人的な検証でたまに GCP の Cloud Shell を触ることがあり、ちょっとした作業や検証をするには便利だなと思っていました。なので、今回 AWS が追随して AWS CloudShell をローンチしたことにとてもテンションが上がっています。 紹介記事はすでに弊社の保田が記事（下記）を出していますので、私の方では実作業に使ってみての所感などシェアしようと思います。 blog.serverworks.co.jp 前置き 使用感 デプロイ時に気をつけること 実行環境に関連する話
前回はテキストマイニングの手法と OSS を用いた実践について紹介しました。今回は、Google の T5(Text-to-Text Transfer Transformer) によるテキスト生成について、学習や推論のコード例と実験結果を交えてご紹介します。 1. はじめに 本記事では Google の T5(Text-to-Text Transfer Transformer) 1によるテキスト生成について、学習や推論のコード例と実験結果を交えてご紹介します。実験としては livedoor ニュースコーパス2での文章分類、やさしい日本語コーパス3及びやさしい日本語拡張コーパス4を用いたやさしい日本語変換を行いました。今回も Google Colaboratory で動かすことを想定したコードスニペットを入れていきますので、実際に動かしたり対象を変えてみたりして試して頂けると良いかと思います
『君の名は。』への評がいかに快挙か；訳文と感想（ネットで読めるグレッグ・イーガン氏の映画・創作観） - すやすや眠るみたくすらすら書けたら
録り貯めたお正月の特番を消化しているかたのなかには、３が日に地上波初放送された『天気の子』や８日新年一発目の『金曜ロードSHOW!』神木隆之介さんなど豪華吹替キャストによる『パラサイト』をご覧のかたもいらっしゃるんじゃないでしょうか？ 今回の記事は、そんな新海誠監督の前作で神木氏主演『君の名は。』にたいするグレッグ・イーガン氏の評価がいかにすごいか、氏のインタビューやエッセイ（『Avatar Review（「アバター」批評）』『No Intelligence Required Her, Ex Machina and Interstellar（知性は不要――「her／世界でひとつの彼女」、「エクス・マキナ」そして「インターステラー」にとって）』）などを勝手に訳して、氏の映画観・創作観と比べることで確かめてみようという感じのやつです。 訳文本文7700字｛2230字＋5529字（原文730語＋
WordPressの始め方はこちらです。 WordPressでのブログの始め方は難しくないよ。 WordPressインストールしたら、その後WordPressの管理画面に入っても何から手を付けたらいいのかわからないですよね？ 私自身、初めてWordPressでブログを始めた時に設定に苦労しました。『最初にやるべき設定を全て網羅している説明書みたいな記事がないかなぁ～』って思っていました。 私が探した時はありませんでしたので、一個、一個やるべきことを調べてはやっての繰り返しで大変でした。 最初の設定でつまづいて、WordPress難しいからやめた何て話もよく聞きますよね。それは、わかりやすい説明書の記事に出会わなかったのが原因の１つだと思います。 専門用語並べられて説明されても、私がそうだったように初心者の頃はまったくわかりませんから、分かり易い説明に出会うことが大切です。 そこで私が、もう
ロックダウンした国を含む上位20カ国+日本の感染者数の推移をPythonで可視化してみた。※チュートリアル付き｜まにゃpy
ロックダウンした国を含む上位20カ国+日本の感染者数の推移をPythonで可視化してみた。※チュートリアル付き こんにちはまにゃpyです。 3月ごろからヨーロッパやアメリカなどを中心に政府強制介入のロックダウンが行われていましたね。 「そういえば、各国のロックダウンの影響はどうなっているだろうか？」 今回作ったのは感染者数が多い上位20カ国のグラフです。Python初学者向けにチュートリアル型式にまとめました。 具体的に作ったのは下記3つ ・20カ国をひとまとめにしたグラフ ・20カ国それぞれの国の日ごとの感染者数の棒グラフ ・20カ国それぞれの国の累積の感染者数のグラフ 元となるデータは厚生労働省のホームページを使いました。 ちなみにデータ取得、整形、グラフ描画まで、使った言語はPythonのみです。 こちらは20カ国の感染者数の伸びをひとまとめにしたグラフです。 各国の感染者数の比較が
2019年のOSS活動の振り返り記事です。 今までの振り返り。 今年のOSS活動振り返り @ 2018 | Web Scratch 今年のOSS活動振り返り @ 2017 | Web Scratch 今年のOSS活動振り返り @ 2016 | Web Scratch 今年のOSS活動振り返り @ 2015 | Web Scratch 今年のOSS活動振り返り @ 2014 | Web Scratch 2019年のGitHubのContributionsは7000~10000ぐらいを推移していました。 ちょっとプライベートリポジトリのコミット比率が上がって、原因はasocial-bookmarkでのブックマークシステムな気がします。後は、仕事のリポジトリがPrivate比率多い。 GitHubのCurrent Streakは2246日で6.153424658年コミットは続いています。 データ
こんにちは。レトリバの飯田(@meshidenn)です。カスタマーサクセス部 研究チームのリーダーをしており、マネジメントや論文調査、受託のPOCを行なっています。 従来の検索アルゴリズムの問題点 COILの概要 検索時の挙動 学習時の挙動 結果 実験 終わりに 従来の検索アルゴリズムの問題点 従来の検索アルゴリズムの問題点といえば、"意味"を考慮できないということが挙げられます。従来の検索アルゴリズムは、単語一致をベースとして、そのスコアリングをするのが基本だからです。そのため、単語が一致しないことによる弊害がおきます。そして、「あー、意味を考慮できたらなー」という発想に至ります。 その結果、クエリも文書もベクトル表現にして計算してしまえ！ということで近年研究が盛んに行われており、BERT1が提案されて以降、教師データがあれば、うまく行くことがわかってきています。さらに、近年、最近傍アル
セキュリティ英単語帳
2022年6⽉ 独⽴⾏政法⼈ 情報処理推進機構 産業サイバーセキュリティセンター 第5期中核⼈材育成プログラム 「セキュリティエンジニアのための English Reading」プロジェクト 動詞 単語 意味 関連語 使用例 include ～を含む 【名】inclusion: 包含、含まれるもの 【形】inclusive: すべてを含んだ the email including a malicious macro 悪意のあるマクロを含むメール steal ～を盗む steal sensitive information 機微な情報を盗む exploit (脆弱性) を突いて攻撃する 【名】エクスプロイト (コード) 【名】exploitation: (脆弱性を突く) 攻撃 【形】exploitable: 悪用可能な actively exploited vulnerability よく攻
みなさん、こんにちは！ こちらは「ABEJA AdventCalendar 2021」 の15日目の記事です。 データサイエンティストとは？ いきなりですが、データサイエンティストとは何でしょうか？ 私自身、データサイエンティストとして働いていますが、最近よく「データサイエンティストになるにはxxxxのスキルが必要だ」とか「データサイエンティストとはxxxxだ」みたいな論争話題をよく聞きます。 データサイエンティストという職業をよく耳にするようになってから、まだ時間も経っていないですし、今後どうなっていくのかも分かりません。 そんな中、データサイエンティストになるべく、データサイエンティストとして今後もキャリアを続けていけるようになるべく、各々がキャリアについて考えているので、色々な意見が出てくるのは自然なことかもしれません。 しかしまぁよく分からないですよね。 ということで、人々による議
ChatGPT - Wikipedia
ChatGPT（チャットジーピーティー、英語: Chat Generative Pre-trained Transformer）[1]は、OpenAIが2022年11月に公開した人工知能チャットボットであり、生成AIの一種。 GPTの原語のGenerative Pre-trained Transformerとは、「生成可能な事前学習済み変換器」という意味である[2]。OpenAIのGPT-3ファミリーの大規模な言語モデルに基づいて構築されており、教師あり学習と強化学習の両方の手法を使って転移学習され、機械学習のサブセットである深層学習を使って開発されている[3]。 概要 2022年11月30日にプロトタイプとして公開され、幅広い分野の質問に詳細な回答を生成できることから注目を集めた。しかし、人間が自然と感じる回答の生成を特徴としていることから、一見自然に見えるが事実とは異なる回答を生成する
「科学と政治が不可分なら、我々はただそのことを受け入れなければいけないのか、それとも積極的に政治は科学に介入すべきなのか」-「キャンセルカルチャー」論争続編 - わが忘れなば
前回の記事で 2021-22 にかけてアメリカ化学会の発行する学術誌で起きた「キャンセルカルチャー」をめぐる論争について、大雑把なものながら紹介をした。反応を見ると、「科学の政治化」を憂い、「キャンセルカルチャー」批判を行う側のアンナ・クリロフに共感した人も、「政治と無関係な科学」の不可能性を説き、「キャンセルカルチャー」という概念そのものに疑問を投げかけるフィリップ・ボールやハーバートらに共感を抱く人も両方いたようだ。 ぼく個人としては、ボールやハーバートらの主張にシンパシーを抱きつつも、各々の主張の紹介は公平なものであることを心掛けていたつもりなので、評価が分かれたことは多としたい。 ボール（たち）の主張にいまいち乗り切れないものを感じる場合、「科学はそもそも政治的である（そうでないものはありえない）」という科学観がどうしても魅力を欠いたものであるということがあると思う。クリロフとボー
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Microsoft Ignite 2023 キーノート日本語まとめ - 吉田の備忘録
グラフィカルモデルに基づく因果探索手法の調査 - Fire Engine
もしも推薦システムの精度と多様性が単一の指標で測れたら
個人情報が流出したかどうかをチェックできる「Have I Been Pwned?」が設立10周年を迎える
ゼロからはじめるPython(78) Pythonの正規表現を使って200個のファイルをフォルダ分けしよう
動画やWebページの調べ物を良くする人はOtio AIを使ったほうが良い
ChatGPT Assistants API の使い方｜ChatGPT研究所
OhMyZshからZinitに乗り換えてみた話 - エニグモ開発者ブログ
AWS で生成系 AI を使用した構築のための新ツールを発表 | Amazon Web Services
RAGでの回答精度向上のためのテクニック集（応用編-A）
フロントエンドパフォーマンスのチェックリスト2021年版（PDF、Apple Pages、MS Word）-前編 | POSTD
2021年のSEO予測：5人の専門家が日本と世界のトレンドを解説 - Zo Digital Japan
【IQ1AdC】W理論こと特異学習理論の重要論文公式10本ノック【12/9】 - カイヤン雑記帳
Rust 1.36を早めに深掘り - OPTiM TECH BLOG
地政学は現実主義か――存在論的安全保障で考える/渡辺敦子 - SYNODOS
はじめての自然言語処理 T5 によるテキスト生成の検証 | オブジェクトの広場
WordPressインストール後の設定を全て網羅している説明書｜あなた目線で解説 | ジェイコブ佐藤blog
今年のOSS活動振り返り @ 2019
文脈化された転置インデックス - Retrieva TECH BLOG
データサイエンティストとは何か論争にAI(gpt-2)で終止符を打とうとした話 - Qiita