段林大地｜陸上を仕事にする @dangomu444 被保険者人数を検索できるの初めて知った！ 帝国データバンクは小さい会社の情報って何も収集できないけど こっちは情報は限定的だけど、どんな会社でも分かるね うちの会社は15人ってなってた twitter.com/fuenaikonbu/st… 2024-01-02 14:57:51 白いるか @mikimiki_ges02 これ知りたかったー！ （中途採用面接で社保あるの確認して入ったら、同期は社保あるけどそれ以前入社の人たちは社保なくて、年末調整もしてくれない会社だったことありまーす） （しかも入社して1年で社保無くされそうになった） twitter.com/fuenaikonbu/st… 2024-01-02 16:24:58
マイクロソフト、初心者向け生成AI学習教材「生成AIアプリケーションの開発を始めるために必要な全知識を学べる12講座」を無償公開
マイクロソフト、初心者向け生成AI学習教材「生成AIアプリケーションの開発を始めるために必要な全知識を学べる12講座」を無償公開 コースの内容には、大規模言語モデル（LLM）がどのように動くかを理解する。「生成 AI と大規模言語モデルの紹介」、ユースケースに適したAIモデルを選択できるようにする「様々なLLMの調査と比較」、プロンプトの構造と使用法の理解のための「プロンプト・エンジニアリングの基礎」、埋め込み技術を利用したデータ検索アプリケーションを構築する「Vector Databasesを利用した検索アプリケーションの構築」、外部APIからデータを取得するためFunction Callingを設定する「Function Callingとの統合」など、入門的な内容から高度なアプリケーションの開発まで多岐にわたるレッスンが用意されています。 レッスン内容は日本語による説明と図で構成 各レ
なぜ、最悪の業績なのに年商の20％にもあたる1億円の売上を手放してまで楽天市場から退店するのか｜鷲尾 岳 / ワシオ株式会社 3代目社長
【はじめに】・自己紹介こんにちは。 今年の1月にワシオ株式会社（以下ワシオ）の代表取締役社長に就任しました、三代目の鷲尾 岳（ワシオ タカシ）と申します。 鷲尾家の次男坊として1991年2月10日に生まれ、小学校5年生までは地元の公立、小６から私立の学校に転校し、中３までは福井県、高校は和歌山県にある姉妹校にて寮生活をしていました。 ここで詳しくは書きませんが、その学校の特徴として、「義務教育は最低限」「校則は生徒が主になって話し合って決める」「1年を通して大半のコマを占める”プロジェクト”という授業で目標を決め、達成に向けて何をするか生徒が決める」「やりたいことは大概やらせてもらえる」などなど、おそらくかなり一般的な学校からかけ離れた環境で多感な時期を過ごしました。 高校を卒業した後、大学で中国語を学んだので、卒業してからは父の伝手を頼って入社後すぐに中国で駐在させてくれる会社さんにご縁
Mic King @iPullRank Ok, let's get this party started! A couple weeks ago I said I was publishing the most important thing I ever wrote. I was wrong. Documentation related to the Google Search algorithm leaked and I spent the weekend tearing it apart. ipullrank.com/google-algo-le… ✌🏾 2024-05-28 11:10:19 数週間前、私はこれまで書いた中で最も重要なものを発表すると言いました。それは間違いだった。 Google検索のアルゴリズムに関するドキュメントが漏洩したため、私は週末をかけてそれを徹底的に調
メガネをいろいろ作ってみた感想
スペック ・両目とも-6.50前後、右のほうがちょっと視力がいい ・弱めの乱視あり、矯正しなくてもギリ見えるが目が疲れてくると見え辛くなってくる ■ZOFF、JINS、OWNDAYS 5000〜12000円くらい。 学生のうちはよかったが、就職して金に余裕が出てきてからは使うことはなくなった。 というのも、後述する店を使うようになってから、おそらく視力検査の雑さによって、ちゃんと度が合っていないことが分かった。 両目それぞれ若干見え方が違ったりするのを「メガネの見え方ってまあこんなもんだろ」と思い込んでいたがそんなことはなかった。 ■メガネスーパー 検査料込みで50000円くらいだった。 「トータルアイ検査」という有料の検査をしてもらったんだが、暗所での光の見え方の確認とか、カラーレンズ越しに見た時に文字の読みやすさみたいな確認もした。 ここで初めて、疲れてくるとものが二重に見えるのが斜位
google検索の劣化して専門家はdiscordに行ってしまいインターネットには屑情報だけになってしまった - orangestar2
またはてないじりの漫画描いてごめんなさい…。でも思いついたら描かないでいられなかったのと、あと、自分が描かなかったらだれが描くんだろう、だれが人力検索はてなのことを思い出すんだろうと思って……。 q.hatena.ne.jp 人力検索はてな www.gizmodo.jp この記事にある通り、最近はさらにひどくなってる。生成AIによって記事の作成が容易になってるのもあるんじゃないかな。よくわかんないけど。 goldhead.hatenablog.com また、このエントリには全面同意で、本当に個人の記事にたどり着かなくなった。それに伴い、特殊な事例の処置の仕方（昔は大抵個人がメモっていて、そういうのがヒットした）も全然わからなくなった。野生の専門家がまとめた特定の分野に詳しいホームページが２０００年ごろは結構あったんだけれども、そういうものも一切ヒットしなくなった。まず、そういう静的にまとめ
「このバンドやミュージシャンが好きなら、これらのバンドやミュージシャンも好きかもしれない」というのをAI（人工知能）が提案する音楽マップ「Music-Map」が話題に。マップ上、2つの名前が近ければ近いほど、両方のアーティストが好きである確率が高くなるという。これは、人工知能と新しいユーザーインターフェースの実験Gnod（Global Network of Discovery）の一環として作られたものです。 ■音楽マップ「Music-Map」 https://www.music-map.com/
Google検索終わってしまったの？という話で界隈が少し盛り上がっていてうーんはてなってなっていてそこはかとなく嬉しい。 goldhead.hatenablog.com orangestar2.hatenadiary.com 本件については僕も定期的に何かを言っている話ではあるんだけど、特にここ最近でキャッシュの検索もしなくなったってところが非常に象徴的だなあと思っています。キャッシュすることが著作権上問題だ何だで揉めたのが懐かしいよね。令和に至ってはウェブコンテンツの揮発性のほうがもはや問題である、と。 （個人的には依然として「なくなる権利」の方が重要と思っているだけど） 黄金頭さんが書いている「個人の日記が引っかからない」というのはもうずっと前から同感で、何かを見たことを共有したくて感想を探したところで例えば映画なら映画のあらすじサイトばかり引っかかる。体裁としては個人だけど明らかに広
Googleがサポート詐欺を支援し収益を上げる 実際に表示された130の広告【俺の詐欺画像フォルダが火を吹くぜ】 - SEO辻正浩のブログ
サポート詐欺とネット広告 サポート詐欺の被害拡大が大きな問題になっています。 サポート詐欺は様々な手法でパソコンの不調を警告する画面をPC上に表示させ電話をかけるように煽り、サポート費用としてGoogle PlayギフトカードやiTunesギフトカードを買わせて支払わせたりPCの遠隔操作で振込をさせて、お金を奪う詐欺です。 この詐欺自体は昔からあるものですが、増加したようで2023年9月末には消費者庁も注意喚起を行っています。 www.caa.go.jp また、夏以後に日本各地の警察も注意喚起を始めた他、様々な報道機関やネット媒体がその問題を報じ続けています。 (2/14)詐欺：“サポート詐欺”に注意！ | NHK (5/15)パソコン「サポート詐欺」電話かけてみた 72分間の通話の全容 | NHK | デジタルでだまされない (7/2)【動画解説】パソコン「サポート詐欺」警告が出た時の対
総務省｜報道資料｜ヤフー株式会社に対する行政指導
総務省は、本日、ヤフー株式会社（代表取締役社長 小澤 隆生）に対して、検索関連データの提供に関する利用者周知及び安全管理措置の実施について、文書により行政指導を行いました。 ヤフー株式会社（以下「ヤフー社」といいます。）は、Yahoo！JAPANの検索エンジン技術の開発・検証の観点から、NAVER Corporation（以下「NAVER社」といいます。）に対して、令和5年5月18日（木）から同年7月26日（水）までの間の検索関連データの提供を試験的に行っており、その際、慎重な取扱いが求められる情報である位置情報等（約756万のユニークブラウザ分の検索クエリ等（うち、位置情報は約410万のユニークブラウザ分））を利用者に対して事前の十分な周知を行うことなく、NAVER社へ提供し利用させていたほか、当該位置情報等について十分な安全管理措置がとられていなかったことが判明しました。
｢最近、Google検索がイマイチな気がする…｣→本当にイマイチだった2024.02.01 08:00139,673 Thomas Germain - Gizmodo US ［原文］ （ そうこ ） 最近、なんとなく、ぼんやりとGoogle検索に対して思っていることありませんか？ 気のせいかもしれないけど、なんとなくだけど、私の感覚だけど、検索結果の質が悪いような…。そのなんとなく、まちがっていません！ 多くのユーザー、アナリスト、専門家が、Google検索結果の質が落ちていると声をあげています。品質は落ちていない、むしろ過去最高に絶好調だ！と異議をとなえているのは、Google。Googleだけ。 ユーザーが結果がイマイチと思っている＆リサーチでも結果にでているんだから、なんとかしてくれよ！ いえ、そう簡単な話ではないようです。 ｢製品の検索｣がとくに悪化ドイツのライプツィヒ大学、バウハ
はじめに はじめまして、8月にコネヒトに入社したy.ikenoueです。 突然ですがみなさん、生成AIは使っておりますでしょうか？ ChatGPTやStable Diffusionといった代表的な生成AIの発表から約1年が経過し、そろそろブームも落ち着くかと思っていたのですが、つい先日もOpenAI DevDayにてChatGPTに関する様々なアップデートが発表されるなど、相変わらず目まぐるしい日々が続いていますね。 弊社における生成AIの活用状況はというと、以前に下記の記事にて、Slack上でChatGPTと会話できる環境を社内提供しているという取り組みをご紹介しました。 tech.connehito.com 本日は、上記の社内ツールに新たに追加した「社内文書の参照機能」についてご紹介します。 「社内文書の参照機能」の概要と開発動機 まずは「社内文書の参照機能」の概要と開発にいたった動機
グーグルの検索結果ってこんなやばかったっけ？
広告がひどい、Youtubeは野放し状態とかみんなグーグルに関して思うことはあると思うけど、自分が思うのはグーグルの唯一無二であったはずの検索精度。これがここ3、4年でものすごく落ちてきてる気がする。 自分はあるメーカーのナイフ（一本数十万ぐらい）をコレクターしてるんだけど、それの偽サイトがここ数年で異常に増えてる。 国内ではそのナイフはヤフオク、メルカリ、あと3,4軒の刃物のショップぐらいしか基本的に流通しない。さらに販売時のコレクター間のマナー（？）としてシリアルナンバーを写すというのがある。なのであっちで売られたのがこっちで売られて・・・みたいなのが追ってるとわかるんだけど、これらで販売された画像と文章をそのままパクって使い回して自社サイトで掲載してるサイトが検索結果の1ページ目にめちゃくちゃ表示される。今でも同じシリアルナンバーのナイフが三件の偽サイトで販売されている。 なんならき
よくお世話になっている正規表現ですが、毎日使うものでもないので、なかなか覚えることができず。。。 使う度に検索するものもあるので、自分のための正規表現備忘録を作成することにしました。 データ整理などに使っているだけなので、偏りがあるかもしれません。 全角文字だけ
www.gizmodo.jp こんな記事があって、おれはこんなことを書いた。 ｢最近、Google検索がイマイチな気がする…｣→本当にイマイチだった [ネット] 今どき個人ブログ書いてる人間も相当少ないが、それでももうまったくインデックスされなくなっていて、商品やイベントの一般人の感想なんかはもう検索エンジンからはたどり着けない。 2024/02/01 15:07 b.hatena.ne.jp 純粋な「個人ブログ」、「日記」というものはもうGoogleはインデックスしない。 staff.hatenablog.com 「しない」は言い過ぎかもしれないが、ほとんどしない。いつからだかはよくわからない。よくわからないが、おれがそれを実感したのは、去年「ジャパンモビリティショー」に行ったときのことだった。いや、正確には「行く前」だ。いったいどんなショーなのか、どのくらい混んでいるのか、どんな雰囲気
「ChatGPTはすぐに嘘をつくから調べものには使えない」という意見をよく聞くが、これには大きな誤解がある。 そもそもChatGPTの心臓部である大規模言語モデル（LLM）は、膨大な知識を元にテキストを「生成」する仕組みだ。 逆に言うと、知識として持っていないことは一切わからないので、知らないことについて説明を求められても能力的に不可能なのだ。 だから、知識にない質問をされると答えられないだけでなく、苦し紛れに幻覚（ハルシネーション）を起こしてしまう。これが「すぐに嘘をつく」と言われる理由だ。 結論を書いてしまうと「ChatGPTは検索ツールではない」のだ。むしろ「ChatGPTがいちばん苦手とすることが検索」なのだ。 今回はこの欠点を補い、AIを活用した新しい検索の形を実現するという触れ込みのサービス「Perplexity.ai」を紹介していく。 Perplexity.aiとは Perp
個人的なJavaScriptの情報収集の方法についてまとめてみます。 JSer.infoなどをやっているので、JavaScriptの情報については色々な情報源を見るようにしています。 JSer.infoの範囲の中での情報源については、次の記事でまとめています。 JSer.info 13周年: JavaScriptの情報源を整理する - JSer.info この記事では、少しスコープを広げてJavaScriptの情報収集についてまとめてみます。 かなりスコープが広がってしまうので、万人向けの方法ではなく、個人的な情報収集方法としてまとめています。 この記事では、膨大な情報の中から見つけるというアプローチをとっているので、人によって向き不向きがあると思います。 情報収集の方法 情報の元となる情報源はさまざまなサイトや人になると思います。 しかし、そのサイトや人ごとに見ていくというのはかなり大変
インデックスを理解したい - Qiita
はじめに みなさんはDBのインデックスを正しく使えていますか？ 私はなんとなく「DBのパフォーマンスを向上するためのもの」という認識はあったのですが、 どのような場面で使うものなのか、逆にどのような場面では使うべきでないのかなど 明確に理解できていませんでした。 今回はそんなインデックスについての理解を深めたいと思います。 インデックスとは インデックスとは、その名の通り「索引」です。 表現の仕方と変えると、(x, a)という形式の配列であるとも言えます。 xというキー値とそれに結びつくaというデータ情報があり、 これを利用することですべてのデータを網羅して見ることなく、 まさに本の索引のように目的のデータにたどり着くことができます。 インデックスはSQLのパフォーマンスを改善するための非常にポピュラーな手段であり、 理由としては下記の3点が挙げられます。 アプリケーションのコードに影響を
全俳句データベース
ぜんぶの俳句のデータベースです
［速報］マイクロソフト、Bing Chatで手書きの画像からHTML/CSSを生成可能に、冷蔵庫の中身から料理のアイデアも、新機能ビジュアルサーチ。Inspire 2023
［速報］マイクロソフト、Bing Chatで手書きの画像からHTML/CSSを生成可能に、冷蔵庫の中身から料理のアイデアも、新機能ビジュアルサーチ。Inspire 2023 マイクロソフトは、日本時間7月19日未明から開催中のパートナー向け年次イベント「Microsoft Inspire 2023」において、AIチャットサービス「Bing Chat」に、画像を基に質問ができる「ビジュアルサーチ」機能（Visual Search in Bing Chat）を追加したことを明らかにしました。 ビジュアルサーチの機能はOpenAIのGPT-4モデルを活用したものだと説明されています。 下記はBing Chatのビジュアルサーチのデモ動画として、手書きのWebフォームの画像からHTML/CSSを生成させる様子を紹介したものです。 手書きのWebフォーム画像からHTML/CSSを生成 Bing Ch
個人ブログの備忘録や有志の作ったまとめwikiのような、ユーザー目線の良質な情報はもうGoogle検索上から見えない領域に行ってしまった説
sabakichi @knshtyk 最近のGoogle検索の品質低下は様々な要因があるのだと思うが、そもそも個人ブログに良質な情報が蓄積される、というWebの時代が終焉を迎えたというだけなのかもしれないとも思う。インプレッションの寡占が進んだ結果、皆情報をSNSやForumに書くようになり、独立したソースは激減しているのではないか 2023-11-15 12:46:29 sabakichi @knshtyk 特に英語圏だとこの流れは顕著で、多くのブロガーがYouTubeへと主要な活動メディアを移行しており、もはや検索するよりYouTubeで動画を見つける方が目的に情報にたどり着きやすい、みたいなことがよくある。テキストベースでの情報だとSNSで検索する方が情報の質は高い(検索はフェイク情報しかない) 2023-11-15 12:51:17 YujiSoftware @YujiSoftwa
はじめに find コマンドの使い方は、ざっくり調べただけではよくわからんとなりますが、見逃しがちなルールを知れば簡単に理解できます。find コマンドに限りませんが使い方を調べるのが面倒だからと曖昧な理解で使うと逆にもっと分からなくなって時間がかかります。急がば回れ、理解して正しく使ったほうがシンプルで楽で簡単です。この記事では find コマンドの使い方を理解するために必要なルールと使い方の実践的な知識をまとめました。 Q&A（？）: -type や -perm の説明はしないの？ ⇒ それらはドキュメントを読むか検索すればすぐにわかることで難しいポイントではありません。重要なのは基本のルールを理解することです。 関連記事 POSIX 準拠のシェルスクリプトでは find | xargs よりも find -exec {} + を使うべき！ 移植性の話はこちら ⇒ findコマンドのオ
perplexity.aiが速攻で$20払って良いと思えたくらいに情報収集を効率化してくれた件 - 理系学生日記
従来の検索エンジン Perplexity.aiの検索 RAGとの関係 perplexity.aiでリサーチするときのプラクティス 英語で検索しよう しっかり調べたい時はPage機能を使う ちょっとした調べ物 今使えるモデル まとめ Perplexity.aiがすごく良かったです。何か知りたいことが出てきたら、Google検索するよりもPerplexity.aiで検索している。 Perplexity.aiは、生成AIを用いた検索エンジンと見なすことができるサービスで、情報収集の効率を劇的に向上させてくれます。ユーザーの質問に対してWebをクローリングし、関連情報を要約し、それらの参照リンクとともに高精度な回答を提供してくれる。 最初にネタバレしておくと、このエントリ自体もかなりの部分をperplexity.aiの要約と回答生成能力に頼りました（Github Copilotにもわずかに頼ってい
ビュー数を稼ぐためならセンセーショナルな見出しとショッキングなサムネを付けて、掲示板の住人の発言という体で真実ではない情報もそのまま垂れ流すまとめサイトの情報をそのまま鵜呑みにする人はいないかと思いますが、どうやら以下の画像がキュリー夫人の手としてネットに出回っているのは確かなようです。 画像1キュリー夫人が放射線に被爆して健康被害を受けたこと（本人は認めなかったらしい）は有名な話ですが、しかし私はキュリー夫人の手がこうなっていたとは聞いたことがありませんでした。Wikipediaのキュリー夫人の記事なども見てみましたが（これはこれで完全に信頼できる訳ではないですが）そのような記述は見つかりません。 という訳でこの画像の来歴を辿ってみようと思いました。まず、画像をGoogleの画像検索にかけてみます。Twitterなどでも同じ画像が流布しているのが見て取れますが、IAEAが公開しているスラ
インターネット上ではさまざまなフォントが配布されていますが、何となく使用したいフォントのイメージはあるものの正式名称がわからなかったり、フワッとしたイメージしかなくてどうやって検索すればいいかわからなかったりといったケースはよくあるもの。そんなフォント選びに困った場合に役立つ、書体やイメージワードから300個の日本語フリーフォントを絞り込み検索できるサイトが「モジザイ」です。 モジザイ https://www.mojizai.com/ モジザイを開くとこんな感じ。 モジザイでは「書体から検索」と「イメージワードから検索」があり、それぞれ表示されているタグを選択することでフォントの検索ができます。試しに「明朝体」をクリック。 スクロールすると、明朝体のフォントが絞り込まれて表示されました。記事作成時点では、モジザイでは362種類のフォントへのリンクが含まれており、そのうち明朝体は31件ヒット
以下の文章は、コリイ・ドクトロウの「Google reneged on the monopolistic bargain」という記事を翻訳したものである。 Pluralistic 驚くべきことに、かつてAltavistaやYahooをふっと飛ばし、魔法の検索ツールで世界を驚かせたGoogleが、突如クソの山になってしまった。 Googleの検索結果はひどいものだ。ページの上部はスパム、詐欺、広告だらけだ。始末に終えないのは、その広告も詐欺だらけなのだ。時には、資金力のある敵対者がGoogleを出し抜いて大金を稼ごうと大掛かりな詐欺が試みることもある。 https://www.nbcnews.com/tech/tech-news/phone-numbers-airlines-listed-google-directed-scammers-rcna94766 しかし通常、こうした詐欺を働くのは
![かくしてGoogleはスパマーに敗北した | p2ptk[.]org](https://cdn-ak-scissors.b.st-hatena.com/image/square/a3e1fdf42c7dd4fc729644f9cd286ef877f95066/height=288;version=1;width=512/https%3A%2F%2Fp2ptk.org%2Fwp-content%2Fuploads%2F2024%2F04%2Fgoog-sleeping-watchdog.jpg)
不動産情報ライブラリ - 国土交通省
Twitter、ログインしないと見れない
今日の午後から Twitterはログインしないとツイートが表示できなくなった 災害情報を流してる自治体とか、ホームページと連動してROM専でも見れる情報を運営していたところは大打撃 少し前からログインしないと検索できないようになってたけど （しかしログイン状態で検索したところで検索は死んでるに等しい） もうTwitterは本格的に終わり
「食べログ」より 「食べログ」「ぐるなび」「ホットペッパーグルメ」などさまざまなグルメサイトが存在するが、消費者や飲食店の間でグルメサイト離れが進んでいるといわれている。実際にSNSでお店を選ぶ人も多いが、実態はいかに。今回はグルメサイト離れについてプレスリリースを発表した株式会社TableCheckに話を聞いた。 きっかけはグーグル、インスタグラムの参入 TableCheckは飲食店向けに予約・顧客管理システムを提供している。店舗のオウンドメディアやグルメサイト、電話などからのあらゆるチャネルからの予約を一括で管理できるSaaS企業。そんな同社は以前、グルメサイト離れに関するプレスリリースを発表した。同リリースによると、消費者の間でグルメサイトを信頼しないという声が聞かれるようになり、飲食店検索ではグーグルが台頭するようになったという。飲食店側に対するアンケートでも3割がグルメサイトのユ
初心者が本当に知りたかったC#入門以前
この記事は「初心者だった時に知りたかったな…」っていう普通のC#入門だと教えてくれないことが書いてあります。 なので入門記事というより、C#初心者にはちょっと難しい内容もあります！ C#の特徴的なところ C#は変化が早い💨 最近は毎年メジャーアップデート 2019: C# 8.0 2020: C# 9.0 2021: C# 10.0 2022: C# 11.0 2023: C# 12.0 新記法、新しい書き方がモリモリ入る しかも新しい書き方の方が便利で性能が良い(ことが多い) 少し前のC#を知ってる人からするともう別物 解説 C#は6.0までゆっくりな変化だったんですが… 7.0から様子が変わって8.0以降は毎年変わるようになりました。 ↓こちらのスライドの7ページから数枚が参考になります！ あんまり変わらないバージョンもありますが、特に大きなところだと, 「null安全」になった (
PCを使っていると、過去の操作内容やブラウザで閲覧していた情報を思い出したくなるタイミングが頻繁に発生します。そんな時に役立ちそうなPC操作記録アプリ「Windrecorder」がオープンソースで開発されています。 GitHub - yuka-friends/Windrecorder: Windrecorder is a memory search app by records everything on your screen in small size, to let you rewind what you have seen, query through OCR text or image description, and get activity statistics. https://github.com/yuka-friends/Windrecorder I made an o
法律のデータ構造と検索
デジタル庁は、法令標準 XML スキーマに準拠した、現行の法令データをe-Gov法令検索というサイト上で公開しています[1]。今回、この法令XMLをパースするPythonライブラリ ja-law-parser をつくり、法令データの全文検索をしてみました。 この記事では、日本の法令とそのデータ構造、法令XMLパーサについて解説し、最後に、それらを使った法令データの全文検索システムを実装する方法をご紹介します。法令検索の実装についても、GitHubリポジトリで公開しています。 この記事は、情報検索・検索技術 Advent Calendar 2023の16日目の記事です。 法律と法令 法律とは 法律の制定と公布 法律と法令の違い 法律の改正 法令のデータ構造 e-Govの法令データ 法令標準XMLスキーマ 法令番号と法令ID 題名 本則と附則 条・項・号 編・章・節・款・目 法令XMLパーサ：
こんにちは。レシピ事業部の新井（@SpicyCoffee）です。 クックパッドではこれまで、レシピを投稿してから検索結果に反映されるまで最長で 24 時間程度の時間がかかっていました。今回、この時間を 5 分程度、最長でも 10 分程度に短縮することに成功しました。本記事では、プロジェクトオーナーの立場で関わった私が代表してその開発について紹介します。 プロジェクトの目的と数値目標 本プロジェクトでは上記の「レシピを投稿してから検索結果に反映されるまでの時間短縮」が目的とされました。しかし、時間短縮といっても現状 24 時間であるものを "1 時間" にするのか、"1 分" にするのか、"1 秒" にするのかでは話が全然違います。この数値目標は設計を始めとした後の意思決定に大きく影響を与えるため、しっかりとした意図を持った状態で明確に定めておく必要がありました。 そこで、私とプロダクトオー
はじめに 分散システムの設計および開発において、キャッシュはパフォーマンス向上のための非常に重要な要素です。頻繁にアクセスされるデータをキャッシュすることで、アクセス速度が遅いデータベースへのアクセスを削減し、データへの迅速なアクセスを可能にします。これにより、システムの全体的な効率とパフォーマンスが向上します。 しかし、キャッシュは慎重に設計しないとむしろパフォーマンス上のデメリットになるケースが存在します。 この記事ではよく遭遇するキャッシュ設計の問題とその回避策について解説します。 Cache penetration DBに存在しない値を検索したときに、DBから返された空の結果をキャッシュしない場合に発生するシナリオです。 このシナリオではDBに存在しない値を繰り返し検索することにより、その値がキャッシュされていないため検索ごとにDBへのアクセスが必要になってしまいます。 存在しない
はじめに 新規事業部 生成AIチーム 山本です。 ChatGPT（OpenAI API）をはじめとしたAIの言語モデル（Large Language Model：以下、LLM）を使用して、チャットボットを構築するケースが増えています。通常、LLMが学習したときのデータに含まれている内容以外に関する質問には回答ができません。そのため、例えば社内システムに関するチャットボットを作成しようとしても、素のLLMでは質問に対してわからないという回答や異なる知識に基づいた回答が（当然ながら）得られてしまいます。 この問題を解決する方法として、Retrieval Augmented Generation（以下、RAG）という手法がよく使用されます。RAGでは、ユーザからの質問に回答するために必要そうな内容が書かれた文章を検索し、その文章をLLMへの入力（プロンプト）に付け加えて渡すことで、ユーザが欲しい
ググるより早い。ぼくがたくさんのAIで調べ物する理由
ググるより早い。ぼくがたくさんのAIで調べ物する理由2023.12.30 22:0055,923 西谷茂リチャード 編集部 web検索だけじゃ、見つけにくい知識にアクセスできる。 メディアの仕事をしていると、1日のかなりの割合を｢調べもの｣が占めるようになります。ウェブ検索でかなりスピードアップして...いまは2023年。 新しい｢調べ物｣ツールとして、AIが頭角を現し始めました。おかげで調べるスピードが今まで以上にアップしたと感じています。ここでは、僕がどのようにAIを使っているのか、かんたんに紹介しますね。 ちょっとした調べもの調べものの中には、｢去年のXperiaのカメラの画素数は？｣みたいに明確な答えが決まっているものがあります。実際にこれをウェブ検索で調べた場合、検索結果のページをいくつか読む必要がありますよね。 Perplexityそこで便利なのが、AIチャットサービスのPer
それでは以下、簡単なデモを含めながら個別に説明していきます。 1. ハイブリッドサーチ こちらは、性質の異なる複数の検索方式（例えばベクトル検索とキーワード検索）を組み合わせて検索精度を向上させる手法になります。 各検索方式単体の場合に比べ、性質の異なる検索方式を組み合わせ、ある種いいとこ取りをする事で、検索性能の向上が期待できます。 今回はBM25でのキーワードベースの類似度検索と通常のベクトル検索を組み合わせていきます。 BM25について簡単に説明しておくと、文脈や文章構造は完全に無視した上で、文書内の単語を全てバラバラに分割し、文書内の各単語の出現頻度と文書間におけるレア度を加味した特徴量を算出します。 つまり、特定の文書内の各単語の数をカウントしてヒストグラムを作れば、似たような文書には同じような単語がよく出るはずなので(同じようなヒストグラムの形になるので)、類似度が高くなる性質
ネット検索できない情報を図書館で集める方法
公共図書館は「情報のダム」 雨が降らなくて水不足になったとき、すでに干上がった川から水を汲み上げようとしても無理ですよね。だから日本中の川にダムが造られるわけです。同じように、情報も水のように常に流れていくものなので、いざというときのためにダムに貯めておかないといけません。 図書館はまさに情報のダムです。日本でいちばん多い図書館は、地域にある公共図書館です。すべての都道府県に合計3305館あります。スパイの専門用語でも、図書館のように情報を集約する機関を「インテリジェンス・ コミュニティー」と呼んでいて、情報収集のいちばん重要な場所だとしています。 図書館は、どちらかというとアナログにかたよってきましたが、コロナをきっかけに資料のデジタル化にも力を入れています。これをデジタルアーカイブといいます。 とくに公共図書館は「情報のダム」として、地域の記録（郷土資料）を残すのが役目です。郷土資料は
生成 AI による検索体験 (SGE) のご紹介
Google は、20 年以上前に日本で Google 検索の提供を開始しました。それ以来、常により良い体験となるよう機能をアップデートしてきました。AI と機械学習の進歩により、Google の検索システムはこれまで以上に人間の言語を理解することができるようになりました。そして本日より、国内で Google 検索の新機能として生成 AI による検索体験 (SGE -Search Generative Experience) の日本語版の試験運用を開始します。 Search Labs に Google アカウントを登録することで、デスクトップの Chrome ブラウザと スマートフォンの Google アプリ（ Android および iOS ）でご利用いただけます。 生成 AI による検索の進化生成 AI の新たな技術進歩により、検索エンジンの更なる可能性を再考することができ、新しいタイ
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Twitterで見かける怪しい会社、この方法で実態が分かる「中小企業の調査の基本」
Googleの検索アルゴリズムの内部資料が漏洩か？「SEO業界で長年疑われていたものが明らかに」
「このバンドが好きなら、これらのバンドも好きかも」をAIが提案する音楽マップが話題に - amass
我々の愛したGoogle検索はすでに死んでいる - novtanの日常
｢最近、Google検索がイマイチな気がする…｣→本当にイマイチだった
ChatGPTに社内文書に基づいた回答を生成させる仕組みを構築しました - コネヒト開発者ブログ
サクラエディタでよく使う正規表現たち【備忘録】 - Qiita
※個人の感想にたどり着けないインターネット - 関内関外日記
AI検索「Perplexity」がかなり便利だったので紹介します (1/5)
私のJavaScriptの情報収集法 2024年版
findコマンドの使い方を簡単に理解するための7つのルール＋実践的な知識 - Qiita
「Google 検索」の結果ページからキャッシュへのリンクが消えた……どうすれば？／「cache:」検索演算子を覚えておくと便利だぞ！【やじうまの杜】
『キュリー夫人の手』として出回っている画像は本当にキュリー夫人の物なのか｜白山風露
無料でダウンロードできるフォントを書体や見た目のイメージから検索できる「モジザイ」
かくしてGoogleはスパマーに敗北した | p2ptk[.]org
食べログ離れ加速、評価への不信と高コスト…「店探しもグーグルとインスタ」
PCの操作をすべて録画＆文字起こしして過去の操作を丸ごと検索可能にするアプリ「Windrecorder」
クックパッドの検索反映時間を 1/288 にしたシステム改修 - クックパッド開発者ブログ
開発者が知るべきキャッシュ設計でよく遭遇する問題
RAGの実案件に取り組んできた今までの知見をまとめてみた | DevelopersIO
RAGの実装戦略まとめ - Qiita