それでは以下、簡単なデモを含めながら個別に説明していきます。 1. ハイブリッドサーチ こちらは、性質の異なる複数の検索方式（例えばベクトル検索とキーワード検索）を組み合わせて検索精度を向上させる手法になります。 各検索方式単体の場合に比べ、性質の異なる検索方式を組み合わせ、ある種いいとこ取りをする事で、検索性能の向上が期待できます。 今回はBM25でのキーワードベースの類似度検索と通常のベクトル検索を組み合わせていきます。 BM25について簡単に説明しておくと、文脈や文章構造は完全に無視した上で、文書内の単語を全てバラバラに分割し、文書内の各単語の出現頻度と文書間におけるレア度を加味した特徴量を算出します。 つまり、特定の文書内の各単語の数をカウントしてヒストグラムを作れば、似たような文書には同じような単語がよく出るはずなので(同じようなヒストグラムの形になるので)、類似度が高くなる性質
3 年半でまるで別企業？大幅に改善した NewsPicks の DX Criteria を大公開！ - Uzabase for Engineers
こんにちは。NewsPicks CPO／CTO の文字です。先週、仕事が少し落ち着いたタイミングで久しぶりに DX Criteria を測定したので、今回はその結果を大公開しようと思います。 はじめに：NewsPicks は開発者体験に注力しています NewsPicks は、まもなくサービス開始から 10 周年を迎える息の長いサービスです。およそ 10 年前に Uzabase の新規事業として立ち上がり、以降は比較的少人数のエンジニア体制で長らく開発が続けられていました。4 年ほど前からビジネスの多角化に伴いエンジニアを大幅に増員していますが、高成長の裏でシステム面では様々な箇所が老朽化しており、エンジニアを増員してもスケールできない状態に陥っていました（きっと多くの方が想像できる状況だと思います）。 そこで 2020 年に私と高山（現 VP of Data Engineering）が執行
取材・論考・タイトル写真 加藤文宏 はじめに ＡＬＰＳ処理水で騒いで終わったかと思えば、次はあきたこまちＲ──こんな話を、騒動の構造をあきらかにしながら論考しようと思う。 彼らは被害者なのか 原発事故に際して首都圏が不安におののき、瓦礫処理では地方都市でも騒がしい動きがあった。 日本中が動揺していた１０余年前、ふと思った。原発事故にまつわるできごとの「真の被害者」は誰だろうか。 首都圏は放射性物質に怯える必要がなく、各地で焼却した瓦礫も無害なものであった。これらは、不安感や危機感を煽られたことで、本来被害者ではない人々に被害者意識が芽生えて生じた混乱だった。直近のできごとでは、ＡＬＰＳ処理水放出反対運動でも不安感や危機感が煽られた。 原発事故にまつわるできごとの真の被害者は、福島県の人々なのはまちがいない。では、不安感や危機感を煽って被害者意識をつくりだしたのは誰か。 これは既に検証済みだ
第五のUI - ニューロサイエンスとマーケティングの間 - Between Neuroscience and Marketing
Izumo Ooyashiro, Izumo, Japan 1.4/50 Summilux ASPH, LEICA M (Typ 240) 気がついたら年末。半年もブログ更新ができていない*1。その上、最近、色々な場で人に色々聞かれるたびに思うことが随分と多い。澱（おり）のようにためておくのもどうかと思われ、色々書き出すモメンタムになればと少し書けたらと思う。 - 毎週何回か登壇、取材が続いているが、このところ、繰り返し聞かれることがいくつかある。 LLMによって仕事はなくなるんですか？ 今後AIでどんな仕事がなくなるんでしょうか？ OpenAI & Microsoft、Google/DeepMindのglobal big playersがガンガンとやる中、日本はなにかやれることはあるんですか Pivotなどで言われていた物魂電才について教えてください。 今後の学校教育はどうあるべきですか
web3と環境負荷とシン・コモンズ - ニューロサイエンスとマーケティングの間 - Between Neuroscience and Marketing
Munakata Taisha Shrine, Munakata, Japan 1.4/40 Summilux ASPH, LEICA M10-P この間、web3の世界的なメディアであるCoinDeskの日本版を運営するb.tokyo (N.Avenue) のYear End eventがあり、成田修造さん、川崎ひでとさんと登壇した*1。 「Year End Party / CoinDesk JAPAN・btokyo」開催しました！ Special Sessionでは、貴重なご登壇者の皆様のお話を聞きながら、時には笑いもあふれ、2023年の最後を飾る素晴らしい時間となりました。 セッション後のパーティーでは、btokyo… pic.twitter.com/pEIZbV5Vo7— CoinDesk JAPAN (@CoinDeskjapan) 2023年12月21日 「生成AIとweb3が
逆のスケーラビリティ - ニューロサイエンスとマーケティングの間 - Between Neuroscience and Marketing
Parco delle Madonie, Sicily, Italy (September 2023) 1:1.4/35 Summilux ASPH, Leica M10P, RAW 先日書いたエントリで触れた人類がグローバルに抱える大きな2つの課題のうちの一つ、「人口調整局面のしのぎ方」についてもう少し考察してみよう。まずは先般のエントリ*1から一部抜粋する。 この人口調整局面ではかなりの深刻な問題が大量に噴出する。それは例えば、会社がほしいと思った人の数が取れないということから始まり、僕が「風の谷検討」でよく見ている疎空間であれば、郵便局や役所のような基本機能すら人がいなくて維持できなくなるという問題でもある。もっと深刻には、道や橋梁だとか上下水道、食料供給の要である灌漑網、電力網、ゴミ収集と処理のような社会の基盤をなすインフラがこれまでのようには維持できなくなるということであり、あま
今年は伊藤野枝が官憲に虐殺されて100年である。そのメモリアルのイベントも福岡市で行われる。 9月15（金）＆16（土）「伊藤野枝100年フェスティバル」のチケットは3種類。 ・2日間通し券（前売￥3,000） ・16日午後券（講談、講演、座談会＝前売￥2,000、当日¥2,500） ・映画券（映画、矢野氏講演、シンポ、舞台＝￥1,000、当日¥1,200） ※フィールドワークは締め切りました。#伊藤野枝 #福岡市 pic.twitter.com/o8UTnIpPlI — 伊藤野枝100年プロジェクト (@Itounoe100) 2023年8月11日 伊藤野枝に関する本というものは、山のようにある。 本書（堀和恵『評伝 伊藤野枝 〜あらしのように生きて〜』）は出版社（郁朋社）の賞である「第23回歴史浪漫文学賞（創作部門特別賞）」を受賞した。同賞のサイトのトップには「郁朋社は、より本格的に、
ボーアとアインシュタインに量子を読む――量子物理学の原理をめぐって 作者: 山本義隆 出版社: みすず書房 発売日: 2022/9/12 山本義隆さんといえば、毎日出版文化賞と大仏次郎賞をダブル受賞した『磁力と重力の発見』をはじめ、『十六世紀文化革命』や『世界の見方の転換』など、浩瀚な科学史の著作がまず頭に浮かぶ。だから、このたびの『ボーアとアインシュタインに量子を読む』も、量子物理学の歴史の本なのだろうと予想して手に取った。 ところがページを開くなり、その予想はハズレたことを知った。山本さんは「はじめに」の冒頭で、こう宣言していたのだ。 本書は、物理学の書です。記述は歴史的でもあり、時に哲学者の言説にも触れていますが、しかし量子力学史ではなく、ましてや科学哲学の書でもなく、基本的には量子物理学の原理的な理解のための書です。 「あ、そうなんだ。物理学の本なんだ」と、わたしは頭を切り替えてペ
Tshozoです。エントロピーの後日談が8年経っても一向に進んでないのは私が熱力学に向いてないことの証明だと思っております。初学者はもちろん筆者にも何一つわからん概念であるのがいかんのです。それに比べこの本に出ている運動方程式。ma=Fで、mは質量:mass、aは加速度:accelaration、Fは力:force。どの記号もあたりまえで直感的で非常にわかりやすい。しかしよく考えたらエントロピー entropyはS。そもそもＳがどこにもあれへんやんけ、どうしてくれんねん、と思ってちょっとだけ調べたのが以下です。 エントロピーの語源に関わる諸説 紹介 全盛期のクラウジウスの写真 何度見ても頑固そう ドイツ語版wikiより引用 エントロピーはクラウジウスが1865年論文で定義づけた、熱機関において内部エネルギーと同様に扱える熱力学上の状態変数(圧力、温度などの状態がきまれば一意に決定され得る変
教科書：確率過程 - 京大：金澤の雑記帳
確率過程に興味があるB4・M1が読むべき教科書について説明する． 金澤の書いた速習ノート まず読むことを薦めるのは金澤が書いたノートである． 金澤が書いたノート（速習版） この最初の3章までを読めばよい．確率過程のイロハ（確率微分方程式⇔マスター方程式の一対一対応，伊藤の公式）を30ページ以内にまとめている．金澤はこれより外観を速習できるノート・教科書は存在しないと思っている（実際，統計物理界隈では結構読まれているようで，「読みました！」というコメントが結構来る．但し，誤植があるので要注意...）．もしより高度な内容（近似論・漸近論）に興味があれば4章まで通読するか， 金澤が書いたノート（詳細版） を読めばいい．特に詳細版はランジュバン方程式のような確率モデルが，ミクロな力学系からどうやって数学的に導出されるかを書いている（分子運動論の範疇だが）． 英語の標準的教科書 金澤のノートを読めば
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
RAGの実装戦略まとめ - Qiita
社会運動がつくりだした被害者たち 原発事故から宗教、Ｊ事務所まで｜カトウ・フミヒロ
堀和恵『評伝 伊藤野枝 〜あらしのように生きて〜』 - 紙屋研究所
山本義隆著『ボーアとアインシュタインに量子を読む』を読む - HONZ
エントロピーを表す記号はなぜSなのか | Chem-Station (ケムステ)