イントロ「Amazonのこの商品をチェックした人はこの商品もチェックしています」や「YouTubeのあなたへのおすすめ」、「Twitterのおすすめユーザー」などのレコメンド機能は多くのWebサービスに組み込まれております。そのレコメンドによって、ついつい商品をたくさん買ってしまったり、夜遅くまで動画を見てしまった経験はないでしょうか。 この記事では、レコメンドシステムの裏側はどのような仕組みになっているのか、そもそもレコメンドとはどういうものなのかを具体例を交えながら俯瞰できればと思います。レコメンドシステムのアルゴリズムの詳細には触れず、ビジネスにおいてどのような形で実装されているかにフォーカスしています。ネット上に公開されているレコメンドに関するスライドや記事、論文のリンクをまとめましたので、アルゴリズムの詳細などはリンク先の記事でご確認ください。 対象の読者は、自社のサービスにレコ
10/22(金) 追記 この記事で解説している内容について解説する勉強会を開催することとなりました。以下のconnpassよりお申し込みください。 pixiv.connpass.com 10/22(金) 追記 pixivのブックマークについて ブックマークDBの問題について 具体的な対策内容 論理削除廃止・index追加・ブックマークタグのテーブル分割 適応ハッシュインデックスの無効化 アプリケーションコードのリファクタリング・全発行クエリの列挙と見直し 大きな更新処理の非同期化 結果 あわせてよみたい pixivではサービスの成長に伴い、気に入った作品に対して付けることができるブックマークの総数が急速に増加しており、ユーザーの皆様に滞りなくサービスを提供し続けるためブックマークに関するデータベース(以後DB)の負荷対策が必要になりました。 2021年2月より対策を行うプロジェクトを発足し
リファクタリングをする際にソースコードの設計からはじめてはいけない - MonotaRO Tech Blog
どうも、レコメンド商品のシステム開発をしている野川と申します。 私は、2021年にモノタロウに新卒入社し、2022年5月からレコメンド商品の開発に関わり始めました。 モノタロウのレコメンド商品は、下の図の①～④の流れでクライアントサイドで表示しています。大部分の処理はJavaScriptで構成しており、UIもそのHTML部分をjQuery(JavaScript)で作成しています。 図：レコメンド商品表の流れ 入社当時私は、ソフトウェアエンジニアとして、「可読性の低いコードは駆逐するべきだ」「読みやすいコードだけが正義である」「理解しやすいシステムだけが皆を幸せにする」と心の底から考えていました。加えて、「なぜ先輩たちは可読性の低いコードを放置して平気なのか？」と疑問を持つこともしばしばありました。 レコメンド商品周りのコードはまさに可読性の低いコードベースとなっていたため、当事者となった私
東京オリンピック開会式でのゲーム音楽の使用にまつわる議論から、現代における社会の分断について考える──インターネットは民主主義の敵なのか？
東京オリンピックの開会式の入場曲に、『ドラゴンクエスト』や『ファイナルファンタジー』をはじめとするゲーム音楽が使用されたことについて、ネットではその是非を巡って、さまざまな意見が飛び交っている。 ゲーム音楽が、ひいてはゲーム文化が国際的な場で使われる＝認められたことは喜ばしいことであるとか、自分の好きな曲が流れてきて嬉しい！だとか。その逆に、愛するゲーム文化が政治的に利用されるのが許せない、という意見も見受けられる。 まぁ、人それぞれ意見はあってよいと思うし、それを表明するのも自由だと思うので、こうした議論が起こること自体は、とても興味深いことだと感じる。 千駄ヶ谷・新国立競技場 そうした一方で、今回の一連の動きで、個人的に改めて再認識したのが、 今の世の中──少なくともネット上において、本当に「分断」が顕著になってきているなぁ ということかもしれない。 というのも、「ゲームが好き」という
サブスク時代になって限られた小遣いの中でCDどれ買うか迷うっていう検討を経ず「全部聴く」というパワープレイができるようになった中高生が10年後にどういう音楽やってくれるのかがすごい楽しみ— メルセデスベン子 (@nomolk) 2021年3月24日 これが４万回くらいRTされて、「サブスク時代の若者がさぞかし素晴らしい音楽を作るに違いない」という論旨だと受け取られていて、それに対して賛成と反対のリアクションがついている。 ただ自分の言いたかったことは本当はちょっと違って、素晴らしい音楽が生まれるかどうかはわからないと思う。というか、そもそも音楽が素晴らしいかどうかを（個々の曲についてならともかく）特定の年齢層が作った曲だったり、ジャンル丸ごと、というような総体に対して論じるのはあまり意味がないと思う。 良し悪しではなく、単純に「新しい環境で育った世代が今までと違う新しい音楽を生む可能性があ
俺がブログを書くためにどのように本を探し、読んでいるのか。 その過程を赤裸々に晒す。 自分では正攻法だと思っているのだが。 マシュマロへの回答 マシュマロが投げられた。 Link 読書メモについては既に記事化しているので、そちらを読んでもらえればいい。 対して読み方については記事にしていないが、Twitterでは回答できなかった。マシュマロの余白はそれを書くには狭すぎる。なのでブログで書くことにした。 「恋柱の記事」の場合 方法を書くなら具体例を挙げた方がわかりやすい。ここはマシュマロでも例として出された「恋柱の記事」を書いたときの話をする。 記事によって本の探し方・読み方は異なるが、「恋柱の記事」の場合は複合的で、代表的なパターンを網羅している。なのでこの記事について語ればそれでだいたい分かるだろう。 先に言っておくが、これはあくまでも「ブログ記事を書くための読書」の話である。俺だって普
bizspa.jp news.yahoo.co.jp ひと月くらい前、久しぶりにTSUTAYAのリアル店舗に行ったのです。 職場での仕事のあと、別の場所での会議の予定があって、それまで2時間くらい時間が空いてしまったので。 けっこう長い間通っているTSUTAYAなのですが、内装がだいぶ様変わりしていたことに驚きました。 TSUTAYAといえば、レンタルDVD、CDがメインで、最近はレンタルコミックのスぺースが広くなり、ゲームソフトやDVD、CD、文具の販売コーナー、あとは「ショッピングモールの紀伊国屋などの大型書店には及ばないものの、地方都市の郊外では唯一無二くらいの品ぞろえの本」というのが、僕のイメージだったのです。 レンタルDVDコーナーは、いつもけっこう家族連れで賑わっていて、人気作品はほとんど「貸し出し中」、棚を見ていくと「ああ、こんなマイナーな作品でも、ちゃんと貸りて観る人がいる
「どのように開発するか」だけでなく、上流からプロジェクトに携わり「何を開発するか」から検討したい、と考えているエンジニアの方は少なくないでしょう。 一方、実際の開発現場では「WHAT（何を開発するか）」がすでにある程度検討され、エンジニアはその実現方法を具体化させるフェーズから参画し「HOW（どのように開発するか）」を考えるケースが多いのではないでしょうか。 「WHAT（何を開発するか）」を検討するフェーズからボトムアップでアイデアを出し、プロダクトの成長にコミットしたいーー。そんな思いを強く持つエンジニアにとって、理想的な環境とも言えるのがリクルートです。 今回、同社を代表するプロダクトである『SUUMO』のレコメンドAPIのインフラを、機械学習エンジニア（以下、MLE）とデータエンジニア（以下、DE）が連携して改修したプロジェクトを参考に、事業成長にコミットするエンジニアの姿を伝えます
Web系企業での一人目の機械学習エンジニア・データサイエンティストに必要なスキルと経験して思ったこと - Qiita
０、はじめに マッチングアプリで機械学習エンジニアをやっているはやとと言います。今回は「Web系企業での一人目の機械学習エンジニア・データサイエンティストに必要なもの、やって感じたこと」について書いていこうと思います。 「Web系企業で機械学習エンジニアやってみたい！」「組織としてデータ分析や機械学習をやり始めたいけど何からやったらいいかわからない！」という方も多くいるでしょう。 Web系企業での機械学習エンジニア・データサイエンティストの動きはメルカリのブログとか本でよく見ます。しかし、まだ規模があまり大きくない会社における機械学習エンジニア・データサイエンティストの記事や本は一切見当たらず、また、立ち上げ（そんな大げさな言葉を使っていいのか分かりませんがw）の話が書いてあるものは見たことがないです。そのため、もしかしたら日本で初めての記事になるのではないかなと考えてワクワクしながら書い
NHK契約収納費に年間700億円、ネットフリックスの国内売上720億円で考えられること（神田敏晶） - エキスパート - Yahoo!ニュース
KNNポール神田です。 NETFLIXの日本国内での年間売上が720億円 NHKの受信料を回収するための年間費用が700億円 …もしも、ボクがNHKの経営委員会であれば、真剣にNETFLIXに以下のディールを申し込むことだろう…。 まず、事業提携戦略として、コンテンツの相互配信と国内での売上保証を提案する。NHKのテレビ放送でNETFLIXの番組が毎週放送される。NHKオンデマンドだけでなく全アーカイブをNETFLIXで全世界に各言語で配信される…。 何よりも…NHKの受信料を払えば、NETFLIXが無料となるのではないだろうか？ そんな経営モデルを妄想してみたい…。 □米ネットフリックスが日本での制作活動を強化する。（2021年11月）10日、「万引き家族」の是枝裕和監督と映画やドラマを制作すると発表した。アニメでも人気シリーズを今後相次ぎ投入する。 □韓国制作の「イカゲーム」が世界的な
NewsPicksはDX向上に徹底的に注力する - エンジニアを採用し、スケーラブルな開発組織をつくるために - はてなニュース
ソーシャル経済メディア「NewsPicks」の運営・開発を行う株式会社ニューズピックスは、近年、DX（Developer Experience：開発者体験）の向上に注力しています。CPO、CTO、VP of Eと、3名のエンジニアがボードメンバーに名を連ねる同社のDXへのこだわりは徹底しており、「DX向上」は経営における重要項目としても取り扱われています。 背景にあるのは、エンジニア組織をスケールさせる、という強い意思。近年、同社の開発組織は著しく拡大していますが、今後、さらにエンジニアを迎え入れるためには、良質なDXが得られるシステム、組織であることが不可欠だと考えているといいます。では、肝心要のDX向上はどのようにデザインされ、実行されているのでしょうか。 本稿の読者も含め、世のエンジニアの方々に向けて同社のDXをプレゼンテーションし、応募を促進するべく、CTOの高山温さん、そして最前
エイプリルフールに便乗しているサイトまとめ2022年版
By ほしのるる 毎年おなじみのエイプリルフールが今年も始まってしまいました。一体どれが本当なのか、どのあたりが実はウソなのか、どこからどこまでがネタで、もしかして実はマジでやるのではないか？というようにして現実と虚構が融合していき、いろいろな意味で記憶に残る恐るべき一日の始まりです！ ◆エイプリルフール記事が更新される度にすぐ知る便利な方法 GIGAZINE編集部はエイプリルフールに便乗していろいろなことをしている各サイトを4月1日0時～24時まで、文字通り24時間リアルタイム更新し、この記事にまとめて追加し続けます。時間の経過とともに更新内容がどんどん追加されていき、この記事は次第にとんでもない長さになっていきます。「ページを再読み込みして、追加があるかどうか確認するのはギガも無駄に減るし重いし……」という場合は、GIGAZINEのTwitter公式アカウント・Facebook公式アカ
民放の動画配信サービス「TVer」を運営するTVer社（東京都港区）は4月1日、サービスのリニューアルと「TVer ID」の提供を発表した。民放各局のテレビ同時配信では、途中から見始めた視聴者が番組冒頭から視聴できる「追っかけ再生」などの機能を追加する。 4月1日付でPCサイト、スマートフォンアプリ（iOS、Android）、テレビ用アプリ（Android TVなど）をアップデート。操作性の改善やレコメンド機能の強化、TVer IDによるログイン機能などを追加した。 TVer IDの登録は無料。ログインしたユーザーは対応デバイスを跨いで視聴中の番組の続きを再生したり、お気に入りの番組リストをデバイス間で共有したりできる他、放送と同時に配信する番組（リアルタイム配信）では追っかけ再生も使える。ただしテレビ用アプリは同時配信番組の再生に対応していないため、追っかけ再生はスマホやPCでの利用に限
今回は昨日発表されたCoral Capitalさん等からの資金調達におけるプロダクト開発の裏側を書こうと思います。特にソフトウェア領域での新規サービス立ち上げや起業を検討している方に参考になれば何よりです。 本文の前提についてさて、本題に入る前に今回の調達リリース記事にまつわる事実を列挙します。 リリースの内容はこちら 2021年3月: 株式会社HQ創業 2021年5月: kotaroがプロダクトマネージャーとしてジョイン(当時ソフトウェアエンジニアは0人) 2021年9月: トライアルでサービス提供開始 2021年11月: 正式ローンチ 2021年12月: 利用ユーザー200名突破 2022年3月: 利用ユーザーが5倍(1000名)に成長 2022年3月: Coral Capital等からプレシリーズAで約2億円を調達 まだまだ(x100)なのは大前提として、創業1年経過のスタートアップ
はじめに 昨今Webに限らずあらゆる事業領域において、蓄積されたデータの活用は必要不可欠、やっていて当たり前なものになってきているかと思います。これまでこのブログではあまりそういう話題に触れてこなかったこともあり、本稿では改めてドワンゴ教育サービスにおけるデータの活用に関する取り組みについて、概要レベルにはなりますがご紹介したいと思います。 はじめに N予備校における従来のデータの取り扱い 現在の取り組み 本番環境のデータのBigQueryへの蓄積 データ活用のプロトタイピング そのほかのデータ活用に関連する取り組みや展望 N予備校のアーキテクチャ・パイプラインの検討 分析対象のデータ拡充 データの管理体制 機械学習技術等の活用 おわりに We are hiring! N予備校における従来のデータの取り扱い まず従来から行われているN予備校におけるデータ活用の取り組みについて紹介します。現
概要 Spotify APIの楽曲レコメンド機能を使って、DJ Mix用のプレイリストを作成できるWebアプリケーションを開発しました。まずはそのアプリケーションの内容をご紹介します。 実装はTypeScript + Next.jsで行いVercelにデプロイする形にしたところ、非常に高い開発体験が得られました。後半はSpotify APIの使い方を含めて、Next.jsでの実装やVercel上での設定について書いていきます。 できたもの AUTOMISCE - Automate Your Mix with Spotify API 使い方 まず"Sign in with Spotify"ボタンでSpotifyにログインします。次に右側の検索欄で最初の曲を選んでプレイリストに追加します。するとその曲と似たテンポでかつテンション感が少し上の曲が"Upper Tracks"欄に、少し下の曲が"D
メガネブランド「Zoff（ゾフ）」を運営するインターメスティックは11月25日、バーチャル試着サービス「Zoff Virtual Counter （ゾフ バーチャルカウンター）」内で動作するレコメンド機能を発表した。同日からスマートフォンの標準ブラウザなどで活用できる。 レコメンド機能は、インターメスティックの研究、開発機関となるZoff Eye Performance Studio（ゾフ アイパフォーマンス スタジオ、ZEPS）と、ヒトの行動や感情を検知、解析するヒューマンセンシング（行動認識）技術を軸に画像認識アルゴリズムを開発、提供するACES（エーシーズ）が共同で開発した独自AI。 接客経験豊富なZoffスタッフ約720人、約17万件の顔画像評価データを機械学習させたという。 自分の顔写真をアップロードし、希望するメガネのタイプや用途など簡単な質問に答えると、AIが最大18商品を提
前回のエントリでは、 VTuberの岸嶺ミミムさん（Twitter）、思惟かねさん（Twitter）との3人で行った座談会の書き起こしを公開しました。 2021年1月の時点でVTuber業界について語る、全3回の配信でしたが、前回のエントリが「第2回」の配信内容にあたります。 そのエントリも好評だったということで、今度は第3回から長めに書き起こしたいと思います（なお、前回も含めて他のお2人に確認していただいた上で、読みやすく加筆・再構成したテキストになっています）。 どちらも座談会というより、泉がこの配信のために準備した初出のアイディア（他では未発表）をプレゼンしていたパートを切り取っており、「VTuber論」に興味のある人に広まればいいなと思います。 プレゼンのお時間 ～オタクの「好みの構造」とVTuber～ キャラクター論の虚構とリアル VTuber語りと「ぼくら語り」の話 外見と内面
なぜAirbnbは強く、Uberは弱いのか？ーー起業家が知っておくべき4つのネットワークエフェクト - BRIDGE（ブリッジ）テクノロジー＆スタートアップ情報
Image Credit: NFX ピックアップ記事: Why Some Platforms Thrive and Others Don’t 最近、SNSで「起業家が投資家へ事業戦略をピッチする際、答えるべき型がある」というやり取りをしばしば目にするようになりました。結論から言うと「ネットワークエフェクト」「規模のメリット」「ブランド」「高いスイッチコスト」の4つが答えになります。サービスが成長するために、何を武器に戦っていくかはこのどれかを説明すれば片付くというものです。 しかしリサーチをしているなか、強固な「ネットワークエフェクト」を作り上げる4つの公式を押さえておけば、先ほどの全ての回答モデルを満たす筋道が見えると感じました。言い換えればネットワークエフェクト構築戦略さえ誤らなければ、あらゆる競合シチュエーションにおいても他社を負かせる“ディフェンス力”を獲得できると考えます。 そも
この記事は「個人開発 Advent Calendar 2022」10日目の記事です🎄🎅 猫グッズレビューサイトをリリースしたよ 今年、猫グッズのレビューサイト「レビュニャー」をリリースしました🐈🐈🐈 フリーワードで商品・レビューを探したり、レコメンド機能で自分の猫に合ったグッズを発見できるサイトです。 閲覧は登録不要。Googleアカウントで無料登録するとレコメンド機能が使えます✨ リリース後に立ちはだかる集客の壁 伸びない閲覧数と投稿数 レビュニャーはUGC（ユーザー生成コンテンツ）が中心となったサービスで、レビューを閲覧するユーザー・投稿するユーザーの両者がいないと成り立ちません。 そして、投稿が少ないので閲覧数が伸びない・閲覧数が少ないので投稿のモチベが起きない...のデッドロックにハマりやすく、個人開発では難易度が高いジャンルです。 （昨日のhokuさんの記事「個人開発あ
ジェフ・ベゾス退任発表。アマゾン創業者が全従業員に送ったメール【全文訳】 | Forbes JAPAN 公式サイト（フォーブス ジャパン）
米アマゾン・ドット・コムは2月2日、ジェフ・ベゾス最高経営責任者（CEO）が2021年第3四半期に退任し、取締役会長に就任すると発表した。 ベゾスは退任発表時に、アマゾンの従業員向けに一通のメールを送った。Forbes JAPANはそれを全文翻訳し、紹介する。 親愛なるアマゾニアンたちへ 今年の第3四半期に私がアマゾン取締役会長職に移行し、アンディ・ジャシーが次のCEOに就任することを喜んで発表します。 取締役会長のポジションでは、新製品や新規事業にエネルギーと注力を注ぎたいと思っています。アンディは社内ではよく知られており、私と同じくらい長くアマゾンにいます。彼は優れたリーダーになるでしょうし、私は全幅の信頼を寄せています。 この旅はおよそ27年前に始まりました。アマゾンは単なるアイデアに過ぎず、名前もありませんでした。当時、私が最もよく聞かれた質問は、「インターネットってなんですか？」
Apache Solr から OpenSearch に載せ替えた話 - 弁護士ドットコム株式会社 Creators’ blog
検索しているユーザー（イメージ） はじめまして。弁護士ドットコム事業本部でエンジニアをしている狩野です。 弁護士ドットコムのサービスにはいくつかの検索機能があります。主に「みんなの法律相談」「弁護士検索」「弁護士ドットコムニュース」などで使われています。 これらは Apache Solr（以下、Solr）という検索システムで動いていました。 これを OpenSearch という別の検索システムに載せ替えました。 経緯 選定 機能 モジュール AWS サービス 実装 リリース さいごに 経緯 弁護士ドットコムのサービスにはいくつかの検索機能があり、そこで Solr を使っていました。 確認できた限りでは 2013 年から 10 年近くの間、使っていたようです。もっと以前から使っていた可能性もあります。 だいぶ昔の話なので Solr が導入された経緯などは不明ですが、当時の判断としては Sol
シティ・ポップの空を翔ける“一羽の鳥” 〜作曲家・滝沢洋一が北野武らに遺した名曲と音楽活動の全貌を家族やミュージシャン仲間たちが証言。その知られざる生い立ちと偉大な功績の数々 - まぐまぐニュース！
70〜80年代にかけて、「シティ・ポップ」の名曲を数多く生み出した一人の作曲家、シンガー・ソングライターがいました。そのアーティストの名は、滝沢洋一（たきざわ・よういち）。コーラス・グループ「ハイ・ファイ・セット」に名曲『メモランダム』を提供したことで知られる彼の生い立ちは、長い間ベールに包まれたままでした。今年で没後15年を迎える滝沢洋一が歌手や女優、アイドルらに遺した数多くの名曲をはじめ、その音楽活動と生い立ちの全貌を、ご遺族やミュージシャン仲間たちへの取材によって得た証言を元に辿ります。そこから見えてきたものは、「シティ・ポップ」ブームの影の立役者による偉大な功績の数々でした。 ※2021年12月に中文版（繁体字）を公開 プロローグ〜空前の世界的「シティ・ポップ」ブーム。海外から日本へ注がれる“熱い視線” いま、海外の音楽ファンたちの間で、日本の「シティ・ポップ」が大ブームとなってい
AWS Neptuneを使ってニュースパスのコメント機能をGraphDBで実装・運用する方法 - Gunosy Tech Blog
こんにちは。ニュースパスのサーバーサイドエンジニアをしているmanoです。 昨年末から、ニュースパスで記事にコメントができるようになりました。 そのコメントデータを、AWS Neptuneを使ってグラフ構造で保持しています。 今回は、その実装・運用について書きたいと思います。 AWS Neptuneって？ AWS Neptuneは、GraphDBが扱えるAWSのフルマネージドサービスです(詳しくはこちら)。 マスター・レプリカ構成のクラスターを作ることができ、レプリカは最大で15まで並べることができます。 GraphDBとのやりとりについて、Neptuneは「グラフトラバーサル言語」であるGremlinとSPARQLをサポートしているので、このいずれかで実装することになります。私はどちらも「なんじゃそりゃ」というところからのスタートだったので、直感的に書き方がしっくりきたGremlinを使
コミュニティプラットフォームの投稿レコメンド機能を支える機械学習基盤 - Commune Engineer Blog
こんにちは，コミューンで一人目の機械学習（ML）エンジニアとして働いている柏木（@asteriam_fp）です． 入社して５ヶ月ほど経ちましたが，今回漸く最近の取り組みを紹介できそうです．ML エンジニアは僕一人なので，専らの相談相手は ChatGPT 君の今日この頃です笑 はじめに コミューンでは，企業とユーザーが融け合うコミュニティサクセスプラットフォームである commmune を提供しています．今回のブログは先日のプレスリリースでも発表された投稿レコメンド機能を commmune に導入したので，その機能を裏側で支えている機械学習基盤に関する内容を紹介します． エンドユーザーに対して提供される機械学習システムを導入するのは初めての試みになり，まさにゼロからの出発なので，これから徐々に大きく育てて行く予定です！ はじめに コミュニティプラットフォームにおける機械学習の可能性 投稿レコ
こんにちは。はてなブログのサブディレクターをやっている id:AirReader と申します。 さて、2022年3月16日にGoogleよりユニバーサル アナリティクスの終了予定とGoogle アナリティクス 4(以下、GA4)への移行のアナウンスが行われました。GoogleがGA4を推しているのは知っていましたが、これほど早い終了は予想していませんでしたのでとても驚いたのを覚えています。 はてなブログでは、他のブログサービスと比較しても早い段階でブログのGA4に対応いたしました。また、単に対応するだけではなく、はてなブログの解析に最適化したデータを送信する付加価値もつけておりますので、ぜひご利用いただければと思います。 staff.hatenablog.com はてなブログの開発においては、終了の案内以前からGA4を導入して利用しておりました。また、GA4とは別にはてなブログの利用データ
『はてなブログ』が生き残るためには、『TikTok』や『Netflix』に学ぶべき - いつか電池がきれるまで
2020年、なんとなく、ブログが「重い」。 fujipon.hatenablog.com 上記のようなエントリを書いて、「もうオワコン（コンテンツとしての賞味期限が切れていること）なのかな……」と自己暗示をかけてしまっている面もあるのかもしれませんが…… 年の初めということもあって、「ブログというメディアの現状への危機感と問題点」を書いているエントリもいくつか目にしました。 p-shirokuma.hatenadiary.com www.ituki-yu2.net 「他者にまとまった文章で言及して、議論を積み重ねていく文化」がブログのなかでも衰退してきているし、「新たなブログとの出会い」の場もどんどん少なくなってきている。 もっとも、これは僕が長年ブログを続けてきた人間であるからで、どんな趣味の世界でも、初心者や新たに入ってきた人は、どんどん「新しいもの」を求める傾向はあるのです。 でも、
noteのMLチームで主にMLOps関係の開発をしている、むっそです。 先日「読者の行動データを用いたnote記事レコメンドのMLパイプラインツアー」という題材でMLパイプラインについてご紹介いたしました。 今回はnoteの読者の行動データを用いたnote記事レコメンドをリファクタリングした話をしたいと思います。 ※前回の記事をまだ読んでいなくても、この記事は読めます！ ホーム画面の「あなたへのおすすめ」には、ユーザーがよく読む記事に近いレコメンドがされるAWS環境にてnoteユーザーの行動データを用いたnote記事レコメンド機能を提供しております。 リファクタリング前のAWSアーキテクチャリファクタリング前のAWSアーキテクチャ(左側がnoteリポジトリ/右側がMLリポジトリ)行動データを用いたnote記事レコメンドのリファクタリングする前のアーキテクチャを大まかに分解すると、下記のプロ
先日、iPhoneを使い始めてから4年ぐらい使い続けていたApple MusicからSpotifyに乗り換えた。特に明確な理由はないのだけど、一度しっかり使い込んでみたかった。どこかのタイミングでSpotifyをメインで使いたいという気持ちはずっと持っていた。 僕の周囲の音楽好きはSpotifyを使っていることが多い。さらに「あの有名なプレイリストに入った！」と話題になることが多いのはSpotifyだと思う。個人的に「海外のアーティストが、マーケティングツールとして攻略しようとしているサブスクリプションアプリといえばSpotify」という印象も大きかった。さらにレコメンドの機能が強力で、新しい音楽に出会える可能性が高いのではないかと感じたことも乗り換えの要因だ。 実際に使い始めてから2週間ほど経ったが、非常に快適にSpotifyで音楽を聴けている。僕はSpotifyの方が使いやすく、新しい
はじめに 先日、空港送迎のシェア乗りサービスの空席を埋めるための時刻表機能をリリースしました。 構想は昔からあったのですが、ようやく開発を進めて世に出すことができました。 ここではその機能概要やシステムについて説明します。 時刻表について NearMeではユーザー同士がタクシー/シャトルの車両をシェアして乗車するサービスを構築してきました（※同じシェアですが、昨今、ドライバー不足で議論されている"ライドシェア"は一般ドライバーと乗客のマッチングによるもので、それとは異なります）。 特に、空港送迎のような事前に予約するシナリオにおいて運行効率を高める機能を作ってきました。 ユーザー同士のマッチングを最適化したり(参考、参考)、 車両と運行のマッチングも最適化して密な運行セットを作ったりしました(参考)。 また、既にある運行の空席を埋める施策として、時間をずらしたら乗れるというレコメンド機能も
大日本印刷（DNP）は3月26日、テレビ東京が27日にオープンするVR空間「池袋ミラーワールド」で「バーチャルジュンク堂書店池袋本店」を開店すると発表した。“バーチャル書店”の事業化に向け、VR空間での書店の運営方法を探る。 バーチャルジュンク堂書店池袋本店ではVR空間に書店の様子を再現。ユーザーはWebブラウザからアクセスし、3Dアバターを操作して店内を散策できる。紙の本と電子書籍の両方を取り扱う通販サイト「honto」と連携し、VR空間に展示した本から、hontoの販売ページに誘導する仕組みも備える。 今後は、本の検索機能やレコメンド機能、書店員や著名人がおすすめの本を紹介する仕組みを導入する他、本中心のコミュニティー作りを支援する場として、VR空間でイベントやオンラインサロンを開催する予定。 DNPはバーチャルジュンク堂書店池袋本店の運営を通して、現実とVR空間を連動させたプロモーシ
Podcastをサブスクリプションしている場合は、アプリに表示される指示にしたがって、「YouTube Music」に移行するか、サブスクリプションしている番組のOPMLファイルをダウンロードできる。移行期限は7月29日までだ。 本稿筆者の場合は、有料サブスクリプションがなかったこともあり、問題なく移行できた。 Google Podcastは、Googleが2015年から提供しているアプリで、Androidだけでなく、iOS版もある。米国では翌2016年から「Google Play Music」でもPodcastをサポートしていた。Google Play Musicは2020年にYouTube Musicに統合された。 関連記事 「YouTube Music」「YouTube Premium」の総会員数が1億人を超える 「独自性が功を奏した」と責任者のリオ・コーエン氏 「YouTube M
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog Yahoo!不動産のフロントエンド、バックエンドの開発を担当しているアンドン聖司と申します。 Yahoo!不動産では、店舗での対面接客と同等の物件提案が体験できるようなサービスを目指し、AIがアシスタントとなってユーザーの物件探しをお手伝いをしてくれるような機能を提供しています。深層学習やクラスタリングといった技術・手法を用いて、このAIアシスト機能を提供しています。 先日のYahoo! JAPAN Tech Conference 2022の内容をベースに、これらの技術の紹介と、登壇で語りきれなかった内容をご紹介します。 AIアシスト検索とは 従来の不動産サイトでは、ユーザーが条件を設定して絞り込みを行い、物件の検索を行います。（
Wantedly RecSys 2020 参加レポート④ - 推薦システムにおける「Similarity / 類似性」とは ~ Netflix における事例 ~ | Wantedly Engineer Blog
こんにちは、ウォンテッドリーでデータサイエンティスト及びデータを活用したプロダクトのマネージャーを務めている松村です。2020年9月22日から9月26日にかけてオンラインで開催された RecSys 2020 に参加してきました。 こんにちは、ウォンテッドリーでデータサイエンティスト及びデータを活用したプロダクトのマネージャーを務めている松村です。2020年9月22日から9月26日にかけてオンラインで開催された RecSys 2020 に当社のデータサイエンティスト及び機械学習エンジニア５名で聴講参加及び、そのうちの３名が併設の RecSys Challenge の Workshop において口頭発表を行いました。その参加報告を行いたいと思います。 本記事では概要報告に留まりますが、明日からは参加メンバーが実際に発表を聴講して気にな せっかくなので参加メンバーで面白かったセッションを紹介する
レゴ｢子供が求める玩具｣見誤った失敗と教訓
アルゴリズムは｢万能｣ではない まずは5年前のことを振り返りたいと思います。当時、世界中ですべてがアルゴリズムで決定できるような感覚を誰もが持ち始めました。つまり、私たちの買い物や恋愛、出産のタイミングといった選択のすべてをアルゴリズムが正しく決定できるといった感覚です。 しかし、私はアルゴリズムだけでは必ずしも世界を正しく描写することはできないと感じていました。これは、私が哲学を専攻した人間であり、歴史や美術史、心理学といった人文科学を学んできた同僚と一緒に仕事をしてきたからなのかもしれません。 もちろん、アルゴリズムを使うべきではないと言うつもりはないのですが、自分のほうが、自分自身のことをよく理解していると思っていますし、それくらいの自信は持っていたいという気持ちもあります。 実際、アマゾンを利用すると、アルゴリズムによるレコメンドが表示されますが、私は自ら商品を探したほうが、よりよ
サブスク音楽配信を各種試して今は Amazon Music Unlimited に落ち着いてるけどまだ不満はある…… - I AM A DOG
音楽を聴く手段として今やCD等の物理メディアやダウンロード購入よりも一般的になりつつある（？）、サブスクリプション（定額制）の音楽配信サービスについて……。 この2年ぐらい「Apple Music」→「Amazon Music Unlimited」→「Spotify」と各種サービスに課金しつつ数ヶ月ずつ試してみましたが、今は「Amazon Music Unlimited」に落ち着いています。ちなみに各サービスの月額料金や楽曲数に関しては、多少の違いはあれどそれほど大差ありません。 元々Macユーザー＆iPhone使いで手持ちの音源のうち2万曲以上をiTunesに取り込んでいることもって、「Apple Music」が最も相性がいいかと思ったのですが、年々使いにくくなる一方のiTunesとiOSミュージックアプリ、さらに元々持っていたPCローカルの音楽データとの兼ね合いもあって早々に脱落（ロー
例外はたくさんあるのでこちらの表はあくまでも参考です。 バッチ更新の場合はcrontabやAirflow、Rundeckなどのワークフローエンジンが使えます。 一方、リアルタイム更新ではAWS KinesisやGCP pub/sub等を活用したり、Apache Beamなどを用いたりしてデータパイプラインを構築することがあります。 アイテムの特性と検索時のクエリ 検索対象となるアイテムの特性と検索する際にどのようなクエリが想定されるかを考えます。 全文検索エンジンを使っているので、基本的にはテキストにより表現されているとは思いますが、どのようなフィールドが存在するか、テキスト以外の検索項目などを洗い出します。 クエリに関しても基本は「キーワード」ですが、整理したアイテム情報に対してどのようなクエリで問い合わせが可能かを考えます。 システムとして「誰」が検索結果を取得するか、検索結果をどの程
【顧客体験】CX（カスタマーエクスペリエンス）を向上させる事例とは！
【顧客体験】CX（カスタマーエクスペリエンス）とは！？ 顧客の商品・サービス購入や利用にかかわるさまざまな体験を価値として提供するところに、マーケティングの方向性を設定しようという考え方です。 ・商品やサービスを購入する前には「商品やサービスの認知体験」 ・商品やサービスの購入時には「商品やサービスの商品評価」 ・商品やサービスの購入後には「商品やサービスのメンテナンスサポート評価」 サントリー運営の「TOUCH-AND-GO COFFEE」 ワタクシもカスタマイズしたいと思うのはやはりコーヒー。 サントリーが面白いお店をOPENしています。 ※2022年現在はCLOSEしています。 なんとスマホから自分好みのコーヒー、カフェラテをオーダーできます。 1, コーヒーorラテを選択 2, ミルク（通常or低脂肪or無脂肪）、 3, 甘さ（無糖orひかえめor通常） 4, フレーバー（無しor
米Google傘下のYouTubeは9月26日（現地時間）、2015年から提供している「Google Podcasts」アプリを2024年後半に終了し、YouTube MusicのPodcastタブに移行すると発表した。 米国版YouTube Musicではこの4月からPodcastsを聴けるようになっていた。この機能をグローバルに拡大する計画だ。Google Podcastsの終了はその一環。 YouTubeは公式ブログで、米国の週当たりのPodcastユーザーの利用アプリの調査で、その約23％が最もよく使うサービスはYouTubeだと答え、一方、Google Podcastsはわずか4％だったと説明した。 今後数週間から数カ月をかけてフィードバックを集め、Google PodcastからYouTube Musicへの移行を可能な限り簡単にするための移行ツールを準備するとしている。 この
Amazon SageMaker の体験ハンズオン動画とQAを公開しました | Amazon Web Services
Amazon Web Services ブログ Amazon SageMaker の体験ハンズオン動画とQAを公開しました 先日 (2019/5/17) 開催しました 「Amazon SageMaker 機械学習エンジニア向け体験ハンズオン」の動画および資料を公開しました。当日、参加者の皆様から多数頂いた QA についても掲載しています。 Amazon SageMaker は、データサイエンティストやエンジニアが効率よく機械学習を進めるために、 AWS が提供するマネージドサービスです。この動画はSageMakerの基本的な使い方を体験できる1時間のハンズオン動画となっており、動画を見ながら実際に手を動かすことで、SageMakerの利用法を効率よく理解することができます。これからSageMakerを利用して機械学習に取り組む際にはAWS Black Belt オンラインセミナーと合わせて
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
これから推薦システムを作る方向けの推薦システム入門｜masa_kazama
pixivのブックマークに関する負荷対策をしました - pixiv inside
サブスク時代のリスニング環境と、そこから生まれる音楽の話＆雑感 - nomolkのブログ
ブログ記事を書くための読書について - 本しゃぶり
『TSUTAYA』という『平家物語』 - いつか電池がきれるまで
データエンジニアが事業成長をリードする。『SUUMO』のレコメンドAPIはこうして進化した - はてなニュース
TVer、リアルタイム番組の「追っかけ再生」可能に 民放の「公式テレビ配信サービス」へ
SaaSなのにほぼノーコードで2億円調達した話｜Kotaro Harada | HQ
N予備校のデータ分析基盤構築に向けた取り組み - ドワンゴ教育サービス開発者ブログ
Spotify API + Next.jsで作る選曲支援Webアプリ - Qiita
似合うメガネを「Zoff」のAIがお勧め、バーチャルで試着--17万件の顔画像を学習
オタク世界の◯◯図で見るVTuber【配信書き起こし】 - izumino’s note
個人開発をリリースして考える「MVPってなんだろう」
はてなブログとGA4とデータ活用 - Hatena Developer Blog
読者の行動データを用いたnote記事レコメンドをリファクタリングした話｜むっそ
Apple MusicからSpotifyに乗り換えて2週間たって感じる違いと、今後の活用方針
「シェア乗り時刻表」について - NearMe Tech Blog
DNPが「バーチャルジュンク堂」オープン 書店の新しい形を探る
「Google Podcast」アプリ、日本でも6月23日で終了 移行は7月29日までに
「新しいおうち探し」のためのAIアシスト検索 〜 Yahoo!不動産の技術紹介
新規サービスの検索システム立ち上げ時に考慮すること - Qiita
Google Podcasts、2024年に終了へ YouTube Musicに統合