こんにちは、メルカリの生成AIチームで ML Engineer をしている ML_Bear です。 以前の記事[1]では商品レコメンド改善のお話をさせていただきましたが、今回は、大規模言語モデル (LLM) やその周辺技術を活用して30億を超える商品のカテゴリ分類を行なった事例を紹介します。 ChatGPTの登場によりLLMブームに火がついたということもあり、LLMは会話を通じて利用するものだと認識されている方が多いと思いますが、LLMが有する高い思考能力はさまざまなタスクを解決するためのツールとしても非常に有用です。他方、その処理速度の遅さや費用は大規模なプロジェクトでの活用にあたっての障壁となり得ます。 本記事では、こうしたLLMの課題を克服するためにさまざまな工夫を施し、LLM及びその周辺技術のポテンシャルを最大限に引き出して大規模商品データのカテゴリ分類問題を解決した取り組みについ
どういうこと?/TL;DR AWS → Cloudflareに移行したら費用が99%削減できました。 対象読者 今CloudFront + S3で構築しているけど転送量に困っている人 Cloudflare R2を検討している人 (CloudFrontとCloudflareをよく間違える人) はじめに 元々、動画CDNの構築はCloudFront + S3で構築していました。 この構成の場合、課金ポイントは主に三つあります。 CloudFrontのアクセス数に対する課金: そこそこ(多量ではない) S3の保管に対する課金: 200GB程度 CloudFrontの転送量(Egress)に対しての課金: 数TB そのため、毎回イベントごとにかなり費用がかかる状態でした。 動画の数もアクセス数もそこそこではあったのですが、動画特有の転送量が非常に多い… そういった状態でした。 導入前夜 この時はち
自民党で参議院北海道選挙区選出の長谷川岳議員の言動について、道の複数の幹部職員が威圧的に感じていたことが聞き取り調査で明らかになり、長谷川議員は「無自覚だったと反省している。ストレートすぎるところがあった。抜本的に変えていきたい」と釈明しました。 自民党の長谷川岳参議院議員の言動について、北海道による幹部職員への聞き取り調査で、政策などの説明の際に厳しいことばづかいなどがあり複数の職員が威圧的に感じると答えたほか、説明のために1年間で20回以上、東京などに出張した職員もいて、鈴木知事は5日、対応を改めるよう申し入れました。 これを受けて長谷川氏は6日、札幌市内で記者団の取材に応じ「表現方法が無自覚だったと心から反省している。正しいことをストレートに発言するところが自分のとりえだと思っていた反面、ストレートすぎるところがあった」と釈明しました。 そのうえで「強い表現をすることはよくあったので
はじめに こんにちは、推薦基盤部の与謝です。ECサイトにおけるユーザの購買率向上を目指し、レコメンデーションエンジンを研究・開発しています。最近ではディープラーニングが様々な分野で飛躍的な成果を収め始めています。そのため、レコメンデーション分野でも研究が進み、精度向上に貢献し始めています。本記事では、ディープニューラルネットワーク時代のレコメンド技術について紹介します。 目次 はじめに 目次 パーソナライズレコメンドとは 深層学習より前の推薦手法 協調フィルタリング Matrix Factorization SVD(Singular Value Decomposition) Factorization Machine 深層学習を使った推薦手法 ニューラルネットワーク推薦手法に対する警鐘 Recboleプロジェクト Recboleプロジェクトを用いた各アルゴリズムの検証 General Re
こんにちは。オモコロ編集部です。 この記事は…… クイズ嫌いの男が…… クイズに挑む記事です。よろしくお願いします。 <この記事に出てくる人> オモコロ副編集長。クイズが嫌い。 その他のオモコロ編集部員。 ある日のオモコロ会議室にて── ネタ出し会議するよ〜 よしゃよしゃ 今回の案件は「クイズRPG 魔法使いと黒猫のウィズ」さんです。今年で11周年らしいので、それをPRする記事のネタ出しをしていきましょう 黒猫のウィズってクイズ×RPGのゲームですよね。もう10年以上もやってるんだ クイズに答えながらクエストを進める冒険ファンタジー 単純にクイズと関連した企画は何かできそうですね オモコロ編集部内でクイズ王とか決めてみる? 早押しボタンが富士山頂にある……みたいなクイズ大会できませんかね? 東京で出題されて、ボタンを押すためだけに登山するとか いいですね。早押しボタンが海中にあってもいいか
2024.03.15 福岡フロントエンド勉強会 #1
小学校の遠足中に1年生だった女児(8)が茶の購入を要望したのに教諭が認めなかったため熱中症で救急搬送されたなどとして、女児と両親が大阪府八尾市を相手取り、慰謝料など220万円の損害賠償を求める訴訟を大阪地裁に起こしたことが分かった。27日に第1回口頭弁論があり、市側は請求棄却を求めた。 訴状などによると、遠足は令和4年5月末にあり、往復で計約2時間歩く行程があった。母親が前日に体力面の不安から欠席したいと伝えたが、担任教諭から促されて参加を決めた。ただ、水筒の茶が足りない場合は購入を認め、女児が異常を訴えた場合は母親に連絡するよう要望した。 しかし当日、女児が教諭に「お茶を買わせてください」と伝えても校長の判断で認めず、めまいを覚えて「ママ呼んでください」と伝えても聞き入れなかった。下校の際に迎えに行った母親が高熱に気づき、女児は救急搬送されて熱中症と診断。女児側は学校側に「安全配慮義務違
女性ジャーナリストの伊藤詩織さんを侮蔑するX(旧ツイッター)の投稿に「いいね!」を押したとして、2月8日に最高裁で名誉毀損が認定され、55万円の賠償命令が確定した自民党の杉田水脈・衆院議員(56)。安倍派(清和会)きっての“炎上女王”として数々の騒動を起こしてきた杉田氏は、政界を揺るがすパーティー券の裏金問題でも、派閥からの収入1564万円を記載していなかったとして政治資金収支報告書を訂正したばかり。 だが、彼女の「政治とカネ」の疑いはこれだけではなかった。ジャーナリストの大島佑介氏がレポートする。 * * * 兵庫県宝塚市伊孑志。日本歌劇の聖地・宝塚大劇場周縁の人口約5000人の住宅街の一角に、杉田氏の政治団体『杉田水脈 なでしこの会』の事務所は所在している。 1階部分がテナント、2、3階部分が住居となっている杉田氏の事務所所在地のマンションを訪ねると、テナント部分に所在するはずの事務所
育成就労制度が新たに導入されれば永住許可を得る外国人の増加が見込まれるとして、出入国在留管理庁は、故意に税金の未納や滞納を繰り返すなどした場合、資格を取り消せるように在留資格制度を見直す方針を固めました。今の国会に関連する法案を提出する見通しです。 政府は、技能実習制度を廃止して新たに育成就労制度を導入すれば、永住につながる特定技能への移行を促すことになり、永住許可を得る外国人の増加が見込まれるとしています。 一方、永住者になっても税金や社会保険料を納めなかったり、資格を取り消されない、窃盗など1年以下の懲役や禁錮にあたる罪を繰り返したりするケースがあるということです。 このため出入国在留管理庁は、故意に税金や社会保険料の未納や滞納を繰り返した場合や、窃盗などの罪で1年以下の懲役や禁錮になった場合は永住許可を取り消すか、ほかの資格に変更できるように在留資格制度を見直す方針を固めました。 ま
多くの人が参加する自民党安倍派の政治資金パーティー=東京都港区で2023年5月16日午後6時49分、宮武祐希撮影 自民党派閥の政治資金パーティー裏金事件を巡り、脱税の可能性が指摘されている。毎日新聞は17、18の両日、全国世論調査を実施し、問題のあった自民党議員を国税当局が調査すべきだと思うか尋ねたところ、「調査すべきだ」が93%を占め、「調査する必要はない」(3%)を大きく上回った。「わからない」は4%だった。 自民党による党所属国会議員らを対象としたアンケート調査では、2018~22年にパーティー券収入のキックバック(還流)や中抜きに関する政治資金収支報告書への不記載や誤記載があったのは85人で、総額は計5億7949万円に上った。政治団体が寄付やパーティーで集めた政治資金は原則、非課税だが、不記載分に関し、野党などは議員個人の「雑所得」とみなして所得税法上の課税対象とすべきだと主張して
内閣支持16.9%、最低更新 不支持初の6割台―時事世論調査 2024年02月15日16時31分配信 【図解】岸田内閣の支持率推移 時事通信が9~12日に実施した2月の世論調査によると、岸田内閣の支持率は前月比1.7ポイント減の16.9%となり、発足以来の過去最低を更新した。不支持率は同6.4ポイント増の60.4%で、初めて6割を超えた。 連座制、必要82.6% 政策活動費「使途公開し存続」5割―時事世論調査 支持率は、2012年12月の自民党の政権復帰後で最低。「危険水域」とされる2割台以下は7カ月連続で、直近3カ月は1割台に落ち込む。一方、不支持率が6割台に達するのは安倍内閣の20年5月以来。自民党派閥の裏金事件などが影響したとみられる。 自民党の政党支持率は前月比1.7ポイント増の16.3%。過去最低を記録した1月から微増したものの、4カ月連続で1割台と低迷が続いている。 自民党は先
ver.1.3 なかなか忘れられがちな過去の不祥事。思い出せるように一覧にまとめました。選挙の時などお役立ていただければ幸いです。 選挙区別一覧はこちらから
ソーシャル経済メディア「NewsPicks」で推薦や検索などのアルゴリズム開発をしている北内です。Pythonは頻繁に新機能や便利なライブラリが登場し、ベストプラクティスの変化が激しい言語です。そこで、2024年2月時点で利用頻度の高そうな新機能、ライブラリ、ツールなどを紹介したいと思います。 この記事では広く浅く紹介することに重点を置き、各トピックについては概要のみを紹介します。詳細な使用方法に関しては各公式サイト等での確認をおすすめします。なお、本記事ではOSとしてmacOSを前提としています。 環境構築 Pythonの環境構築はpyenvとPoetryの組み合わせがもっとも標準的でしょう。 以下の手順でpyenvとPythonをインストールできます。 brew install pyenv # Bashの場合 echo 'eval "$(pyenv init -)"' >> ~/.ba
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く