pixivの全文検索基盤とElasticsearchによるリプレイス - pixiv inside
まもなく17周年を迎えるpixivでは、長年にわたり作品などの全文検索基盤としてApache Solrを使用してきました。 しかし、サービスの規模が拡大する中で、従来の基盤に問題が生じていました。これを受けて、pixivでは全文検索基盤のリプレイスを実行しました。 今回のリプレイスにより、pixivでは検索結果の更新反映時間や検索APIのレイテンシが大幅に短縮されました。また、今後のスケールに対応可能になり、新機能開発においても全文検索が容易に利用できるようになりました。 本記事では、pixivの全文検索基盤の歴史や、今回オンプレミス環境でElasticsearchクラスタを構築し、リプレイスを完了するまでの取り組みについてご紹介します。 こんにちは。pixivのnamazuです。最近、私たちのチームで進めていたpixivの全文検索基盤のリプレイスが完了しました。この機会に、pixivの全
Lookerの埋め込みダッシュボードを社外提供する上での課題と解決策 - pixiv inside
アドプラットフォーム事業部 アドプロダクト部 データチームでアナリティクスエンジニアをしているucchi-です。普段は主に、pixiv Adsという広告ネットワークのデータ周りを開発しています。 ads.pixiv.net 今回は、pixiv Adsで採用している、Lookerの埋め込みダッシュボードについて紹介します。 はじめに ピクシブでは全社的にLookerを使用しています。Lookerを使うことで、BigQueryに保存されている品質の高いデータを気軽に分析することができ、社内の仮説検証や意思決定に役立っています。 一方で、Lookerは社内の分析用途だけではなく、社外へのデータ提供にも活用できます。 具体的な手段はいくつかありますが、pixiv Adsでは、「シングルサインオン（SSO）組み込み」という形式で、クライアント向けの広告管理画面にLookerのダッシュボードを埋め込ん
ピクシブにおける不当な目的での作品取得行為に対する対策技術について - pixiv inside
CTOのharukasanです。 pixivをはじめとするピクシブが運営している各サービスにおいて、ユーザーの投稿した作品を不当な目的を持って取得する行為から守ることは、プラットフォームとして重要な責務のひとつであるとピクシブは考えています。これまでもピクシブでは、作品が不当な目的で大量に取得されないよう機械的なクローリングを検知し、ブロックするために様々な手段を講じてきました。この記事では、現在行っている対策と、今後実施していくために現時点で取り組んでいる施策についてご説明します。 English version is available here これまでに実施している不当な目的での作品大量取得への対策について ピクシブでは不当な目的で作品を大量取得されることを防止するため、基本的な対策に加え、様々なソリューションを導入しています。ここでは特徴的な技術についていくつかの例を紹介します。
BOOTH 3Dモデルカテゴリ取引白書 - pixiv inside
こんにちは、3Dビジネス室のwatasukeです。 3Dビジネス室は3Dモデルクリエイターの創作活動を支援することをミッションにしたチームです。 この記事では、その一環としてBOOTHの「3Dモデル」カテゴリに関する取引データをかいつまんで公開いたします。 3Dモデルカテゴリの取引推移 まず、3Dモデルカテゴリの取扱高と注文件数の推移をご覧ください。 取扱高、注文件数ともに急速に右肩上がりに伸びていることがわかります。 2022年の3Dモデルカテゴリの取引実績は、取扱高が約24億円、注文件数が約148万件でした。 それに比例して注文者数も増えており、市場が拡大していることが見て取れます。 2022年における3Dモデルカテゴリの注文者数は約12.9万人でした。 3Dモデルカテゴリの伸びた要因 3Dモデルカテゴリの取引は、内部要因と外部要因それぞれに支えられて伸長したと認識しています。 内部要
pixivをNext.jsでリプレイスする取り組みをご紹介します。 - pixiv inside
pixivではNext.jsを用いたフロントエンドのリプレイスプロジェクトを2022年3月末より行っており、現時点(2022年8月)でリクエスト機能をNext.jsにてリプレイスしました。 今回のpixiv insideではピクシブ株式会社で働くエンジニアの取り組みとして、pixivのフロントエンドをNext.jsでリプレイスする取り組みについて実際に取り組んだメンバーからご紹介します。 まずは皆さんの自己紹介をお願いします namazu: pixivのウェブ領域に関するテックリードを担当しているnamazuです。今回のNext.js化プロジェクトではPjMやNext.jsのホスティング回りの実装を担当しています。 shu: 2022年3月に入社したshuです。Next.js化ではフロントエンドの設計、実装を担当しています。 mog: エンジニアとしてアルバイトをしているmogです。Nex
ピクシブのこれからについて、COOとCTOから皆さまへお伝えします（後編） - pixiv inside
ピクシブでは企業として掲げているミッション・ビジョン・バリュー達成のため、毎年7月は全社員が一堂に会し、取締役以下全マネージャーより全体方針を踏まえた事業部単位の目標を共有する時間を設けています。 本日はそこからピクシブのテックビジョンにスポットライトを当てつつ、COOとCTOの対談形式で会社の未来について前編・後編に分けてお話させていただきます。 今回は後編記事となりますので、先に前編記事（https://inside.pixiv.blog/2020/09/23/183040）をご覧ください。 ushio : 前回の対談では、ピクシブ株式会社として「どのような姿を目指して」「どのように舵を切って成長していくのか」CTOとの対談形式で詳細について語ってきましたが、引き続き事業目標とそれに伴う技術・開発方針について話していきたいと思います。 harukasan：よろしくお願いします。前回は全
AWS re:Cap for pixiv - pixiv inside
こんにちは！ コンテンツ事業部のテックリードでPalcy*1・pixivコミックのサーバーサイドを担当しているninoです。AWSさんはAWS re:Invent 2019で発表された多くのサービスを振り返るAWS re:Capという勉強会を開催されているのですが、このたび弊社向けにフォーカスした内容で開催してくださったので、その紹介をしようと思います。 AWS re:Invent 2019への参加 AWS re:Invent 2019とは、AWS最大のグローバルカンファレンスで多くの新サービスが発表されます。 ピクシブでは主にPalcyでAWSを使っているので、私とCTO（当時は技術開発本部長）のharukasanが参加してきました。弊社社員が参加するのは今回が初めてです。 参加にあたって、弊社を担当していただいているAWSソリューションアーキテクトの小宮さん、アカウントマネージャーの植
2020年注目の技術、AMP Storiesをpixivに実装しました - pixiv inside
pixivでプロダクトマネージャーをしているmu-koです。 pixivでAMP Storiesを作成し、2019年末にリリースしました。今回はAMP Storiesの概要をご紹介します。 開発者向けの記事は別途公開予定です。 Click here for English version. pixivとは pixivはクリエイターがイラスト・マンガ・小説を投稿し、声援をもらうことができるサービスです。 2019年9月時点で登録ユーザーは4,000万ユーザーを超え、投稿作品数は8,500万作品あります。また、最近は日本以外の国からの登録が増え、今では約70％を占めています。 AMPやAMP Storiesについて AMP（Accelerated Mobile Pages）とは AMPとは、Googleが中心となって作られた、ウェブサイトを高速に表示するためのフレームワークです。 AMPコンテ
pixivに脆弱なパスワードで登録できないようにしました - pixiv inside
図1: 脆弱なパスワードを入力した場合のエラー画面 こんにちは、pixiv開発支援チームのmipsparcです。 パスワード、もしかして使いまわしていますか? 複数のサービスで同じパスワードを利用していると、「パスワードリスト型攻撃」によって不正アクセスの被害を受けてしまうかもしれません。 パスワードリスト型攻撃の被害にあわないためには、ブラウザやパスワード管理ツールで自動生成された安全なパスワードを利用するのが好ましいです。 しかし、実際には多くの人が「使いまわしたパスワード」や「簡単なパスワード」(以下、脆弱なパスワード)を利用していますし、啓蒙活動にも限界があります。 pixivではサイバー攻撃への対策を複数とっていますが、根本的な対策のひとつとして、脆弱なパスワードを新しく設定できないようにしました。 脆弱なパスワードの判定方法 脆弱なパスワードの利用はどのように防ぐことができるで
PIXIV TECH FES.のLPを支えるCSSアニメーションテクニック - pixiv inside
※本記事に出てくるアニメーションは全てCSSで作られています はじめまして、新卒エンジニアの yui540(@yui540)です。普段は、pixivFANBOXというサービスのCSSエンジニアをしています。 今回は、私がコーディング&ページ演出のアニメーションを担当させていただいたPIXIV TECH FES. の LP(第一弾)の CSSアニメーションの実装方法を一部解説します。 第一弾 conference.pixiv.co.jp 第二弾 conference.pixiv.co.jp とその前に、「PIXIV TECH FES.って何？」という方もいると思うので、簡単にご説明します。 PIXIV TECH FES. は、私たちピクシブのエンジニアが普段からお世話になっている方や、 お話ししてみたい方をお招きして、サービス開発で得た技術的知見とピクシブの未来についてお話しするテックカンフ
【edvakf×harukasan対談】ピクシブCTO交代の舞台裏と彼らの描く未来 - pixiv inside
2020年1月1日より、ピクシブ株式会社のCTO（最高技術責任者）が交代いたしました。 www.pixiv.co.jp 今回は、2016年12月よりCTOを担ってきた高山と、新しくCTOとなる道井に、今後の抱負などを伺いました。 まずは、お二人の自己紹介をお願いします。 高山 高山（@edvakf）です。ピクシブに入社したのは2012年3月で、CTOは2016年12月から3年ほど務めていました。 道井 このたびピクシブ株式会社CTOに就任しました、道井（@harukasan）です。2012年4月に新卒としてピクシブに入社しました CTO引き継ぎの背景 早速ですが、CTO退任の背景を教えてください。 高山 ピクシブでは約8年働いたのですが、信頼してもらえてずっと大きな役割を任せてもらえました。ただ、長く務めているとどうしても居心地の良い環境に甘えてしまうところもあり、新しい場所でもっと自分の
ピクシブ社員がいきいきと働ける「仕組み」とは？ 制度・福利厚生をご紹介！ - pixiv inside
こんにちは。17新卒のhnpnです。 私はピクシブに新卒で入社したのですが、友人と会社の話をすると、弊社独自の仕組みが多数あるように感じています。 そこで今回は、人事として中途入社されたmurapiさんに、ピクシブならではの制度や福利厚生についてインタビューしました！ 本日はよろしくお願いします。まず自己紹介をお願いします。 murapiと申します。中途でピクシブに入社しております。前々職では人材紹介会社にて採用支援、前職では人事コンサルや研修企画の仕事をしていました。その経験を活かして、ピクシブでは採用から研修、労務まで、人事全般の業務に携わっています。 中途入社されて、他社と比較して感じた「ピクシブらしさ」はありますか。 他社と比較して、圧倒的に自由度が高いところがピクシブらしさだと思います。 ルールはありますが、社員同士の心理的な距離が近いため、各人がそれぞれ思ったことを自由に言いや
カテゴリをつくるということ、居場所をつくるということ - pixiv inside
クリエイターによる創作の総合マーケット『BOOTH』のPMをしているwatasukeと申します。 2019年にBOOTHでは「ドール」「ぬいぐるみ」「ソフトウェア」「TRPG」の4つのカテゴリを追加しました。 その結果「カテゴリをつくるということは居場所をつくることだ」と感じた話をします。 まずはそれぞれのカテゴリの追加前後の取引推移をご覧ください。 ※グラフは「カテゴリが対象とするような作品群全体の取引がどう推移したか」という観点で作成したため、特定のカテゴリが設定されている作品だけではなく関連するタグが設定された作品の取引も対象にしています。TRPGカテゴリが追加されるまでは「テーブルゲーム」カテゴリにおいて「TRPG」タグがつけられてTRPG関連作品が出品されるといったことが多々あったためです。 伸び方に違いはあるものの、どれもカテゴリを追加してから購入数も販売ショップ数も伸びている
採用は社員みんなで エンジニア採用チームが取り組みについて語ります - pixiv inside
こんにちは、ピクシブ株式会社で採用を担当している人事のkamikoです。 本日は日頃エンジニアの採用について取り組んでいるピクシブの「採用チーム」について、皆さんにお話させていただきます。 ブログの最後に、現在募集しているエンジニアの職種についてご案内させていただきます。ご興味をお持ちいただけましたら、是非エントリーください！ ピクシブの採用チームとは 現在ピクシブでは中途・新卒共に技術職とビジネス職の採用を行なっています。 人事部と現場で働いている社員で構成された採用チームを結成し、採用要件定義のような戦略検討から、具体的な施策、面接対策やマニュアルの整備などの戦術面まで、多岐に渡り企画・立案・実行しています。 エンジニア職の新卒採用チームは、人事部以外にエンジニア5名がチームメンバーとしてジョインしてくれており、長年採用に携わっているベテラン社員だけでなく、今年4月に入社した新卒社員も
WebRTC ♥ .NET ー WebRTCの.NETバインディング - pixiv inside
こんにちは、ねこまんまです。 先日、ピクシブはWebRTCプロジェクトのフォークを公開しました。このフォークにはオリジナルのプロジェクトには含まれていないいくつかの変更が施されていますが、その中でも大きな機能追加である、WebRTCの.NETバインディングを紹介します。 pixiv/webrtc on GitHub このバインディングを用いることによって、Unityや.NET Framework、Monoといった.NETプラットフォームで映像や音声のライブ配信、受信が可能になります。 Linux上のFirefoxで、SoraのJavaScript SDKを利用して配信したディスプレイの映像を、同機上のUnity Editor、iOS、Androidのプレイヤー上で受信している。Unity上のプログラムはそれぞれ同じものを利用している。SFUとしてImageFlux Live Streami
DMARC+GASによる大規模メールトラフィックの監視 - pixiv inside
こんにちは、pixiv開発支援チームのmipsparcです。 ピクシブからは月に2000万通程度のメールが送信されています。しかし、送ったメールが本当にユーザーに到達しているかという不安がありました。また、pixivになりすましてメールを送信している悪意のある人がいないかというのも重要な関心事です。 すでにバウンスメールなどはモニタリングしていましたが、追加の対策としてなりすましメール防止に使用されるDMARC(RFC 7489) を使って監視する仕組みをGoogle App Script(GAS)で作りました。 DMARCとは、保有しているドメインがユーザーに見える送信元メールアドレス header-from に設定されたメールについて RFC5321 from (envelope-from; 受信したメールのReturn-Pathに同じ内容が書かれている)と header-from が
iOSDC Japan 2019にピクシブのエンジニアが3名登壇して、ブース展示もしました。 - pixiv inside
みなさんこんにちは、FromAtomです。 2019年9月5日（木）〜9月7日（土）に開催されたiOSDC Japan 2019において、ピクシブから3名のエンジニアが登壇しました！ この記事では、それぞれの発表資料に発表者からの一言コメントを添えて紹介したいと思います。 スクリーン配信機能の実装が大変だったので知見をお伝えします FromAtom： iOSDC Japan 2019の露払い枠でとても緊張しましたが、みなさんが乾杯にノッてくれたので、とても楽しかったです。去年は複数のライブ映像を同期再生するのが大変だったので知見をお伝えしますという題で視聴側の話をしたので、今年は配信側の話でした。なかなか世の中に知見がないReplayKitやUpload Broadcast Extensionについて実装開始前に知っておくと便利な情報をまとめることができたと思います。将来スクリーン配信機能
pixivで検索エンジン向けにDynamic Renderingを実装した話 - pixiv inside
English version: Implementing Dynamic Rendering for Search Engines on pixiv.net - pixiv inside pixivでプロダクトマネージャーをしているmu-koです。 大規模サービスのpixivで検索エンジン向けにDynamic Rendering（ダイナミックレンダリング）を2019年から実装し始めました。Dynamic Rendering実装の経緯や検証方法、注意点などをご紹介します。 pixivとは pixivはクリエイターがイラスト・マンガ・小説を投稿し、声援をもらうことができるサービスです。 2019年9月時点で登録ユーザーは4,000万ユーザー超、投稿作品数は8,500万作品あります。また、日本からのアクセスは約60％で日本以外の国からのアクセスが約40％です。 日本国外のユーザーが作品を簡単に
GitLab令和最初のリプレイス。フルコンテナ化ポスグレ移行 - pixiv inside
こんにちは、sue445です。 先日社内で使ってるGitLabのリプレイスをしたのでその辺の話をしたいと思います。 リプレイスの内容 今回のGitLabリプレイスでは主に下記を行いました。 サーバ移設に伴いURL以外全部変えた レガシーな環境で運用されていたGitLabを全てDockerコンテナに載せた MySQLからPostgreSQLに移行 以上を1時間弱のメンテでやりきった 構成 ざっくり書くと、SSL終端のフロントサーバのみ同じで、それ以外のバックエンドを全部変えました。 旧 APサーバ Debian Wheezy CPU: Intel Xeon E5-2640v2 * 2 Memory: 40GB Disk: 64G + 512G MySQL兼Redisサーバ Debian Wheezy CPU: Intel Xeon X3430 Memory: 8GB Disk: 256G M
チームの価値創造を支えるエンジニア職組織「エンジニアギルド」のご紹介 - pixiv inside
VP of Engineeringのbashです。 ピクシブでは2018年から「エンジニアギルド」という組織を運営しています。そしてこの2019夏、次世代の体制として取り組みを磨き上げています。 エンジニアギルドとは エンジニアギルドとは、社内エンジニア成長のための事業部横断体制です。 社内に多数の事業を擁するピクシブにおいて、エンジニアは日々個々の担当する事業価値を高めることに注力しています。そんななかでも、採用・評価・育成といった、事業単位ではなく会社単位で考えていくべき領域に関して、事業部横断で思想を共有・改善していくための仕組みが「エンジニアギルド」です。 エンジニアギルドの特徴 ざっくり述べると以下のような特徴があります。 1. ツリー構造 多数のメンバーからの情報をスケーラブルに取りまとめるためのデータ構造として、ツリー型組織を構成しています。 技術系役員を務めるエンジニアを、
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
