OSSで支えられるライブドアの巨大ログ集計 #nhntechPostgreSQL10を導入！大規模データ分析事例からみるDWHとしてのPostgreSQL活用のポイントNTT DATA OSS Professional Services
livedoor Techブログ : ライブドア流自作サーバ
livedoorポータルサイト等のインフラを担当している片野です。 今回は若干いまさら感がありますが、弊社にて運用している自作サーバをご紹介します。 （検証機以外は弊社内で組み立ててないので、正確には自作してないんですがｗ） ■背景 去年は特に自作サーバが盛り上がっていましたし、早い段階で「うちも作るか!」という展開はあったんですが、弊社では以下のような事情もあり、着手していませんでした。 ・自社データセンタでの運用なため、その他顧客と運用が大きく変わるようなサーバを投入すると運用が煩雑になる。 ・ポータルのサービスだけでも3000台近いサーバがあり、規模的にも運用に手がかかるサーバを入れるのは非現実的。 ・ボリュームメリットが出せるため、コスト面での自作メリットはそれほど大きくない。 ・そもそも自作で間に合う台数じゃないｗ （人的な）運用コストや調達コスト面ではあまりメリットがないのです
livedoor Techブログ : 運用から生まれるスクリプト
こんにちは、ネットワーク事業部オペレーショングループの後藤です。 データホテルのサービスを担っているオペレーショングループでは、サーバセットアップ時にセットアップの効率化と正確性を図るため、予め先代たちが築きあげてきたセットアップ用のスクリプトを使用しセットアップ作業を行うことが多々あります。 セットアップとは、OSのインストールからミドルウェアの構築まで、顧客のご要望に沿った形でサーバを造りあげて引き渡すまでのことを意味し、各々顧客に合わせたセットアップ方法にて作業を行っております。その一連の流れの中から、OSインストール後のできたてホヤホヤのサーバに対して行っている、あることを取り上げてみたいと思います。 ◇日次バックアップ データホテルではレンタルサーバとして提供しているサーバに必ずディスクが2本以上装填されております。これはデータホテルのバックアップ方法の一つとして、日次で同一サー
ライブドア、“クラウド的”サービスを3月開始へ
ライブドアは、法人向けデータセンター「livedoorデータホテル」で、実サーバと仮想的なサーバを組み合わせ、ニーズに応じて柔軟にリソースを利用できる“クラウドっぽいサービス”を3月にスタートする計画だ。 高いパフォーマンスが必要な場合は従来通り実サーバで、トラフィック急増時など時間単位・分単位でリソースを増減する必要がある場合は仮想サーバで柔軟に対応する――といった仕組みを検討しているという。 データホテルを利用している法人向けを想定。個人がオンラインサインアップのみで仮想サーバを利用できるAmazon EC2のようなサービスも検討している。 また、携帯電話サイトで短いテキストを更新し、ユーザー同士で交流する「リアル」のようなサービスも、3月から提供する計画だ。 関連記事 ニフティ、1時間単位で従量課金のクラウドサービス ニフティがクラウドサービスに参入。1時間単位の従量課金制が利用でき
livedoor Techブログ : カラメでのスパムメール対策
こんにちは。 携帯キャリアを変え続けて一巡してしまいました。モバイル開発のトヤマです。 カラメとは ケータイlivedoorではカラメ（http://karame.com）というサービスを提供しています。 カラメでは、メールで文章や写真などをメールやウェブから投稿でき、その登録した内容を空メールで取得できるようになっています。その作成されたアドレスを公開する事で不特定多数の人に内容を配信することが可能になっています。使い方としては、個人で送るメルマガなどにアドレスを載せて配信するケースが多いようです。 カラメへのメール カラメでは主にシステム的に用意されたドメイン（b.to）、ユーザー用に用意されたドメイン(*.b.to)があります。（例えばldmobileというアカウントであれば、ldmobile.b.toドメインが割り当てられます）。ユーザーも日々変動する為、存在しているアカウントだけ
livedoor 10周年記念スペシャルインタビュー「きっかけはlivedoor 2009」 : 小飼弾さん
インタビュー 2009年12月24日16:00 カテゴリ "ライブドアの社員は、ライブドアの技術のなんたるかを知っておく必要がある" - 小飼弾さん --小飼さんがライブドアという名前を知ったのはいつごろですか？ 小飼 実はライブドア社は当時お客さんでした。ライブドアが無料プロバイダサービスを行っていたときに、当時Webページの一部をオン・ザ・エッヂで受注していました。僕は、ライブドアを買った当時はすでに会社にいませんでしたから、外で見ていて、またなんか買ったのか、くらいにしか思っていませんでしたね。 僕がオン・ザ・エッヂにいた３年間で、今のライブドアのデータセンタである「データホテル」の基盤を作り、一Webディレクターでも、それがどういう仕組みの上で動いているのかという全レイヤーの技術のことがきちんと分かる、そういう企業文化を作れたという自負がありました。だからこれ以上自分がいても後
livedoor Techブログ : 1000台の子供達 - livedoorを支えるサーバ群 -
自己紹介 私はライブドア（以下LD）で働いております安保サニーと申します。勤務地はLDのデータセンターこと「DATAHOTEL」です。前職はウェブディレクターを2年程やっており、Linuxの黒い画面て何？というレベルから、かれこれ3年が経とうとしてます。つまり技術的には、まだ若輩者です。 livedoorのメインサービスとも言える、「ポータル用サーバ」を、この2年間で1000台以上の台数を作成してきた私が、その流れを紹介したいと思います。 (注）基本的には流れ作業ですｗ 月に何台？ Alexaランキングでもトップ100に入る程のトラフィックを支えるサーバですが、大体ひと月にセットアップするサーバは40〜50台くらいです。ただし毎月増え続けているわけではなく、リプレースや仮想化による圧縮などがあるので、平均すると常に3000台くらいのサーバが、サービスを支えています。 標準的なサーバおよびO
ブログ事業で黒字を出すモデル - 狐の王国
2月に障害発生の「Doblog」。5月30日をもってサービスを終了という記事。公式のリリースも出てる。livedoor Blog が Doblogブロガー向けブログ移行支援プログラムなんてのを開始してるので、ユーザーの方は検討するといいかも。 で、これに関してちょっと気になった記事が。 TABLOG:NTTデータ Doblog終了に感じた「見え透いたウソ」と「組織の腐敗」 - livedoor Blog（ブログ） livedoorのようにブログサービスで黒字を出せている企業はかなり少ない。そのため、以前のブームに乗ってブログを始めたはいいものの、NTTデータ Doblogのように、経営目線では「放置プレイ」になったまま、止めるに止められないブログサービスは、少なくないだろう。 TABLOG:NTTデータ Doblog終了に感じた「見え透いたウソ」と「組織の腐敗」 - livedoor Bl
Re: ライブドアに纏わる都市伝説 - にぽたん研修所 兼 にぽたん休憩所
ライブドアに纏わる都市伝説 これについて、徹底抗戦したいと思います。 あ、一応、俺、ライブドア関係者です。 > ・ライブドア関係者はエロサイト運営の経験がある これはある。 みんなじゃないけど、少なくとも何人かはあるね。 というか、エロサイトっつうか、「エロいサイト」だね。 あんま裏っぽいとこはないよ。 > ・ライブドア関係者はAV女優と会える うん、あるある。 ご来社くださったりして、たくさんお会いする機会あるみたいです。 俺はそんなにお会いしてないですが。 あと、余談ですが、俺はまったく AV を見ないせいか (家の中探しても、俺の HDD の中全部探しても、エロ系は出てこないです)、AV 女優ってなんか微妙な (いまいちかわいくない) のが多いイメージありましたけど、今は違うんですね。 最近の AV 女優さんはかわいくて、ショック受けます。 お会いしたあと、数日ヘコむぐらい。 > ・
堀江貴文 エンジニアは誇り高くあれ｜【Tech総研】
東京大学文学部宗教学宗教史学専修課程中退。1996年に「有限会社オン・ザ・エッヂ」を設立。2002年に旧ライブドア社から営業権を取得し、2004年に社名を「株式会社ライブドア」に変更。2006年に証券取引法違反容疑で起訴されて一審、二審ともに有罪判決を受ける。現在上告中。1972年福岡県生まれ。 今、非正規雇用の増加やいわゆる「派遣切り」が社会問題になっていますけど、僕が前の会社（ライブドア）で社長をやっていたときは、技術者派遣やSI会社の常駐社員などは一切使わなかったし、逆に自社の社員を派遣することもしなかった。社内ではこうしたシステムを利用するようにかなり説得されたけど、ここだけは頑固に譲らなかった。 唯一、派遣会社を使ったのは受付の女の子たち。いろいろとあって押し切られてしまったのだけど、彼女たちが望めば正社員にしていたし、希望すれば総務や経理に異動もさせていた。ほかに社員でない人と
941::blog : スパムちゃんぷるーDNSBLの公開裏話 - livedoor Blog（ブログ）
livedoorに投稿される様々なコメントや色々な情報を解析しスパムかどうかを判定している「スパムちゃんぷるー」を外部からも使えるようになりました。(もう数日前ですが・・) EDGEの担当は私ということもあり、機能が出来た段階で「どう出しましょうか」と担当エンジニアから相談されて参加しました。やらないといけないのは利用者向けページとプレスリリースの段取り、あとは利用規約などに準じてサービス公開に問題がないかの仕切りなど。 EDGEは有志によるコンテンツ開発ということもあり、通常のスタッフアサインをしないのが通例になってまして、ページデザインとマークアップはエンジニア自らやってもらいました。「でもデザインとか入れたいんだけどどうしようかねえ」という相談を受け、「モジュールとプラグインの公開なんだからスカッと白背景の『いかにも開発中』っぽい画面くらいがどいいと思いますよ、これでいきましょう
統合スパムフィルタ「スパムちゃんぷるー」のデータに基づくDNSBL(β)
スパムちゃんぷるー をご利用いただき誠にありがとうございます。 2008年10月のサービス開始以来、皆様にご利用いただきましたスパムちゃんぷるーですが 2013年5月31日を持ちましてサービスを終了させていただくことになりました。 ご利用いだいている皆さまにはご迷惑をおかけすることとなり、深くお詫び申し上げますとともに 長年ご愛顧いただきましたことにスタッフ一同、心より御礼申し上げます。 スパムちゃんぷるーをコメント投稿システムに組み込んでいただいている場合は サービス終了以降、投稿ができなくなってしまう可能性がございますのでサービス終了 までの期間でご対応いただけますよう宜しくお願い申し上げます。 スパムちゃんぷるー を長年ご愛顧いただきまして、誠にありがとうございました。 今後ともNHN Japanのサービスをよろしくお願いいたします。
増え続けるスパムブログの現状は ライブドアが検索に新技術、9割排除
ライブドアは10月10日、「livedoorブログ検索」に、検索結果にスパムブログを表示しない技術を実装した。スパムブログを自動判定する技術を新開発。従来、検索結果の半分ほどスパムだったが、新技術でスパムの約9割が表示されなくなったという。 スパムブログとは、アフィリエイト収入を得たり、特定のサイトへ誘導することを目的に、専用ツールを使って自動生成された、内容の伴わないブログ。 別のブログやニュースサイトの記事をそのままコピーしたものや、アフィリエイトリンクを大量に掲載しているもののほか、流行のキーワードや芸能人の名前など、検索されやすい言葉を並べ、意味の通らないでたらめの文章「ワードサラダ」を自動生成し、投稿しているものもある。 同社エンジニアの山下拓也さんによると、「日々新しいパターンのスパムブログが出てくる」という。スパムが検索結果に表示されなくなれば、スパムブログを通じてアフィリエ
「DATAHOTEL PATROL」サービスからのアラートメール誤配信のお知らせ（2019年4月3日） | NHN テコラス
「DATAHOTEL PATROL」サービスからのアラートメール誤配信のお知らせ（2019年4月3日） 2019.04.03 平素は大変お世話になっております。 掲題の通り、既にサービス提供を終了しております、「DATAHOTEL PATROL」 サービスにおきまして、3月30日から31日にかけて、以前ご利用のお客様のメールアドレス に対してアラートメールが誤って配信されました。 メールを受信された皆様には、ご迷惑お掛けしまして、大変申し訳ありませんでした。 本事象の原因は、サーバ撤去時の誤作動により、誤って監視が再開され、アラートメールが 配信されたことによるものでございます。 該当サーバは既に撤去及びデータ消去を実施済みのため、メールは配信されないよう 対応させて頂いております。 お客様におかれましてはご不便をお掛けいたしましたことをお詫び申し上げます。 今後とも弊社をご愛顧くださいま
ライブドアデータホテルパトロール 無料サーバ・ネットワーク監視サービス
「DATAHOTEL PATROL」サービスからのアラートメール誤配信のお知らせ（2019年4月3日） 2019.04.03 平素は大変お世話になっております。 掲題の通り、既にサービス提供を終了しております、「DATAHOTEL PATROL」 サービスにおきまして、3月30日から31日にかけて、以前ご利用のお客様のメールアドレス に対してアラートメールが誤って配信されました。 メールを受信された皆様には、ご迷惑お掛けしまして、大変申し訳ありませんでした。 本事象の原因は、サーバ撤去時の誤作動により、誤って監視が再開され、アラートメールが 配信されたことによるものでございます。 該当サーバは既に撤去及びデータ消去を実施済みのため、メールは配信されないよう 対応させて頂いております。 お客様におかれましてはご不便をお掛けいたしましたことをお詫び申し上げます。 今後とも弊社をご愛顧くださいま
第一回マネタイズHacksを開催しました(資料の公開あり) - livedoor ディレクター Blog(ブログ)
こんにちは、佐々木です。 櫛井がハンバーガーを食べにシリコンバレーに行っているので、代打です。 先日開催した第一回マネタイズHacks(第一回マネタイズHacks開催と参加者募集のお知らせ)につきまして、簡単なレポートと資料の公開のご案内をさせていただきます。 当初は動画なども公開する予定でしたが、諸般の事情により資料のみの公開させていただくことになりました。ご容赦ください。 (以下からダウンロードできる資料の内容についてのお問い合わせは、文責のある会社様へ直接ご連絡ください) ■ブロックリンク is not evil. (ライブドア 畑山) 資料をダウンロード ■5分でわかる livedoor Blog 第3世代有料プランの秘密 (ライブドア 佐々木) 資料をダウンロード ■はてなアドセンス Hacks (はてな 川崎様) 資料をダウンロード ■モバイル広告で一番効率がよい広告はなに？
livedoor Developers Blog:チケット駆動開発の研究と実践 - livedoor Blog（ブログ）
こんにちは、そろそろ花粉のシーズンが近づいてきて戦々恐々としている金子です。 今年も花粉対策グッズの CM に注目しているのですが、花粉鼻でブロックがいいんじゃないか?と思っています。 花粉症のくしゃみ鼻水は、本人が辛いのはもちろんですが周囲にとっても気分の良いものではありませんよね。エチケットとしても花粉対策は怠らないようにしたいものです。 チケットついでに今回はチケット駆動開発の話をします。想定読者は Trac をリポジトリブラウザとして利用しているがチケットは使ったことがない人です。Trac、 Issue Tracking System という用語に馴染みのない方は、それぞれ関連リンクを用意しましたのでそちらをご覧ください。 以下、僕の経験に基づき「チケット駆動開発とは何か」「何が目的か」「どう実践したか」「結果が出たか」についてレポートします。だいたいここ二週間くらい、チームではな
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
韓国ネット最大手ＮＨＮがライブドア買収、来週にも合意へ－関係者 - Bloomberg.co.jp
ライブドアブログ｜無料で豊富な機能が充実
ライブドアのサーバ監視サービス「DATAHOTELパトロール」を使ってみる - ~fumi/ChangeLog