カエルでもわかる！Spark / MLlib でやってみる協調フィルタリング（前編） - ALBERT Engineer Blog
はじめに 当ブログでは Apache Spark プロジェクトの機械学習ライブラリ MLlib について何度か取り上げました。 Spark / MLlib の K-means を Java から利用してみる Scala ではじめる Spark / MLlib の単純ベイズ分類器 今回のエントリでは MLlib の協調フィルタリングについて書きます。 アルゴリズムの簡単な解説と Java からの利用方法、性能評価実験などの話をします。 Spark 1.1.0 が9月にリリースされてからしばらくたってしまいましたが、1.1.0 から実装された機能も紹介します。 少し長くなるので前・後編に分かれます。 以下では Spark 1.1.0 を想定しますが、このあたりは今も発展中であり、以降のバージョンではまた違う話になっている可能性が高いのでご注意ください。 MLlib における協調フィルタリング
「変えたいのはSEの常識」元アマゾンのエンジニアが決済ベンチャーに転職した理由 - エンジニアtype
ネットショッピングの支払い方法が、一昔前とは比較にならないほど多様化している。 従来からあるクレジットカード払いや銀行振込、代金引換払はもちろん、最近ではネットバンキング経由の支払いや各種電子マネー、ATM、コンビニ、ギフトカード払いなど、利用者は多様な選択肢から自分にとって都合のいい支払い方法が選べるようになった。 さらに海外ではTwitterやFacebookアカウントから送金できる『Dwolla（ドゥオラ）』のようなサービスや仮想通貨など、次々と新手のサービスが登場している。決済手段の多様化は、加速度的に進行していると見るべきだろう。 こうした群雄割拠な決済サービス市場の中、後払い型の独自決済サービスを提供して成長している日本企業がある。ネットプロテクションズだ。 2002年から同社が提供している『NP後払い』は、商品到着後、コンビニや郵便局、銀行の店頭で「後払い」できるサービスとし
EC2など 高負荷クラウド環境における Redis のチューニングについて - tech.guitarrapc.cóm
たまにはPowerShell 以外の記事を。 某記事でもRedis (REmote DIctionary Server)が memcached に代わり得る利点がBookSleeveを交えて丁寧に説明されました。 そして、Redisの運用が一定の目途を見せていることから、その初期設定に欠かせないチューニングについて記事にしてみようと思います。 全部明かすわけではありませんが、なかなかRedisに関する記事は少ないので、少し参考になれば幸いです。 経験上、高負荷環境ではRedisはチューニングで大幅に安定性が変わります。 インストール? 沢山記事ありますし、簡単なのでここでは省きます。 どうしても！な場合は希望していただければ記事にしますが。 Redis Quick Start 対象バージョン 2.6系とします。 2.4系でも大方一緒ですが、2.6系に特有な部分があるので、注意です。 対象O
NTT com、スマホアプリにIP電話機能を組み込めるSDKを公開
NTTコミュニケーションズは10月15日、同社のIP電話サービスと連携したスマートフォンアプリの開発を可能にする「050 VoIP SDK」の提供を開始した。 提供されるのは、IP電話発着信プログラムのライブラリ、ソースコード付きのサンプルアプリ、アプリ開発者向けドキュメントで、IP電話の発着信プログラムを任意のアプリに組み込むことで、発着信機能を実装することが可能になる。対応OSは、iOS 7.0以降(8.0.2対応済み)またはAndroid 4.1以降。 NTTcomによると、このSDKによってモバイルECアプリへの組み込みや、ビジネスパーソン向けの業務アプリへの組み込みなど様々なアプリとIP電話サービスを組み合わることができ、アプリ開発者による新たなビジネス機会の創出や、既存アプリの利便性向上が期待できるという。 なお、現在は事前募集に応募したパートナー企業と「050 VoIP SD
【保存版】 ECサイトのアクセス解析・データ分析レポートに盛り込むべき10の視点 （前編） | EC業界ニュース・まとめ・コラム「eコマースコンバージョンラボ」
ECサイトのアクセス解析・データ分析レポートに盛り込むべき10の視点 ECサイトを運営していて、そのアクセスやデータを解析・分析を行う際に、どのデータを確認していけばいいか悩んだことはないだろうか。もしくは、今見ている指標（KPI・KGI）が正しいのか不安に思ったことはないだろうか。 Google Analyticsなどのアクセス解析サービスはあらゆるデータを確認することが出来るが、逆をいえば何のデータを優先的に確認するべきかの示唆は得られない。 色々な指標を確認したくなる気持ちも分かるが、アクションに結びつかない指標を確認すること、ビジネスに示唆に繋がらない指標を確認することは何の意味もない作業となる。そしてそのようなデータレポートを受ける上司もECサイトで起こっていることが把握出来ないに違いない。 今回は、弊社の経験をもとに、ECサイトのアクセス解析・データ分析レポートに盛り込むべき1
「ビジネスプロセス上の労働者が半分になる」「アルゴリズムによって考案された破壊的ビジネスの登場」、2020年までにITが引き起こすビジネスの変化トップ10をガートナーが発表
米調査会社のガートナーは、「2015年およびその先におけるIT部門とITユーザーのための予測」を発表、これからのITの進化がが引き起こすであろう大きな変化について10の予測を明らかにしました。 その内容は、コンピュータの能力、Siriのようなエージェント、モバイルの普及といったいまの進化の延長線上で、多くの、そして大きなビジネス環境の変化が起こるだろうというものです。10の予測について紹介します（一部、分かりにくいところはガートナーの説明を要約して補足しました。詳細はプレスリリースをご覧ください） （1） 2018年までにデジタルビジネスは、現在のビジネスプロセス上の労働者の半分を不要にする一方で、デジタルビジネスの仕事は5倍になる 例えば、冷蔵庫が自分で食料品を発注し、ECサイトのロボットがそれを自動処理し、ドローンが配達する、といったデジタルビジネスの進化によって、従来の食料品店の店員
はじめてのsystemdサービス管理ガイド | DevelopersIO
はじめに MarketplaceでCentOS 7 AMIがリリースされましたね！(ex. Amazon EC2 CentOS 7 AMIファーストインプレッション) ということで、これはもう本格的にsystemdを学ばないとあかん、という危機感に駆られた次第です。systemdは"system and service manager"なので、電源やロケールなどのシステム部分の管理も可能ですが、差し当たってEC2で使う上で最低限押さえとかなければいかないのはサービス管理になるでしょう。そこでsystemdを操作するためのコマンドであるsystemctlを使って、サービスを管理する方法についてまとめました。 systemdサービス管理 systemdでは、これまでサービス起動スクリプトで定義されていたものがUnitという形で定義されますので、サービスの管理=Unitの管理となります。 有効化
男性セレブ・ファッションの廉価コピー指南サイトがわずか１か月で大人気に！ - ICHIROYAのブログ
少し前に話題になったこんな面白いファッションサイトがある。 Famous Outfits と言い、男性セレブのファッションを分解し、それを手に届くアイテムで実現するにはどうしたら良いかを教えるものだ。たとえば、上のChace Crawfordのカジュアルファッションを真似るために、J・CrewやGAPなどのお手頃ブランドのアイテムが紹介されており、そのアイテムの販売サイトへのリンクが貼られて、すぐにそれが買えるようになっている。 とてもおもしろいアイディアのサイトだと思う。 このサイトでは、一日ひとつ、セレブファッションの安値コピーの指南をするほか、トレンド紹介、気合の入ったブログも運営されていて、ファッションサイトのひとつのヒントになりそうだ。 じつはこのサイトは、今年の8月22日に、ふたりの創業者がアイディアを思いついて、それをわずか5日間でつくったものだという。 その顛末が、こちらの
AWS News Blog
Stop the CNAME chain struggle: Simplified management with Route 53 Resolver DNS Firewall Starting today, you can configure your DNS Firewall to automatically trust all domains in a resolution chain (such as aCNAME, DNAME, or Alias chain). Let’s walk through this in nontechnical terms for those unfamiliar with DNS. Why use DNS Firewall? DNS Firewall provides protection for outbound DNS requests fro
ECサイトを作ったら設定しないと絶対損するGoogleAnalyticsのキホン | EC業界ニュース・まとめ・コラム「eコマースコンバージョンラボ」
ECサイトの正しい現状分析にアクセス解析は必要不可欠だ。サイト開設初期に設定しておかないと、設定し忘れた値は後から取り返せない。 今回は、ECサイトを作ったら最初に設定しておかないと絶対に損するGoogleAnalyticsの必須7項目をまとめた。この機会に見直してみよう。 ＜参考＞ Google Analyticsをコマースサイトで活用していくための基礎知識 目次 1. プロパティ・プロファイルを設定する 2. コンバージョンを設定する 3. ゴールフローを設定 4. eコマーストラッキングを有効にする 5. eコマーストラッキングタグを設定する 6. 自社からのアクセスを除外する 7. KPIのためのレポートをショートカット登録する 1. プロパティ・プロファイルを設定する まずはGoogle Analyticsのキホン、プロパティ・ビューを作成する。最初はよくわからないかもしれないが
「コードは書かない」と宣言する、えふしんが描くエンジニアの理想のキャリアパス | HRナビ by リクルート
かつてないほど手軽にネットショップ運営を始められる「BASE」。今年の5月には3億円の資金調達に成功し、今、最も勢いのあるECのスタートアップだ。同社に約2年間にわたって技術顧問として関わってきた「えふしん」こと藤川真一氏が、このほどCTOとしてジョインした。 エンジニアとして名高い藤川氏だが、BASEでは「コードを書かない」と公言している。代表の鶴岡氏の掲げるビジョンを具現化し、サービスを成長させるために、マネジメント業務に徹することを決めたという。藤川氏が考える、エンジニアにとっての理想の組織、そしてキャリアパスについて、詳しく話を聞いた。 なぜ藤川氏は「コードを書かない」のか？ ――BASEでは「コードを書かない」と宣言されていますが、それはなぜですか？ 藤川：一言で言うと、コードを書いている余裕がないからということに尽きるのですが、BASEにはすでにある程度の規模のチームがあるので
PC版トップページリニューアルの狙いと成果 - クックパッド開発者ブログ
メディア事業部の須藤です。 8/26より、PC版クックパッドのトップページをリニューアルしました。 公開から約3週間が経過しましたが、お試し頂けましたでしょうか？ この記事では、今回のリニューアルを通して解決したかった課題や、新しいチャレンジ、 また、それらを具現化する過程で考えた事を、実際の結果と合わせて書いてみたいと思います。 今回のリニューアルで伝えたかったこと 今回のリニューアルで強く意識したのは、「食にまつわる全般を扱うポータルサイト」として、 クックパッドを再認識して頂けるトップページにすることでした。 クックパッドでは２年程前より、従来のレシピサービスとは別の価値を提供する、新規事業・サービスの開発に注力してきました。 例えば、ECサービスである「産地直送便」や、近所のスーパーの特売品が分かる「特売情報」、クックパッド認定の料理教室を展開する「料理教室」などがあり、 それぞれ
意外と知らないオウンドメディアの意味と8つの事例から学ぶ成功のポイント | LISKUL
オウンドメディアとは、企業が自社サイトとは別に運営する宣伝をメインにしない情報発信メディアのことを指します。 効果としては「自社商品の購買促進や新規顧客の獲得」だけではなく、「企業の採用やブランディング、既存顧客のエンゲージメントを高める効果」まで相乗効果を見込むことが出来ます。 オウンドメディアはじめてガイド【無料ebook】 しかしながら「自社でオウンドメディアを始めるには、どう立ち上げ運用すれば成果が出るのか？」と気になっているか方も多いのではないでしょうか。 本記事では、月間70万PVを超える「LISKUL」の運営実績を元に、オウンドメディア運用の成功の秘訣をお伝えします。 3年間の運用経験からオウンドメディアには７つの主な目的があり、どの目的を優先するかを事前に決めておく必要があることが分かってきました。 そこで、7つの主な目的それぞれに対応した優良事例を厳選し、ご紹介いたします
EC2を停止して開始した時はELBに再登録する | DevelopersIO
こんにちは、虎塚です。 今日は、ELBに紐づけたEC2を停止・開始した時に、EC2をELBに再登録する必要があることについて書きます。 これはELBを使い始めるとすぐに遭遇する問題のため、お客様からのお問い合わせが多い話題です。今月（2014年9月）すでに2件の問い合わせがあったので、書いておくことにしました。 現象 ELBと紐づけたEC2が、ELBから正しく認識されていて、リクエストを分配できる状態の時、ELBのステータスは「In Service」となります。ELBにEC2を紐づけてすぐの状態だと「Out of Service」ですが、数分たつと「In Service」になりますね。 ところが、ELBと紐づけたEC2を停止して、一定時間後に開始した後、「Out of Service」のままになることがあります。 公式ドキュメントによる解説 公式ドキュメントでは、この件について次のように書
月額課金のVPSから時間課金のDigitalOceanとEC2に移行した先には自由があった : akiyan.com
月額課金のVPSから時間課金のDigitalOceanとEC2に移行した先には自由があった 2014-09-08 最近、個人で運用しているサービス群やこのブログのホスティングを DigitalOcean と EC2 に全て移行しました。それまでは さくらのVPS と ConoHa VPS を使っていました。 結果、価格あたりの性能は下がりましたが、メンテナンスとスケールの自由を得ました。 目次 メンテナンスの自由がある サーバーはときどき、まっさらな状態から作り直したくなります。その対象が本番稼働しているサーバーの場合、「新しいのを必要な台数ぶん用意して、移行する」のが、ふつうです。 そして移行する際のサーバーの調達において、月額課金型のVPSは課金が月単位なので、移行先のサーバーを用意すると、うまいこと移行時期を調節しても「既存のサーバーとの1ヶ月以上の重複課金期間」が発生します。さくら
プログラムではアクセスキー/シークレットキーを使わずにRoleを利用する | DevelopersIO
渡辺です。 最近は、システムの開発支援としてAWS環境構築などに関わる事が多いです。 そこで、開発者側視点で押さえておきたいAWSのノウハウや基礎知識を書いて展開してみたいと思います。 今回はEC2で動くプログラムがアクセスキー/シークレットキーを使わずにRoleを利用すべき、という話です。 Roleとは？ RoleはIAMの機能のひとつで、アクセスキー/シークレットキーを使わずに各種AWSリソースにアクセスすることができます。 例えば、EC2インスタンスからS3にオブジェクトを書き込んだり、SNSにメッセージを送信したりする場合に利用できます。 アクセスキー/シークレットキーとの違い ひとことで言えば、Roleはアクセスキー/シークレットキーに比べ、キーの管理をする必要がありません。 ただし、EC2インスタンスにしか割り当てることしかできません。 キー管理が不要 アクセスキー/シークレッ
「最速」フルスタックWebフレームワーク「revel」の紹介 - Qiita
速さは正義！ やはり「最速」という言葉は胸を熱くするものがあります。 使うWebフレームワークのレスポンスが速ければ速いほど、ユーザービリティはよくなる上に、必要なサーバー台数も減らせるなど、いいことづくめです。 ただ、レスポンスの速さだけを追い求めて機能を削ったものは、開発の速度を遅くします。 Web開発に通常必要な機能は全て用意した上で、なお速い、そんな都合のいいフレームワークが求められます。 そこで、最近知った「revel」という「最速」にして「フルスタック」のWebフレームワークについて、調べたことを記載していきます。 今回は、 速さの計測方法解説 revelの概要 Go言語の概要 revelのインストール・実行までの手順 などについて記載します。 ※ ここで言っている「最速」とは、一秒間に何レスポンス返せるか、というような、ベンチマーク的な意味です。 ※ ここで言っている「フルス
[EC2]５分でできる！？ WireSharkのリモートキャプチャー | DevelopersIO
はじめに Amazon LinuxをはじめとするEC2インスタンスはグラフィカルログインが提供されていませんのでWireSharkによるリアルタイムキャプチャーができません。そのため、EC2の入出力パケットをキャプチャーをするにはtcpdumpでキャプチャーして、そのファイルをローカルのPCにダウンロードしてWireSharkで確認します。この方法は、手間が多いだけでなく、ネットワークに流れるパケット情報をリアルタイムで調査できるWireSharkの長所が失われてしまします。 キャプチャー対象となるEC2インスタンスの設定変更と添付したシェルの設定項目を書き換えのみで、リモートキャプチャーできるランチャーを作成しましたのでご紹介します。 ５分で手早く利用したい方は、下記のシェルと設定ファイルをコピーして、図を参考に設定を置き換えることで動作できるでしょう。 WireSharkのリモートキャ
![[EC2]５分でできる！？ WireSharkのリモートキャプチャー | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/fd4e7bee249c97d151c0e5350794553cde01b61e/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F08%2Fwireshark_icon.jpg){kind=icon}
インフラエンジニア向け、Cisco CSR1000V on AWS を使ってみる | DevelopersIO
こんにちは、梶です。 本日はインフラエンジニア向け、第２弾として、Cisco CSR1000V on AWS を使ってみたいと思います。 Cisco Cloud Service Router(CSR)とは Cisco Cloud Service Router (CSR) 1000Vとは、ソフトウェアルータです。他にも有名なものでいうとVyattaや、SEIL/x86などがあります。 詳細はここ ＊ESXiのみと書いてありますが、現在は複数のハイパーバイザーに対応しているようです。 VMware ESXi (5.0, 5.1)、Citrix XenServer (6.0.2, 6.1)、RedHat KVM (RHEL 6.3, RHEV 3.1) Amazon Web Services (AWS) CSR1000Vのライセンスは以下の組み合わせになってます。 期間→１年、３年、５年 機能→
Amazon EC2(Linux)のネットワーク設定でハマったときに見るメモ | DevelopersIO
ども、大瀧です。 LinuxのEC2インスタンスでちょっと変わったネットワーク設定をしようとすると、思う通りに動かなかったり設定が見えなかったりと、オンプレミスとは雰囲気の異なる振る舞いをすることがあります(本質的にはオンプレミスとなんら変わらないのですが)。自身で経験したケースをメモ書きとして残しておきます。 想定するLinux OS : Amazon Linux, CentOS 6.x, RHEL 6.xなどRed Hat系ディストリビューション /etc/resolv.confを変更したのになぜか元に戻ってしまう DHCPクライアントによるものです。DHCPクライアントは定期的にIPアドレス更新の問い合わせをDHCPサーバーに行いますが、そのときに付随するDNSの情報を元にデフォルトで/etc/resolv.confファイルを上書きします。これを無効にするためにNICの設定ファイル/
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
