GitLabがGoogle CloudとAI分野で提携、AIをGitLabツール群に統合。コードの自動生成、コードにある脆弱性の説明、コードレビュアーの推薦など実現
GitLabがGoogle CloudとAI分野で提携、AIをGitLabツール群に統合。コードの自動生成、コードにある脆弱性の説明、コードレビュアーの推薦など実現 GitLabとGoogle CloudはAI分野での提携を発表し、Google Cloudが提供するAI機能のVertex AIなどにより、GitLabのツール群にAIによる開発者の支援機能を組み込んでいくとしました。 そしてGitLabは5月3日付けのブログ「GitLab details AI-assisted features in the DevSecOps platform」で、今後どのようなAI関連の機能をGitLabに実装していくのかについて説明しています。 Check out our blog series to keep up with our AI/ML work and announcements. htt
NTTデータのHadoop報告書がすごかった - 科学と非科学の迷宮
業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成２１年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。 そのうちの一つに、NTTデータに委託されたHadoopに関する実証実験の報告書がありましたので、今更ながら読んでみることにしました。 Hadoop界隈の人はもうみんなとっくに読んでるのかもしれませんけど。 http://www.meti.go.jp/policy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist_software.pdf 「高信頼クラウド実現用ソフトウェア開発（分散制御処理技術等に係るデータセンター高信頼化に向けた実証事業）」という
ビッグデータがバズワードの域を脱するのは意外と早いのかもしれない
国産ベンダーも続々とビッグデータソリューションを発表 ここ最近、内外のベンダーからビッグデータに関連する新製品やサービスの発表が相次いでいる。個人的にはビッグデータはまだまだバズワードの域から抜け出してはいないと思っている。けれども、これだけベンダーが真剣に製品やサービスを市場投入している状況を見ると、ビッグデータも早晩きちんと定義付けされITの1つの領域として確立してくるのかなと思えてくる。 ということで、そんなビッグデータをとりまく最近の動きをちょっと見てみよう。まずはNEC。リレーショナルデータベースとKey-Value Storeの両方の利点を併せ持ったスケールアウト型データベースソフト「InfoFrame Relational Store」の提供を開始した。多くのベンダーがビッグデータといえばApache Hadoopをベースに、それに付加価値を提供するソリューションを提供する中
第5回 レコメンドシステム－協調フィルタリングのHadoopへの実装［後編］ | gihyo.jp
今回は、Hadoopでコサイン関数を計算する方法の最終回です。 おさらい 前回は、履歴から作成した、ユーザごとにアクセスしたアイテムのリストであるユーザシーケンスから、同一シーケンスの中に出現したアイテムのペアとそれらをアクセスしたユーザ数（シーケンスの数）を抽出しました。この段階でコサイン関数の計算に必要な要素が揃いました。 図1 前回までに説明した処理の範囲 アクセスユーザ数からコサイン関数へ 第三段階の処理フローは次の通りです。ここでもアイテムIDを具体的なアイテム名で示しています。 図2 第三段階の処理フロー ①では、第二段階の出力結果を入力し、そのまま出力しています ②では、keyであるアイテムペアでソートしてReducerに渡しています。 ③では、keyであるアイテムペアをアクセスしたユーザ数、および各アイテムをアクセスしたユーザ数を使いコサイン関数を計算します。 これをMap
Twitter、分散リアルタイム処理システム「Storm」公開 | gihyo.jp
2011年9月18日、Twitterは分散リアルタイム処理システム「Storm」をオープンソースで公開しました。より正確に言うと、2011年7月に買収されたBackTypeのメンバーが買収以前より開発を進めていたものです。BackTypeはTwitterのつぶやきを解析するシステムを開発していたスタートアップ企業でHadoopのヘビーユーザでもありましたが、リアルタイム性の問題点を解消すべくStormの開発に至ったようです。ちなみに同じオープンソースの分散リアルタイム処理システムとして米Yahoo! が「S4」を公開していますが、Stormはデータを処理する信頼性の高さやAPIのシンプルさに違いがあります。 StormのアーキテクチャはHadoopと似通っており、クラスタはMaster-Workerパターンに基づいています。Masterノードには「Nimbus」、Workerノードには
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
IBM Developer
平成２１年度産学連携ソフトウェア工学実践事業（高信頼クラウド実現用ソフトウェア開発（分散制御処理技術等に係るデータセンターの高信頼化に向けた実証事業））事業成果報告書
VMware が Spring Hadoop を発表