Scala SparkでTwitterのストリーミング処理テスト on Vagrant Ubuntu 14.04 - Qiita
# -*- mode: ruby -*- # vi: set ft=ruby : # Vagrantfile API/syntax version. Don't touch unless you know what you're doing! VAGRANTFILE_API_VERSION = "2" Vagrant.configure(VAGRANTFILE_API_VERSION) do |config| config.vm.box = "opscode-ubuntu1410" config.vm.box_url = "http://opscode-vm-bento.s3.amazonaws.com/vagrant/virtualbox/opscode_ubuntu-14.10_chef-provisionerless.box" config.vm.provider :virtualb
[Apache Spark]ストリーミング処理で直近の人気ハッシュタグを取得する | DevelopersIO
はじめに Apache Sparkの用途の一つとして、ストリーミング処理があります。今回はその例として、Twitterから直近の人気のハッシュタグを取得する処理を取り上げてみたいと思います。 処理の流れと用語について ソースをお見せする前に、大まかな処理の流れと、用語について説明したいと思います。先ず処理の流れですが、以下のようになります。 Streamの作成 ハッシュタグを持つRDDの取得 DStreamの取得 DStream内のRDDよりハッシュタグを取得 見慣れない用語ばかりかと思いますが、以下で処理の流れに沿って解説したと思います。 1.Streamの作成 データを連続して取得するためのStreamを作成する処理です。今回はTwitterよりデータを取得するストリームを作りますが、他にも Kinesis、Kafka、Flume、ZeroMQ、TCPなどから取得することが出来るようで
![[Apache Spark]ストリーミング処理で直近の人気ハッシュタグを取得する | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/976e6989ab538c58fa5b64a03837c916f8d9ba11/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2FApache_Spark.png)
Use Cases, Tutorials, & Documentation
<g> <g> <defs> <rect id="SVGID_1_" x="-468" y="-1360" width="1440" height="3027" /> </defs> <clippath id="SVGID_2_"> <use xlink:href="#SVGID_1_" style="overflow:visible;" /> </clippath> </g> </g> <rect x="-468" y="-1360" class="st0" width="1440" height="3027" style="fill:rgb(0,0,0,0);stroke-width:3;stroke:rgb(0,0,0)" /> <path d="M13.4,12l5.8-5.8c0.4-0.4,0.4-1,0-1.4c-0.4-0.4-1-0.4-1.4,0L12,10.6L6.2
予定外 [iOS5/ARC対応] iOSでTwitterクライアント その４ （ツイート投稿）
[PR]上記の広告は3ヶ月以上新規記事投稿のないブログに表示されています。新しい記事を書く事で広告が消えます。 引き続きGTMOAuthライブラリを使用したiOS5用Twitterクライアント作成の解説です。 今回はツイートの投稿の方法を解説します。 REST (Representational State Transfer) とTwitter API RESTはWebアプリケーションに代表される分散ネットワークアプリケーションにおいて、主にHTTPを使用してネットワーク上のリソース（情報）にアクセスするソフトウェアアーキテクチャの１つ、またはそこで使われるインタフェース（API）の方式のことです。 といっても抽象的すぎてあいまいなので、Twitterの場合を例に取ってみましょう。 Twitter APIでは、以下のようないろいろな情報が「リソース」として管理されています。 個別のツイート
Twitter や Facebook への投稿ライブラリ ShareKit の Tips - その後のその後
「iOSアプリにソーシャルサイトでのシェア機能を３行で簡単実装できる」という謳い文句で有名な ShareKit を初めて使ってみたのですが、ひっかかった部分や、ドキュメントに書いてなくてソースから汲み取った部分などあったので、諸々メモしておきます。 ソース入手先に注意！ ググるとここがトップに出てきて、このページ内にリンクが張られているソースのダウンロード先はここということになっていますが、最終更新が1年以上前とえらく古いものなので要注意です。 現在の本家はこちらのようです。 https://github.com/ShareKit/ShareKit ドキュメントはこちら。 https://github.com/ShareKit/ShareKit/wiki iOS 5 から追加された Twitter フレームワークにも対応済み 作っているアプリのビルドターゲットが iOS 5.0 以上なので
Sign in - Google Accounts
Not your computer? Use a private browsing window to sign in. Learn more about using Guest mode
TwitterのステータスIDが53bitを越えたお話 - tmytのらくがき
僕の記事の間違いを指摘していただいているすばらしい記事です。僕の記事よりこちらの記事をご覧ください。 http://archive.guma.jp/2010/12/twitter-json.html 先日、29日の7時過ぎごろにTwitterのステータスIDが53bitを越えました。 こんな中途半端なビット数を超えただけでなぜこんな記事にするかというと、一部のクライアントで動作がおかしくなることがあるからです。 (14:14 追記しました) (14:31 もひとつ追記しました) TwitterのAPIはXMLとJSONの2種類で結果を取得できます。このうちXMLで処理してる場合は内部で64bit INTで処理していれば特に問題は起きません。 問題が起きるのはJSONの場合です。JSONはJavascriptでevalすればそのまま中身が取り出せることからもわかるように、Javascript
TwitterにURLを流すとインデックス化に効果があるのか？ 実験してみた | Moz - SEOとインバウンドマーケティングの実践情報
フォロワーからの注目やリンクを集めることを期待して、自分のTwitterアカウントで新しい投稿や製品についてつぶやく人は多い。こういった活動が、インデックス化されるページの増加や迅速なインデックス化にもつながるとしたらどうだろう？ jtkaczukが2010年3月に、「Twitterをサイトマップとして利用する」という記事をYOUmozに投稿した。僕はこれを読んでからTwitterのパワーについて考え始め、Twitterをもっと活用することがインデックス化の助けになるんじゃないかと思うようになったんだ。 そこで僕は、ほんの数か月だけささやかな実験を行ったのだが、その結果は驚くべきものだった。 Twitterとインデックスの実験の方法この実験では、次のことをそれぞれ追跡できるようにした。 新製品がサイトに追加されたことそれがツイートされたことGooglebotにクロールされたことグーグルでイ
マインドスコープ株式会社スタッフ募集
モバツイの創設者であるマインドスコープ株式会社の代表である藤川は、常に考え続け、新しい発想を生み出しています。現状を見極めたうえでロジックを組み立て、そこから湧き出る柔軟な発想で、写真のように天井に吊るしてあるバナナを棒を使って取ることを思いつきました。 マインドスコープ株式会社は、「仲間」こそが一番の財産であると考えています。 志を同じくした仲間たちと笑い、励ましあい、高め合うことは、ユーザーへのよりよいサービス提供へとつながっていくのです。
「知らない人をフォローすること」と独創性 | WIRED VISION
前の記事 高速撮影で捉えた「昆虫の飛翔」9選 「知らない人をフォローすること」と独創性 2010年10月 1日 サイエンス・テクノロジーワークスタイル コメント： トラックバック (0) フィードサイエンス・テクノロジーワークスタイル Jonah Lehrer Twitterは、イランの社会運動にも大きな影響を与えた。画像はWikimedia Twitterでフォローする相手について、GizmodoでJoel Johnson氏が興味深い文章を書いている。 [自分がフォローしている人が、自分によく似た「白人のギーク」ばかりだということに気がついて、デトロイトに住む黒人の女性(熱心なクリスチャンで、TVのリアリティ番組に出てくるカーダシアン家について頻繁にツイートするという、自分と対極的な人物)のフォローを始めたという話に続く文章を以下に引用する] 『Twitter』の最も素晴らしい点の1つは
早大生？ Twitterでカンニング告白、教授の東浩紀氏が発見
早稲田大学の学生を名乗るユーザーが、東浩紀さん（同大文化構想学部教授）の講義の試験でカンニングしたことをTwitterで告白し、東さん本人が発見・指摘、Twitterで騒ぎになった。 早稲田大学文学部哲学2年生を名乗るユーザーが9月2日深夜、「やっぱ、東浩紀の講義落としてました。（中略）。テスト中に、隣の人が答案見せてくれたのに申し訳ないなー（後略）」などとツイートした。 東さんはこれを偶然発見し、「これ、カンニングだよね。これツイートするって、きみなに考えてるの？」と、元のツイートをRT（コピー・引用）した上で指摘すると、本人はツイートを削除。プロフィールから大学名と、実名らしき氏名の記述を削除した。 東さんは学生の行為に、「早稲田生はバカなのか。カンニングってすごいヤバイことだよ。教師の名前挙げて、それツイートするって……」「申しわけないけど、あまりに自己責任なので守る気になれません」
素晴らしいアイデアのTwitter時報botがあった
今回は自分のじゃなくて 人様がお作りになった bot のご紹介。 うちの時報 bot は Twitter用時報botを作ったよ – 頭ん中 時報 (jihou) on Twitter もともとは単に「いま何時か」を知らせるためのものなんだけど、 フォローしてくれてるたくさんの人から 「タイムラインを遡るときに、区切り線になって助かる」 という声もいただいている。なるほど。 その目的でつくられた、素晴らしいアイデアの bot がこちら。 切り取り線(時報) (kiri_tori) on Twitter 上掲のリンクから実物を見ていただくのがいいと思うんだけど、 時報のタイミングで切り取り線がツイートされる。 これをフォローすると タイムライン上の1時間ごとにその切り取り線が現れることになるから ここからここまでが1時間というのが視覚的にわかりやすい。 何かかわいいし。 さらにもっと細かく区切
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Components · Twitter Bootstrap
サーバ名騒動
Togetter - 国内最大級のTwitterまとめメディア
Site Under Maintenance
Dance Party
https://jp.techcrunch.com/2010/08/16/20100814long-tweet-is-long-t-co-bug-lets-you-go-way-over-140/
@talkexplorer (tx) beta
Site Under Maintenance
