tweets.zipをMySQLに突っ込んでSQLを学ぶ(導入編) · さよならインターネット
April 4, 2013 Twitterの過去ログが落とせるようになったので SQLに学ぶには丁度いいや。ということで カジュアルにOSX上でhomebrewを使ってMySQLに入れてみました。 MySQL ver.5.6 (homebrew install) OS / OSX 10.8.3 なにはともあれアーカイブをダウンロード Twitterの個人設定っぽいところから ポチポチするとダウンロードリンクが貼られたメールが送られてくるので ポチポチしてtweets.zipをダウンロード。 tweets.csvを探す tweets.zipを解凍すると、中身がこんな感じに出てきて index.htmlをブラウザで開くと、過去のツウィートが見れたりします。 時間泥棒なのでおすすめしません そして、tweets.csvが目的のファイルで、中身を開くと "tweet_id","in_reply_t
Substantial - DeNA(ngmoco)を退職してTwitterに転職しました
DeNA(ngmoco)を退職してTwitterに転職しました 現在Twitter本社(San Francisco)でSoftware Engineerとして働いています。 TwitterのUsernameは @tksohishi です。是非Followしてください! あと先日#newtwitterリリースされたので是非使ってください。 Born in Kochi, Japan, Live in San Francisco, CA Web Geek/Visionary, Ruby Programmer, Electro Music Lover Working @Twitter, Living my own life Follow @tksohishi アーカイブ
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
PlackとText::Xslateでケータイからtwitterするwebアプリを書いた - だるろぐ
公式のケータイ用のサイトが重いし落ちてる事が多いのでさっさと書いた。 色々足りんけど自分用に使うにはこれで十分。 GitHub - hirafoo/filmoa: simple twitter web-app for mobile phone なおPlackとText::Xslate使ったとか書くと凄く聞こえるけど実際は触り程度にしか使ってない。 追記 Config::Pitでconsumer keyとかtwitterでoauthするときに必要な情報を管理してます。 当然そんなものリポジトリに同梱しないしサンプル書くのもめどいので、これを使いたい珍しい人はコード読んで自分で用意するよろし。簡単だから。 構成 psgiファイルが1個と、他はテンプレのファイルのみ。 何か軽くてさくっと使えるWAF無いかなーと探したけどいいのがsinatraしか無かった。 やりたい事は極わずかだったので、んじゃ
TwitterやFacebookのURLには、なぜ#!が含まれるのか (SEOとAjaxのおいしい関係) - kazuhoのメモ置き場
Ajaxを使うためにはページ内リンク (hash fragment=URLの#以降) を使うのが一般的*1 hash fragmentはサーバに送信されないから、JavaScript非対応のブラウザだと動作しない 特にサーチエンジンのクローラ等で問題になる*2 そこで Google は、#! が含まれる URL を hash を含まないものに読み替える仕組みを提唱している。例えば「www.example.com/ajax.html#!key=value」のサーチエンジン用URLは「www.example.com/ajax.html?_escaped_fragment_=key=value」になる。 TwitterやFacebookはこの仕様に従うことで、Ajax な UI と SEO を同時に実現している、というわけ。ということを調べたなう。 参照: Getting Started |
Twitter、リアルタイム検索をLuceneで構築。50倍高速に！
Twitterのリアルタイム検索機能が、オープンソースのLuceneベースになったと、Twitter Engineeringブログへのエントリ「Twitter's New Search Architecture」で紹介されています。 これまでTwitterはリアルタイム検索にMySQLベースの独自システムを利用してきましたが、規模の拡大が難しくなってきたため、6カ月前に新システムの構築を決定。オープンソースの検索エンジンであるLuceneを選択したとのことです。 従来の50倍も高速に！ 検索エンジンに対する要件は以下のように非常に厳しいものでした。 Our demands on the new system are immense: With over 1,000 TPS (Tweets/sec) and 12,000 QPS (queries/sec) = over 1 billion
Big Sky :: TwitterのBasic認証廃止は約半分のデスクトップクライアントを殺した。
さて、TwitterがBasic認証を廃止して1ヶ月が経とうとしています。 皆さんクライアントをOAuth対応したり、乗り換えたりしたでしょうか？ 今までBasic認証で動いていた、ちょっとした捨てコード、どうなってるでしょうか？ Twitterが始まった当初、gtktwitterというデスクトップGUIで動くTwitterクライアントを作りました。まぁ作りはそれ程優れた物じゃなくて、RTなんか無い頃でfriends_timelineが見れて、発言出来て、@によるリプライが出来る程度の物でした。 ただ純粋なC言語だけでGTKおよびcurlを使ったクライアントという事もあり、一部のgeekからは人気があったみたいです。 さてこのgtktwitterを今回、Basic認証が消え去った現状でも動くようにしてあげようと思い、今回改造を始めた訳です。 まず大きな壁にぶち当たりました。 Twitter
ゆーすけべー日記
サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ
はてなブックマーク x Twitter連携機能キャンペーン！はてな x Twitter グッズを貰おう
はてなブックマークを連携機能では、簡単にブラウザで見ている URL を Twitter に投稿したり、反対に Twitter に投稿した URL をはてなブックマークに保存したりといった、様々な機能がご利用いただけます。 他にも Twitter に投稿した URL が何回クリックされたかチェックや、Twitter でフォローしているユーザーをはてなブックマークのお気に入りに追加など、便利な機能が盛りだくさんです。 詳しくはこちら はてなブックマークは ブックマーク(URL)を保存・管理・共有できる、無料のオンラインブックマークサービスです。いままでは手元のブラウザに保存していたブックマークを、インターネット上に保存して管理することができます。自宅で、職場で、学校でお気に入りのサイトをすぐにチェックはもちろん、強力な検索機能でたくさんのブックマークから目当ての URL を開くことができます。
AnyEvent + OAuth で Twitter API を叩く - punitan (a.k.a. punytan) のメモ
最近ようやく CPAN Author になりました。 ふとAnyEvent::Twitter::StreamをOAuthに対応させたいなぁ、と思ったので（ついでにChirpUserStreamsにも） - taiyoh独言が目にとまったので、モジュールの紹介もかねて書いておきます。 AnyEvent::Twitter の _make_oauth_request() という undocumented なメソッドを使えば ChirpUserStream も OAuth 対応させることができます。 config.json は eg/gen_token.plで生成できます。 ただ、 want_body_handle やら on_header やらオプションが必要なので、根本的にはリンク先とは変わらない感じになっています。 こんなかんじ #!/usr/bin/perl use strict; use
OAuth::LiteでOAuth対応のHTTP::Requestを作る方法 (Perlでtwitter bot書いてる人向け) - 酒日記 はてな支店
最近人気エントリーに便乗したネタが多くてすみません。 実用！ PerlでコマンドラインからTwitter投稿（OAuth対応） では、Net::Twitter を使って OAuth で投稿する方法が紹介されていますね。 ところで、単純な twitter bot 作るのに Net::Twitter 使います？「投稿なんて LWP で1発リクエスト投げればいいだけだから使わない」という人も多いと思いますが、Basic 認証が廃止されたらどうしましょう。 そのようなかた向けに、OAuth::Lite で OAuth 対応な HTTP::Request を作る方法をご紹介します。 consumer key, consumer secret, access token, access token secret は既に何らかの方法で取得できているものとすると、こんな感じです。 use OAuth::L
Twitter で「はてなダイアラー」ときゃっふきゃっふしよう！ - IT戦記
はじめに はっ ( ﾟдﾟ ) ＿(__つ/￣￣￣/＿ ＼/ / ￣￣￣amachang です。 みなさん、こんにちはお元気ですか。僕は元気です。 もっと もっと、熱くなれよおお、じゃなくて、もっとツイッターではてなダイアラーと絡みたい！ と言うわけで ツイッターをやっているはてなダイアラーランキング Top 100 を作ってみた！ 順位 はてな ID Twitter ID 1 id:finalvent @finalvent 2 id:amachang @amachang 3 id:naoya @naoya_ito 4 id:shi3z @shi3z 5 id:kanose @kanose 6 id:mkusunok @masanork 7 id:Hamachiya2 @Hamachiya2 8 id:nitoyon @nitoyon 9 id:takerunba @takerunb
Twitter の ChirpUserStreams をダラ流しするWebAppを作った[かなり暫定版] - 酒日記 はてな支店
Twitterの新しいStreaming API「ChirpUserStreams」がすごすぎる件 が大変注目されているということで、UserStream を使って自分の Time Line をだだ流す Web Application を作ってみました。 まず最初に留意事項ですが、follow などの event が発生した時点で API を引きに行くので、大量 event が発生すると API 制限に引っかかる可能性が非常に高いです。事業所などで出口 IP アドレスが一つの環境だと(以下略 ということで、よろしくお願いします。 ソースコードはこちらです http://gist.github.com/378540 1ファイルで動くので、必要なモジュールは各自なんとかしていただきたく。 まず Config::Pit で twitter のアカウントを設定して下さい。 $ perl -MCon
![Twitter の ChirpUserStreams をダラ流しするWebAppを作った[かなり暫定版] - 酒日記 はてな支店](https://cdn-ak-scissors.b.st-hatena.com/image/square/3a1659080014cbb2ff345dd93eef28ccba1c60a9/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F13208692334729889028%2F8454420450078126401%2F1419604224)
AnyEvent::Twitter::Chirp を書いた - punitan (a.k.a. punytan) のメモ
ChirpUserStreamsを簡単に使えるようにしてみました レポジトリ GitHub - punytan/AnyEvent-Twitter-Chirp: DEPRECATED INSTALLATION % git clone git://github.com/punytan/AnyEvent-Twitter-Chirp.git % cd AnyEvent-Twitter-Chirp/ % perl Makefile.PL % make % make test % sudo make install ChirpUserStreamsって何?という方はこちらを Twitterの新しいStreaming API「ChirpUserStreams」がすごすぎる件 - すぎゃーんメモ これを簡単に使えるようにしたモジュールです ドキュメント % perldoc AnyEvent::Twitte
Twitterの新しいStreaming API「ChirpUserStreams」がすごすぎる件 - すぎゃーんメモ
最近発表されて、一部で話題を呼んでいるTwitterの新しいStreaming API「ChirpUserStreams」。 まだdeveloperへのpreviewリリースということでプロダクトに使うようなことはできないけど。 http://apiwiki.twitter.com/ChirpUserStreams 今までのStreaming APIでは基本的に public timelineから、指定したキーワードを含む発言を拾う 指定したユーザーの発言を拾う というものだった(はず)。検索系としては便利だけど、home_timelineのように自分がフォローしているユーザーの発言をStreamingで得ようとすると全idを繋げたものをリクエストパラメータとして送らないといけなかったりで、あまりカッコよくない形になってしまっていた。 ところが今回使えるようになった「ChirpUserSt
にひりずむ::しんぷる - Twitter でどんくらい話題になっているかをなんとなく可視化できる retweet button を導入してみた
タイトルのまんまですが。ググッた感じでは、2個ぐらいあったのですが、後者の Topsy の方をくっつけてみました。 TweetMeme Button | Tweetmeme Help Topsy Labs ? Topsy Retweet Button for Web Sites しかし、どっちのサイトも見た目がそこそこいいのに、faviconがないのがちょっと残念ですね。 で、以下のような感じのを設置したいとことに書いておけばOkです。topsy_url の値に permalink を指定します。 livedoor blog だったら <$ArticlePermalink$>。 <div style="float: right"> <script type="text/javascript"> var topsy_style = "small"; var topsy_order = "co
Twitterのコマンドを全然知らなかったことを今さら知った件 - あと味
Twitterのヘルプ読もうと思って以下のエントリーを見たんですけど、今さら知ったコマンドが多々ありました。 Twitter Help Center | Twitter SMS Commands Twitterのテキストボックスに入力するコマンドは、「@username + message」と、「d username + message」と、新しく導入された「RT username」いや、公式フォーマットのRTはやっぱ知らなかった。くらいは知っていましたが、こんなに多くのコマンドがあったとは。。。 TLに流れないから知らないだけのTwitterの一般常識なのか、みんな知らないのかはわかりませんけど、少なくとも私は知りませんでした。 APIはかなり多くのコマンドに対応していますが、テキストボックスに入れて使うこともできたんですね。 とりあえず、備忘録代わりにメモしとこうと思います。以下のコマ
Twitter、有料アカウントの開始の準備が整う at ブログヘラルド
11月 25日 at 12:30 pm by アンディ メレット - 創設者のビズ・ストーン氏によると、満を持してTwitter（ツイッター）は年末を迎える前に有料サービスを展開するようだ。 詳細は公表されていないものの、ストーン氏はBBCのインタビューの中で、オプションの有料機能には、高度な分析サービス、そして、アカウントおよび訪問者の情報提供が含まれると示唆している。 また、ツイッターは複数のメディア企業と提携を結ぶ可能性もある。同氏は、“素晴らしい提携関係”により、ツイッターのリアルタイム且つユーザー作成型のアップデートに、報道機関が背景および専門的な知識を加えると主張している。 さらに、ビズ・ストーン氏はニュース・コーポレーションが打ち出した、保有するオンラインコンテンツの大半の閲覧を有料化する方針を批判し、「この状況を今までとはまったく異なることを行い、門戸を閉ざしてある程度の収
ゆーすけべー日記
サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
てれツイ.com (β)