twitter検索のクロール方法について - 不可視点
twitter検索はpublic_timelineをスクレイピングする方法でポストを収集していました。 これはうまくいっていたのですが3月のはじめにAPIによるアクセスに続いて通常ページもキャッシュされるようになり、ポストの取得がとびとびになってしまいました。影響はかなり出てしまい、回収率は1/10程度に落ち込んでしまいました。 代替策 TwitterはData mining feedという600ほどのポストを一度でもらえるAPIを提供していてポストを多く集めたい人はそれを使うようにというアナウンスをしています。しかしこれもキャッシュが効いているようですからそれほど改善しないのではないかと思い試していません。 また、既に事実上日本語のみを検索対象にするサービスになっているので日本語ユーザーのポストだけもらえればいいかと思い、日本語ユーザー（7万人前後）をRSSで取得する方法を考えましたが、
超交流会2010 (06-27) ★ - 京大情報学同窓会 超交流サイト
京都大学大学院情報学研究科は1998年4月に設立された比較的新しい独立大学院組織です。同窓会組織も同様、2000年4月に設立された若い組織です。 2010年は「同窓会設立10周年」の年です。昨年の『超交流会2009』に引き続き、今年も盛大に、そしてオープンに「超交流」の場を作ります。詳細は、随時、当ホームページでお知らせします（企画持込歓迎）。今回は「クラウド」を主テーマに、情報学の現在・過去、そして未来を展望する企画を展開していきます！ 日時： ２０１０年６月２７日（日） 10:00-18:00 (9:00受付開始) 場所： 京都大学百周年記念館 map access 百周年記念ホール（時計台１階） 国際交流ホールI・II・III＋？（時計台２階） 定員： 500名 （どなたでも参加可能です） 費用： 会員（2000円） 学生（2000円） 一般（4000円） タグ： #SN2010 （
MySQL » データ操作（SQL文） » データ更新（UPDATE文） | PHP & JavaScript Room
PHP、JavaScript、CSS、Webページ埋め込みによる音声・動画配信方法など、実用的なプログラミング・テクニックを解説UPDATE テーブル名 SET カラム名=`値`[, カラム名=`値`, ... ] WHERE 条件式; 複数のデータを更新する場合は、カラム名='値'の部分をカンマ区切りで指定します。 WHERE節を使用すれば、特定のレコードだけではなく、テーブル全体で条件に一致するデータの一括更新も簡単です。 # tbl_Addressテーブルの内容 mysql> SELECT * FROM tbl_Address; Enter +--------+---------+--------+-------------------+ | UserID | Zip | Ken | Addr | +--------+---------+--------+-------
データベースを利用したWebPageを作成
データベース作成 MySQLを用いてデータベースを作成します。 まず、test_dbを作成する為に、先ほど設計したデータベースのテーブル構成を*.sqlファイルに記述します。 test_db_tbl.sql CREATE TABLE test_db ( id INTEGER NOT NULL AUTO_INCREMENT, name VARCHAR(100), mail VARCHAR(100), office VARCHAR(100), memo VARCHAR(100), primary key (id) ); mysqlコマンドを用いてデータベースを作成します。 # mysqladmin -h srv create test_db mysqlコマンドを用いて作成したデータベースに設計したデータベースのテーブル作成します。 # mysql test_db < test_db_tbl.s
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
livedoor ReaderのクローラとStreaming APIなどの話
スルガ銀行
ITビジネス情報サイト - 週刊BCN+