Node.jsで超簡単にスクレイピングを実装してみる - もやもやエンジニア
スクレイピングとは Webスクレイピングとは、WebサイトからWebページのHTMLデータを収集して、特定のデータを抽出、整形し直すことである。 http://www.sophia-it.com/content/Webスクレイピング よそ様のサイトのHTMLから情報を取得・解析して必要なデータを取得するという手法ですね。使用上の注意としてはページの内容をまるごと抽出してコピーサイトを作ったり、過剰にアクセスをして取得先のサーバーに負荷をかけるようなことはやめましょう。すんごい数のリクエストを投げたらDDoS攻撃と変わらなくなってしまいます。 Node.jsで実装してみる だいたいJavaでもRubyでもPHPでもスクレイピング用のライブラリが用意されているようですが、今回はNode.jsで実装します。 今回はサンプルなのでこのブログの去年の記事一覧から記事タイトルをひっぱってみます。 スク
Node.js — Node v0.12.0 (Stable)
We are excited to announce the availability of Node.js v0.12! It has been a long process, and we want to thank contributors and all of the community who waited patiently for this event. Node.js has such a vibrant and enthusiastic community, and we're very lucky to have you all supporting us. Node.js has seen many changes between v0.10 and v0.12. There is a listing of changes documented on the wiki
Child process | Node.js v22.5.1 Documentation
Source Code: lib/child_process.js The node:child_process module provides the ability to spawn subprocesses in a manner that is similar, but not identical, to popen(3). This capability is primarily provided by the child_process.spawn() function: const { spawn } = require('node:child_process'); const ls = spawn('ls', ['-lh', '/usr']); ls.stdout.on('data', (data) => { console.log(`stdout: ${data}`);
Node.jsで外部のコマンドを実行する方法: child_processを使う - memo.yomukaku.net
Node.jsのスクリプトの中で外部のコマンドを実行する方法を書きます。 JavaのProcessBuilderや、Rubyのsystem、execと同じかんじで、node.jsのスクリプトの中で外部のコマンドを実行します。 コア・モジュールのひとつであるChildProcessを使用し、child_process.execとchild_process.spawnを使った二通りの方法を書きます。child_process.exec(command, [options], callback)を使う もっともシンプルな方法です。シェルでpwd -Pを実行するのと同じことをnode.jsのスクリプトの中で実行するコードを作ってみます。 var exec = require('child_process').exec; var child = exec('pwd -P', function(err
橋本商会 » ndenvインストールした
Node.js版のrbenvのようなやつをMacにインストールした。 複数バージョンのnode.jsをホームディレクトリにインストールでき、アプリ毎に別バージョンのnode.jsを使える。 node.jsのバージョン管理のためにndenv & node-buildを作ったのとanyenvの宣伝 – As a Futurist… https://github.com/riywo/ndenv git clone git@github.com:riywo/ndenv.git ~/.ndenv mkdir .ndenv/plugins git clone git@github.com:riywo/node-build.git ~/.ndenv/plugins/node-build インストール機能はnode-buildというプラグインにわかれている。 .bash_profileや.zshrcに設定
npmとbrowserifyを使ったクライアントサイドのウェブアプリ開発
YoutubeとVimeoの検索結果のRSSをまとめてOPMLで取得できるサイトを作った | Web scratch で公開した Tech Video RSS Searcher はbrowserifyを使って作ったので、その辺の開発フローについての記事です。 browserify って何? browserify はNode.jsスタイルで書かれたモジュール(CommonJS)を ブラウザで利用できるように変換するコマンドラインツール(Nodeモジュール)となっています。 又、node.jsのCore Modulesのshimが用意されていて、 npmで公開されているnode.js向けのモジュールも一緒に変換してブラウザで動かすことが出来るようになっています。(普通に require で読みこめば勝手に変換されます) 原理的に無理だったり全てのモジュールが動くわけじゃないですが、 その辺の互
fs.watchFileを使ってみた - Qiita
fs.watchfileとは? ファイルの変更を監視して、変化が起きたらcallback関数を呼び出して教えてくれる。node以外では見たことない気がするのは、不勉強かしら。 とにかく、そういうファイルの変更を検知するやつを作りたかったので、こまかい動きを調べてメモしました。 File System Node.js v0.8.16 Manual & Documentation 実験に使ったコード var fs = require('fs'); var filepath = 'message.txt'; // filepathが存在しなくても、watchFileはエラーとか出してくれないので、 // 先にfs.existsで調べておく if (!fs.existsSync(filepath)) { console.error('%s doesn\'t exist.', filepath);
Domain im Kundenauftrag registriert
Warum wird diese Seite angezeigt? Diese Seite wurde automatisch erstellt. Sie wird bei jeder neuen Domain hinterlegt und zeigt, dass die neue Domain erreichbar ist. Ohne diese Platzhalter-Seite würden Besucher eine Fehlermeldung erhalten. Als Kunde von united-domains können Sie diese Domain in Ihrem Domain-Portfolio jederzeit selbst online konfigurieren (z.B. Web-Weiterleitungen, E-Mail-Einstellun
[Mac] Node.js と npm をインストールする方法 [Homebrew]
Macに Node.js と npm をインストールする方法を調べたのでメモ。 node.js を homebrew でインストールする $ brew install node 正常にインストールされたことを確認します。 $ node -v v0.4.11 npm を homebrew でインストールできない… Homebrew の npm formula は、収録のポリシーに沿わない（ https://github.com/mxcl/homebrew/wiki/Acceptable-Formula ）として最近、取り除かれたそうです。 メッセージにあるように curl http://npmjs.org/install.sh | sh でインストールすべきみたいです。 $ brew install npm Error: No available formula for npm npm ca
gruntをインストールする - Windows Vista | jekylog
ちなみにMacも下記とほとんど相違ないけどハマったんで一応メモってる gruntそのものはtakazudoさんのhamalogで知ってたけどなかなかどういう場面で必要になるか分からなかったので手を付けれなかったけど、実現したい事の解決方法としてマッチしたので参考にさせてもらいながらgruntをインストールしてみた。 node.jsとnpmをインストール ネットの情報ではnpmをWindowsで使うには結構手法が違ってたりしてたけど小粋空間さんによると公式のパッケージをインストールすればデフォで入ってるっぽい。 「npm」という、Node.js用のパッケージマネージャも一緒にインストールされており（ネットで調べると以前は別にインストールする必要があったようですが不要）、同じフォルダにある「npm.cmd」が該当します。 ちなみにコマンドプロンプトで
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.nodegit.org/nodegit/
http://breach.cc/
Rendr入門: サーバサイドで(も)動かす、Backbone.js
http://blakeembrey.com/articles/introduction-to-browserify/
Japan Node.js Association