Portia - DOMで指定できるスクレイピングエンジン
MOONGIFTはオープンソース・ソフトウェアを紹介するブログです。2021年07月16日で更新停止しました Web APIがどれだけ広まろうともスクレイピングの需要はなかなかなくなりません。特にWebサイトがシステム化されるのに合わせて、画面構成が一定のテンプレートに沿って出力されるようになったので、より定型で情報が取得できるようになっています。 今回紹介するPortiaはスクレイピングの基本である取得場所の設定をビジュアル的に行えるソフトウェアです。 Portiaの使い方 PortiaはScrapingHubというWebサービスの中で一機能として提供されています。 こちらがメイン画面です。蜘蛛がモチーフです。 任意のWebサイトを表示します。 そして欲しい情報があるDOMを選択します。 重なって取得もできます。例えばタイトルとリンクといった具合です。 右側に設定が一覧表示されます。 テ
シェルスクリプトの処理境界が鮮明になる「名前付きブロック記法」なるものを考えてみた
シェルスクリプトは長くなると処理の境界が不鮮明になりがち。 コメントで処理の境界を表現する工夫はよく見かけるが、もっと良い方法はないか考えてみた。 :コマンド、&&演算子、複合コマンド()や{}を組み合わせて書くと、処理の境界線がはっきりする。
摩訶不思議な世界を宇宙ノームがゆく。チェコ産アドベンチャーゲーム『Samorost 3』の配信がSteamなどで本日スタート - AUTOMATON
チェコのゲームデベロッパー「Amanita Design」は、『Samorost 3』の配信をスタートした。価格は2200円/19.99ドル、Steam/GOG.com/Humble Storeにて購入可。また800円/6.99ドルでサウンドトラックおよびアートブック、それらを収録した「Cosmic Edition」が2760円/24.99ドルで販売されている。 先月公開されたリリース日アナウンスのトレイラー 「Amanita Design」が手がけてきた『Samorost』シリーズは、白い小人のような宇宙ノームが摩訶不思議な宇宙ワールドを探検するクリック＆ポイント形式のアドベンチャーゲームだ。初代は無料で公開されたブラウザゲームで、2009年には有料タイトルとなる続編『Samorost 2』が発売。自然で覆われた宇宙惑星に空き缶のようなガラクタを融合した独自の世界観が麻薬的に魅力で、プレ
Goのプログラミングパターン
QCon London 2016において、Peter Bourgon氏は「Successful Go Program Design, 6 Years On」というプレゼンを行い、Goでプログラミングするときに使うべきパターンと避けるべきパターンについて説明した。 GOPATH: 環境変数PATHにGOPATH/binを加え、関係バイナリを簡単にアクセスできるようにする。Bourgon氏は一つのグローバルなGOPATHを使うことを推奨する。たいていの場合、これでうまくいく。自分のコードと外部依存のコードを明確に分離したい人は、2つのGOPATHを作るのが好みだろう。gbを使って、環境変数をセットせずにプロジェクトごとに構築するという選択肢もある。 リポジトリ構成: リポジトリの構成はプロジェクトに依存する。プライベートなプロジェクトで決して公開しないなら、好きな構成で構わない。オープンソース
NASAが証明済み。「植物の根」がフィルターになった空気清浄機 | ROOMIE（ルーミー）
人間にとって、“呼吸”は生きるために欠かすことができません。ヨガや瞑想でも、呼吸が心身に与える影響は図りしないもの。 テレビを見ていても、仕事をしていても、寝ているときでさえ、人々は常に呼吸をして肺に空気を送り込んでいます。そう考えると、多くの人が「空気の質」を気にし始めるのは当然のこと。しかも、空気流動の低い室内では、屋内よりも5倍以上も空気が汚れているという研究結果もあるとか。 そこで活躍するのが「空気清浄器」です。ただ、空気清浄機ってフィルターの交換が面倒だったり、置く場所がなくてちょっとジャマだったりするんですよね……。 そんな中、まったく新しいコンセプトの「空気清浄機」がクラウドファンディングに登場し話題になっています。 観葉植物がいっしょになった空気清浄機「Clairy」。プロジェクトが公開されるや、あっという間に目標金額を達成し、現在はどこまで資金を調達できるかに注目が集まっ
NPMとleft-pad : 私たちはプログラミングのやり方を忘れてしまったのか？ | POSTD
さあ開発者のみなさん、真面目な話の時間です。読者の皆様はおそらくすでにお気づきでしょうが、今週、ReactやBabelやその他大量の有名なNPMパッケージ群が壊れました。そしてその原因は少々驚くようなものでした。 ReactやBabel、その他のパッケージが依存する、left-padというシンプルなNPMパッケージがあります。この記事を書いている現段階で、このパッケージは GitHub上で11 star となっています。このパッケージは全体で 11行のシンプルな行があり、文字列の左を詰める基本的な関数が実装されている というものです。上記のリンクが消えた場合に備えて、コード全体をいかに掲載しておきます。 module.exports = leftpad; function leftpad (str, len, ch) { str = String(str); var i = -1; if
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Missing Link - IFTTT
https://ift.tt/1RGsgzc
Stack Overflowの開発者サーベイ2016年版
GitHubは課題とプルリクエストにフィードバックを提供するリアクションを提供する