使いやすさを重視したHTMLスクレイピングライブラリを作った - 純粋関数型雑記帳
TL:DR レポジトリ https://github.com/tanakh/easy-scraper ドキュメント 背景 このところ訳あってRustでHTMLからデータを抽出するコードを書いていたのですが、 既存のスクレイピングライブラリが（個人的には）どれもいまいち使いやすくないなあと思っていました。 HTMLから望みのデータを取り出すのはいろいろやり方があるかと思いますが、 ツリーを自力でトラバースするのはさすがにあまりにも面倒です。 近頃人気のライブラリを見てみますと、CSSセレクターで目的のノードを選択して、 その周辺のノードをたどるコードを書いて、 欲しい情報を取り出すという感じのものが多いようです。 RustにもHTMLのDOMツリーをCSSセレクターで検索して見つかったノードをイテレーターで返してくれたりする、 scraperというライブラリがあります。 例えば、<li>要素
ラズパイ4で作るディスプレイ付きKubernetesクラスター - Qiita
完成品 まずは完成したクラスターをご紹介します。 関連記事 2020/02/25 追記 ラズパイk8s用の監視システム(Node Exporter + Prometheus + InfluxDB + Grafana) Raspberry Pi上のDockerで動くイメージのCIでのビルド方法 モチベーション つい先日会社のサポート制度である「テックサポート制度」の対象にRaspberry Piが追加されているのを発見しました。 これは使わない手はないなと思い最上位モデルの4GBを3台購入し、長年の悲願であったKubernetes Cluster on Raspberry Piを構築することができました。 ちなみに、テックサポート制度に関しては会社の 開発者ブログ に詳しく書かれています。 （宣伝ノルマ達成） これがやりたかっただけ コンセプト ラズパイk8sクラスターなんて先人達が幾度とな
敦賀原発２号機 資料書き換え「ひどい」規制委員長 | NHKニュース
福井県にある敦賀原子力発電所２号機について、原子力規制委員会の更田委員長は運営する日本原子力発電が原発の真下を通る断層に関する資料に書き換えなどがあった問題に触れ、「データに直接、手を加えるのはひどいことだ」などと会社の対応に厳しい見解を示しました。 これについて、規制委員会の更田豊志委員長は、12日の定例会見の中で「ちょっとひどいというのが率直な感想だ。一次情報のデータに新たに書き足すなら理解できるが、直接、手を加えたのは問題。科学や技術について、最も初歩的な部分が欠落している」と会社の対応に厳しい見解を示しました。 そのうえで、日本原電に対して経緯を含めた説明を求めるとしました。 資料について、日本原電は「誤解を与えたところはプロセスが分かるよう、新旧のデータを今後しっかり説明していきたい」などとしていて、14日に改めてデータなどについて説明するとしています。
数億円規模の案件を たった二人で開発させられた話
# 数億円規模のプロジェクトをたった二人で開発させられた話 先日、関わっていたプロジェクトを抜けることになりました。 原因はもちろん炎上によるものなんですが、これがもう炎上すべくして炎上したようなぶっ飛んだプロジェクトでしたので、 ここで吐き出させて下さい。 # 20数名のメンバーの一人だったはずが、いつの間にか総勢一人になっていた 僕の仕事のスケジュールに空きができ、週３日程度の仕事を探していた頃、Twitterから開発案件の依頼がきた。 内容はよくあるシステムのリプレース案件。 開発メンバーは既に５人程度集まっており、その後２０人ほど合流するとのことで、総勢２０名以上の開発メンバープロジェクトだ！こんな規模の新規開発なんて初めてだからワクワクするぞ！ と思っていたら、PHPの案件なのにほとんどがJavaの人だったのでメンバーとして数えられず、参画する前に去っていってしまった。 合流する
「ヤクザのやり口や…」東京都のベビーシッター1時間150円を利用すると翌年税金爆死が待っている件【巻末緊急追記あり】
キャリコネニュースの試算記事と、昨年から声を上げておいでの方のブログ記事（続報）をリンクしておきます。 （2020.02.13. 19.29.追加） リンク キャリコネニュース 本当に損なの？東京都のベビーシッター1時間150円の支援事業 実際に計算してみた 画像はキャプチャ 東京都のベビーシッター利用支援事業がネット上で物議を醸している。都は来年度から、利用者負担額を1時間あたり150円に減額することを発表。一見格安に思えるが、利用することで翌年の所得税が増える仕組みになっていることから、ツイッター上では「ヤクザのやり口」「詐欺でしょ」といった声であふれている。 キャリコネニュース編集部では、都の担当者に取材した上で、助成金をもらうと本当に損をするのか試算してみた。 「トータルで見れば、助成を受けたほうが安く済みます」と都担当者 同事業は少子化対策を目的に、 4 リンク にこいち育児 9
日本青年会議所のアカウントに批判殺到、Twitter社は「想定外」。両者の見解は？
Search, watch, and cook every single Tasty recipe and video ever - all in one place! News, Politics, Culture, Life, Entertainment, and more. Stories that matter to you. 日本青年会議所のアカウントに批判殺到、Twitter社は「想定外」。両者の見解は？日本青年会議所は「憲法改正議論を起こす」目的で企画したアカウントが中国、韓国や報道機関への誹謗中傷などを繰り返し、謝罪に追い込まれた経緯がある。こうしたことから、「リテラシー」啓発を巡るJCとTwitterのパートナーシップそのものを疑問視する声が上がっている。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
The Twelve-Factor App on AWS