Python Webスクレイピング テクニック集「取得できない値は無い」JavaScript対応@追記あり6/12 - Qiita
この記事について 本記事はPythonを使ったWebスクレイピングのテクニックを紹介します。 ※お酒飲みながら暇つぶしで書いたので割と適当です。 今回紹介するテクニックを使えれば経験上大体どんな値でも取得でき、これらはRubyだろうがGolangだろうが同じ様に動作します。 Webスクレイピングが出来ないサイトがあればコメントにて教えてください。全身全霊を持ってやってみます。 また、Webスクレイピングをしたことが無い方は下記の記事を読むことをお勧めします。 Python Webスクレイピング 実践入門 - Qiita 追記更新 6/12 コメントに対応しました。 はじめに 注意事項です。よく読みましょう。 岡崎市立中央図書館事件(Librahack事件) - Wikipedia Webスクレイピングの注意事項一覧
Square の採用プロセスについて
2015年からサイボウズでAndroidデベロッパーとして勤めていたフランス人なのですが2017年の秋にAndroidデベロッパーとして Square社に応募しました。応募する側からして採用プロセスは合理的でやりやすかったので、この採用プロセスが他の企業にも似たような形で広まっていくと良いなと思って Square の採用プロセスを説明するためにこの文章を書きます。 応募インターネットで求人を見かけた事から始まりました。Android開発の世界じゃSquareが提供してるライブラリは誰でも見たことがあると思います。正直なところ、直接応募するのには不安があって、先に SNS 上で Squareの社員に声かけて話を聞いてみようと考えました。相談にのってくれた Squareの社員は親切な人で話が終わるところで「よかったら連絡先を教えてもらえばうちの人事から連絡がいくようにお願いするよ」と言ってくれ
クラウドを支えるこれからの暗号技術
『クラウドを支えるこれからの暗号技術』 本書は公開鍵暗号に続く、新しい暗号技術を紹介します。 対象読者 『暗号技術入門』（結城浩）を読んで最先端暗号理論はどうなってるのだろうと興味を持った方 「入門書に載っているRSA暗号は安全ではないので使ってはいけない」ということを知らない方 Hash(secret key||message)で認証してはいけない理由（SHA-2とSHA-3の違い）を知りたい方 楕円曲線暗号の楕円曲線を直感的に把握したい方 最近ちょいちょい聞く「準同型暗号」って何だろうと思っている方 楕円曲線といえばy2 = x3 + ax + bという式が唐突に出てくるけど何故なのと疑問に思った方 EdDSAって何? ECDSAの書き間違い?と思ったらEdwards曲線が出てきて、それ何だろうと思った方 暗号で使われる数学の話をきちんと理解したい方 などなど。 購入 秀和システム 正
TypeScriptの型入門 - Qiita
TypeScriptは型がついたJavaScriptです。プログラミングにおいて型があることの恩恵は大きく、近頃AltJSの代表格として人気を集めています。TypeScriptはもともと型のないJavaScriptで書かれるコードに型を付けることを使命としていることもあり、たまに変な型が追加されます。例えばTypeScript2.8で追加されたconditional typesはずいぶん注目を集めました。これによってTypeScriptの型システムの表現力が広がりましたが、一方でTypeScriptを書いている人の中には、よく分からない型が増えてついて行けない、一部の人たちが長くてよく分からない型定義を書いて喜んでいるだけと思っている方もいるのではないでしょうか。実際、健全にJavaScriptを書いていれば、自分でそのような変な型を書くことはあまり多くありません。 そこで、この記事ではT
News Up 緊急現場取材 “同じ住所に250世帯” 現場に行ってみた | NHKニュース
「あす岐阜に行ってくれない？」。そんな指示を受けた私。事件？災害？何の取材かと尋ねると見せられたのがこのニュース。『岐阜市の所有する土地に住むおよそ２５０世帯がまったく同じ住所になっていて郵便物を配達する際などに混乱が生じているため市は新たに住居表示を割りふることになった』。２５０世帯が同じ住所ってどんな所なのだろうか。現場で話を聞いてみたところ意外な声が。（ネットワーク報道部記者 栗原岳史） 東京から新幹線～在来線と乗り継いでＪＲ岐阜駅に到着。さらに駅前からバスでおよそ２０分余り。長良川を渡って着いたのは静かな住宅街でした。東を見れば、織田信長が居城とした名城、岐阜城も眺めることができます。 この地の「鷺山１７６９番地２」、同じ１つの住所におよそ２５０世帯もが暮らしているのです。 同じ住所に２５０世帯！？広さは東から西の端まで歩いて４００歩余りでした。 早速出会ったのは、この地区の７０歳
ユニバーサルWindowsプラットフォーム - Wikipedia
ユニバーサルWindowsプラットフォーム（Universal Windows Platform：ユニバーサル ウィンドウズ プラットフォーム、略称：UWP）とは、異なるデバイス向けに提供されるMicrosoft Windows用のアプリケーションソフトウェアを共通の基盤上で動作させることのできる、統合されたプラットフォームのことである。 概要[編集] ユニバーサルWindowsプラットフォームは、Windows 10にて導入された、様々なデバイス上で動作するアプリケーションを単一のフレームワーク上に統合する仕組みである。ターゲットデバイスを設定することで、すべてのデバイスで共通となる基本APIセットに対してデバイス固有のAPIセットを付加する形で、デバイス固有の機能を使ったUWPアプリを開発することができる[1]。 UWPアプリの開発には、主にC#/VB.NET/C++[注釈 1][2]
事業会社のデータサイエンティスト 会社を退職しました
元々コンサル会社から事業会社のほうでデータサイエンティストをやるようになって１年経つが辞める。そのきつかったことを匿名という場所で卑怯ながらも話したいと思う。 元々私は大学院でそこそこ統計をやってきてから、コンサル会社に行きデータサイエンティストとして事業会社へ移った口だ。 根本的にデータサイエンティストとしての資質としてざっくりいうと以下の３つが必要だと思われる。 1. 統計能力関係及びそのプログラミングや可視化能力 2. KPI設計及び事業からのKPIへの落とし込みからそのKPIからどう事業繋がるかというビジネス設計能力 3. 上を基にしたコンサル能力 私能力的には１がやや強く、その次に２がまぁまぁそして３はまだまだといった所で事業会社でデータサイエンティストとして孤軍奮闘をすることになった。 入社理由データはあるが、なかなか活用できていないこともあり、分析から企画から関われるという事
色鉛筆で描いた「宝石」が目を疑う美しさ 「本物にしか見えない」「色鉛筆でここまで描けるのか」と驚く声も
色鉛筆で描いた「宝石」がすごいとTwitterで話題になっています。驚きのリアル感と美しさ……！ 描いた紙と色鉛筆を並べて写真に撮ったものが投稿されているのですが、紙の上に本物の宝石を乗せたようにしか見えないそのクオリティーにビックリします。光に当たって反射するような輝きと同時に、吸い込まれそうな深い透明感も表現されていて、色鉛筆だけで描いたとは思えない“絵の宝石”に感動を覚えます。 そこにあるようにしか見えない「サファイア」 まぶしいほど美しく輝く「ダイヤモンド」 「サファイア」「ダイヤモンド」「トルマリン」など、それぞれで色と形の違う宝石を描いていて、いずれも触ってみたくなる質感と立体感を感じる美しさ。一体どう描いているのか想像も難しい……！ 立体感が素晴らしい「トルマリン」 表現が難しそうな「クリスタル」もこのリアルさ……！ 投稿したのは高校生で現在15歳の「長靴をはいた猫」（@er
風邪に抗生物質、使わない病院に報酬 耐性菌の抑止策：朝日新聞デジタル
厚生労働省は誤った使い方によって薬が効かなくなる「耐性菌」の広がりを抑えるため、医師が乳幼児の風邪や下痢に抗生物質を使わずに適切な説明をすれば、医療機関に報酬を支払う新たな仕組みを設ける。４月からの診療報酬改定に盛り込む。 国内でよく使われている抗生物質には、セファロスポリン系のフロモックスやフルオロキノロン系のクラビット、マクロライド系のクラリスなどがある。肺炎などを引き起こす細菌を壊したり増えるのを抑えたりするが、ウイルス性の風邪やインフルエンザには効かない。耐性菌は人の体内や環境中に一定数存在する。抗生物質を使って他の菌を死滅させても、耐性菌は生き残り増えてしまう。 厚労省によると、２０１５年に全国の病院で見つかった黄色ブドウ球菌の４８・５％が耐性菌だった。厚労省はこの割合を２０年に２０％以下とする目標を掲げ、１７年には抗生物質適正使用の手引を作った。軽症の風邪や下痢に使わず、細菌感
W3C、「WebAssembly」仕様について初めてのワーキングドラフトを公開
W3CのWebAssemblyワーキンググループは、「WebAssembly」仕様に関する初めてのワーキングドラフトを公開した。WebAssemblyはすでに主要なブラウザで実装が進んでいるため、このまま順調に勧告となるのではないか。 マイクロソフト、Google、Mozilla、Appleなどの主要なWebブラウザベンダが協力して、Webブラウザ上でネイティブコードに近い実行速度で高速に実行できるバイナリフォーマット「WebAssembly」の開発に取り組んでいます。 すでに実装の面では、昨年2017年11月の時点でChrome、Firefox、Safari、Edgeの主要なWebブラウザでのWebAssembly対応が揃っていますが、同時にW3CにおいてWebAssemblyの標準化作業が進められています。 そのW3Cから、WebAssembly仕様について初めてのワーキングドラフトが
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
『東大ら、睡眠中に脳がクールダウンされる仕組みを解明- 生物が眠る謎に迫る』へのコメント