ヘッドレスブラウザ(Chrome)を使ってSPAをスクレイピングする - Qiita
一般的なスクレイピング手法とその問題点 スクレイピングというと、HTTPクライアントライブラリを用いてHTML取得し、HTML/XMLパーサーで解析するというのが一般的だと思います。 この手法の場合、以下の場合にうまく処理できません。 ターゲットのページがJavaScriptにより動的にDOMを操作する場合 HTML/XMLパーサーが取得したHTMLを正しく解釈できない場合(正しくないHTMLでもブラウザはなんとか処理するが、パーサーライブラリは正確なHTMLでないと処理できないことがある) 特に問題になるのは前者でしょう。最近のWebサイトではJavaScriptでDOMを操作することは珍しくなくなってきています。SPAであればなおさら難しく、もはやこういった手法によるスクレイピングは不可能でしょう。 ヘッドレスブラウザによるスクレイピング 動的なDOMやパーサーがうまく解釈できないとい
Make: Japan | タミヤ「カムプログラムロボット工作キット」は3,456円という価格でロボットプログラミングを普及させるきっかけになるか
2020年からのプログラミング教育の必須化を受け、一部の学校や塾ではプログラミング教育が始まっている。とりわけ人気が高いのは、レゴ・マインドストームやWeDo 2.0、KOOVなど、ロボット工作とプログラミングを組み合わせた教材だ。これらのロボットプログラミング教材は数万円台と高価で気軽に手が出せなかったが、徐々に安価なロボット工作キットが出回り始めてきている。そのひとつが、タミヤから8月12日ごろより全国発売予定のプログラミング教材「カムプログラムロボット工作セット」。3,456円と手ごろな価格で、コンピューターなしでロボットのプログラム制御を体験できるのが特徴だ。 ロボット本体は、三角形のクローラー（キャタピラ）で駆動し、左右のクローラーがモーター2個とつながっているだけのシンプルな構造で、はめ込みとねじ止めで簡単に組み立てられる。 本体底面。単三乾電池1本を使用し、スイッチを入れると
科学者が一般人に教える「どのように科学論文は読むべきなのか」の11手順
科学に関するニュースを正しく理解するためには、ニュースの元となった科学論文をダイレクトに読む必要があります。科学的な知識や素養がない一般人が、どのように科学論文を読むべきなのかについて、現役の科学者が11の手順を解説しています。 Impact of Social Sciences – How to read and understand a scientific paper: a guide for non-scientists http://blogs.lse.ac.uk/impactofsocialsciences/2016/05/09/how-to-read-and-understand-a-scientific-paper-a-guide-for-non-scientists/ インディアナ大学で遺伝学と生物人類学の博士号を取得し、カンザス大学人類学部の准教授を務めるジェニファー・
子供のいる家庭に3Dプリンタを導入したら毎日が充実してきた - ソレドコ
こんにちは、石川と申します。普段はデイリーポータルＺというサイトで編集をやっております。 拙宅には、「おもちゃが無限に出てくる機械」があります。 機械から出てきたおもちゃの数々です（おもちゃ以外の物もあるけど）。もちろんこれはごく一部です。なんたって無限なので。 ちょっと想像してみてほしいんですけど、例えばあなたの趣味がカメラだったとするじゃないですか。一眼レフのカメラとかレンズとかが無限に出てくる機械があったらどうします？ 端的に言って最高じゃないですか。もちろん、そんな機械はないです。でも、あなたに子供がいた場合、子供にそれを体験させてあげることは可能です。なぜなら「おもちゃが無限に出てくる機械」があるから。 で、その「おもちゃが無限に出てくる機械」の本体が、こちらです。 机の上にある青いやつ。3Dプリンタといいます。普通のプリンタは紙に写真や文字を印刷しますが、3Dプリンタは簡単に言
［Slackbot大全］63種類の事例・ツールをまとめて紹介！ botを活用してSlackを便利に【2017夏】 - エンジニアHub｜Webエンジニアのキャリアを考える！
［Slackbot大全］63種類の事例・ツールをまとめて紹介！ botを活用してSlackを便利に【2017夏】 Slackは、ChatOpsとの相性の良さから、エンジニアにも愛されるビジネスチャットツールです。本稿では、Slackを活用している28社1団体にアンケートを実施し、計63種類のbot事例・ツールをまとめて紹介します。 Slackは、エンジニアにも愛されるビジネスチャットツールです。ChatOps（チャットツールを活用してオペレーションの最適化・省力化を図ること）との相性の良さから、もはやSlackなしの業務は考えられない！ という方も少なくないでしょう。 Slackには、リマインドなどを実行するslackbotアカウントが最初からいるだけでなく、利用者自身がそれぞれの環境・業務内容に即したbotを自作でき、発言に自動応答してくれるものから業務の自動化まで、さまざまなbotをチ
「現場で役立つシステム設計の原則」はプログラミング設計の普遍的な教科書 - ビープラウド社長のブログ
日本のDDD（ドメイン駆動設計）界の父ともいえる増田亨さんが著した「現場で役立つシステム設計の原則」を頂いたので、早速拝読させていただきました。 本書をおすすめしたい人 本書は、システム開発で以下のような問題を抱えている人におすすめです。 既存システムのソースコードの可読性が低く、理解に時間がかかる 機能追加・改修時の影響範囲調査に時間がかかる 機能追加・改修時の工数が予想以上にかかる テストコードが書きにくいソースコードになりがち 機能を追加・改修時の影響範囲が大きくなりがちで、テスト工数がかさんでいる デグレの確認に気を使い、多くの時間をかけている 不具合が発生したときに、調査・解決に時間がかかってしまう 新しいメンバーがプロジェクトに参画した時に、業務知識を伝えるのに多くの手間がかかる これらの問題のために、生み出す価値以上に、仕事時間が増えている このような問題を解消し、変更に強い
最新版で学ぶwebpack 4入門 - BabelでES2017環境の構築(React, Three.js, jQueryのサンプル付き) - ICS MEDIA
最新版で学ぶwebpack 5入門 Babel 7でES2023環境の構築 (React, Vue, Three.js, jQueryのサンプル付き) ECMAScript 2015(略：ES2015)以上の言語仕様でJavaScriptを書くことが、昨今のウェブのフロントエンドエンジニアの基本テクニックです。しかし、ECMAScript 2015以上の仕様のJavaScriptで記述すると、Internet Explorer 11など古いブラウザでは動作しないこともあります。そこでBabelなどのトランスパイラと呼ばれるツールを使って、ES2015〜ES2023の仕様で記述したJavaScriptファイルを互換性のあるECMAScript 5に変換します。 トランスパイラとして一番有名なのが「Babel」というツールです。ただ、BabelにはECMAScript Modules（impo
%25E3%2582%25BB%25E3%2582%25AD%25E3%2583%25A5%25E3%2583%25AA%25E3%2583%2586%25E3%2582%25A3%25E3%2581%25A7%25E9%25A3%25AF%25E9%25A3%259F%25E3%2581%2584%25E3%2581%259F%25E3%2581%2584%25E4%25BA%25BA%25E5%2590%2591%25E3%2581%2591%25E3%2581%25AE%25E5%25BF%2583%25E3%2581%25AE%25E6%258C%2581)
(翻訳)セキュリティで飯食いたい人向けの行動指針 - Got Some \W+ech?
(7/21) コメント欄の指摘を受け英訳追記 前文 本記事はGoogleのセキュリティ担当者 Parisa Tabriz氏(異名: Security Princess)のSo, you want to work in security?を翻訳したものです。 go for it!— Parisa Tabriz (@laparisa) 2016年12月25日 うっ…半年以上前… 意訳したりわからない部分もあったので、原稿の全てを反映できているか自信はありません。元ブログも是非ご一読ください。 —————————————- ここから翻訳 ————————————————- セキュリティ分野(コンピュータ、情報、サイバー…etc)でキャリアを積みたい人からメールをもらうことがある。素晴らしいことだと思う。テクノロジーを安全にしていくパション、創造性を持ち、ハードワークをこなせる仲間はいつだって必要
深層強化学習の動向 / survey of deep reinforcement learning
全脳アーキテクチャ若手の会第28回勉強会 Keywords: DQN, 強化学習, Episodic Control, Curiosity-driven Exploration
機械学習・ディープラーニング・強化学習・ベイズを学べる無料講座 - HELLO CYBERNETICS
はじめに ここでは、機械学習、ディープラーニング、強化学習、ベイズを無料で学ぶことのできるオンラインリソースを項目ごとにまとめておきます。 機械学習 ITについて学べるオンライン講座「Udacity」は、基本的に有料で講座を受けるのですが、中には非常に中身の詰まったコンテンツで、かつ無料の講座も存在します。 以下の講座では、機械学習の各技術に関して広くカバーしており、決定木からサポートベクターマシン、ニューラルネットワークやベイズ、強化学習まで学ぶことができます。 かなりのボリュームなので興味のあるところを学んでいく感じでも良いと思います。 www.udacity.com s0sem0y.hatenablog.com s0sem0y.hatenablog.com ディープラーニング 同じくUdacityからディープラーニングに関する講座です。 多層パーセプトロンから畳み込みニューラルネット
数字や営業が苦手なプログラマだから辿り着いた「エクストリーム経営」 | Social Change!
「心はプログラマ、仕事は経営者」プログラマである自分が働きたいと思える会社を作りたいと思って経営をしてきた。結果として、セルフマネジメントでフラットで自己組織化された組織、最近だとホラクラシーと呼ばれるような経営をしている。 いい会社だと言ってもらえることもあって誇らしく思うのだが、果たして本当に良い会社かどうかはわからない。価値観に合致するプログラマにとっては良いかもしれないけれど、合わない人や他の職種の人にとっては全然ダメな会社かもしれない。 よく取材などでも聞かれるが、今の経営スタイルは、たいそう立派な理念や理想があって実現した訳ではなく、プログラマである自分自身が苦手なことをせずに済むように、逆に出来ることと得意なことは徹底的に活かそうとしてきたに過ぎない。 思い返せば、徹底的に極端にしてきたことが功を奏したことから、この経営スタイルは、もし名付けるなら「エクストリーム経営」と呼べ
国語の先生に教わった共感される読書感想文の書き方 - きなこ猫のスッキリ生活
夏休みの読書感想文は面倒くさいし、文章を書くことは苦手だった。 私が中学生だった時、学校が指定した課題図書の本で読書感想文を書く宿題があった。 これまでは最後のあらすじを読みつつ適当に感想文を書いていたが、ある本を読み終わった時にとても腹が立った。 初めて「この本を読んだ感想を自分の意見を交えて書きたい」と思えた作品だった。 原稿用紙に自分の意見を夢中で書きなぐったら少しスッキリした。 その読書感想文を国語の先生に提出した数日後、なぜか職員室に呼び出されてしまった。 そこで私は先生に「共感される読書感想文の書き方」を教わることになる。 当時のことを思い出しながら先生に言われたことや当時読んだ本についてまとめてみた。 読書感想文に選んだ本は「沈黙」 自分の意見だけを書いては共感されない ①共感と説得力をアップする方法 ②なぜそう思ったかを体験を交えて書く ③相手の意見を尊重しつつ自分の意見を
「認知症でも運転できる」 改正道交法に当事者や医師ら - Yahoo!ニュース
75歳以上の高齢者が運転免許の更新時か違反時に「認知症のおそれあり」と判定されたら、例外なく医師の診断が必要になり、“クロ診断”なら運転免許は打ち切りにー。そんな新ルールがこの3月から始まっている。認知症のドライバーを早期に見つけ、事故を減らす狙いだが、当事者団体や学会などからは「認知症、即免許停止は乱暴」「危険運転との因果関係は証明できていない」といった批判が消えない。運転能力のある認知症の人もいるうえ、高齢者にも豊かな生活を営む権利があるからだ、という。車がないと生活できない高齢者も存在する中、この新ルールをどう捉えたらいいのだろうか。（益田美樹／Yahoo!ニュース 特集編集部）
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
機械学習のためのベイズ最適化入門
ビジネス交渉の本10選 交渉学のプロが選んだ理論5冊と実践5冊
子どもの夏休みの自由研究にかこつけて、本当は親のほうが買いたいロボット／プログラミング電子工作キットいろいろ【リンク集】