東京大学 松尾研究室が主催する深層強化学習サマースクールの講義で今井が使用した資料の公開版です. 強化学習の基礎的な概念や理論から最新の深層強化学習アルゴリズムまで解説しています.巻末には強化学習を勉強するにあたって有用な他資料への案内も載せました. 主に以下のような強化学習の概念やアルゴリズムの紹介をしています. ・マルコフ決定過程 ・ベルマン方程式 ・モデルフリー強化学習 ・モデルベース強化学習 ・TD学習 ・Q学習 ・SARSA ・適格度トレース ・関数近似 ・方策勾配法 ・方策勾配定理 ・DPG ・DDPG ・TRPO ・PPO ・SAC ・Actor-Critic ・DQN(Deep Q-Network) ・経験再生 ・Double DQN ・Prioritized Experience Replay ・Dueling Network ・Categorical DQN ・Nois
名鉄バス(名古屋市)が昨年11月から運行している「香りバス」に疑問の声がでている。夜行バスの乗客にリラックスしてもらおうと始めたのだが、「化学物質に敏感な乗客が利用できない」と患者会から再考を求められた。 名鉄バスは、車両の出入り口付近にアロマ発生器を設置したバスを計3台導入した。ドアの開閉と同時に香りが生じる仕組みで、昨年11月19日の名古屋―福岡線を皮切りに3路線で走らせている。 この取り組みに対し、患者らでつくる「化学物質過敏症あいちRe(リ)の会」(名古屋市)が14日、名鉄バスに見直しを求めて質問書を提出。「化学物質過敏症の患者ら、香料で健康被害を起こす人もいる」「夜行バスは代替手段がなく、特定の人たちが排除される」などと訴えた。名鉄バスの担当者は「質問書の内容を吟味し、今後の対応を考えたい」と話している。 こうした公共空間での「香り」…
学生たちを見ていると、きちんと議論して、きちんと設計して、きちんと何かを作ろうとするみたいです。ときには副作用を考慮して、やっぱり作るのやめようかという話になり、再び議論に戻ることもあります。 ああ、もったいない、もったいない。私は適当な人間なので「なんてマジメなんだ、とりあえず何か作ればいいのに」と思います。デザイン思考ではそのことを「クイック&ダーティプロトタイプ」と呼んだりしますが、それだとなんだかカッコよすぎるので、私は「雑に作れ」と言ってます。 でも、言葉だけでうまく伝わるはずもなく、「どうすれば雑に作れるのか?」と再び議論を始めたりするので、なかなか難しいところです。 それでも「締め切り」というのは効果的なもので、次回までに何かを発表しなければいけないとなると、「議論してばかりじゃ話が進まない!」となり、ある種の覚悟を決めて雑に作ってくれるようになります。 私が印象的だったのは
宇宙空間を15年以上飛び続ける人類の「宇宙の棲み処」、国際宇宙ステーション(International Space Station、略してISS)。そのISSが今や、日本の宇宙船なしには存続しえなくなっている事実をご存知だろうか? その名は「こうのとり(HTV)」。無人の貨物船であり、ISSに住む宇宙飛行士たちに食料、水などを届ける「宇宙生活の命綱」だ。現在、ISSへの物資輸送は米国2機、ロシア1機、そして「こうのとり」の4機が担っている。日本以外の貨物船は最近、たびたび失敗しており100%成功しているのは、日本だけ。 さらに「こうのとり」しか運べない荷物がある。それが「バッテリー」。ISSで使われてきた旧型バッテリーが老朽化し、バッテリーの交換はISSを今後も使い続けるための最重要課題だった。その大役が、100%の成功率と世界最大の輸送能力を誇る「こうのとり」に任された。 2016年12
半年ほどかけてWebサービスのプロトタイプを公開するところにこぎつけたのでその記録をしておこうと思います。 作ったもの 一言で言うと「Webブラウザで閲覧したページの履歴を共有するSNS」です。 History(履歴)を流す(stream)ということでHistreamと名付けました。 Chrome拡張をインストールして、ウィンドウを選択し、オンにするとそのウィンドウで見たページ履歴を自動でアップロードします。 そしてWebサービスでアップロードされた履歴を整理された状態で確認したり、友達の履歴を読めたりします。 Chrome拡張: Histream-Extension - Chrome Web Store Webサービス: https://histream.io 作ろうと思ったきっかけ 今から一年前、大学2年の冬にワンタップダイエットというアプリを作っていました。プログラミングするのはほと
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く