ssh_config で Host名を動的に設定する - Qiita
やりたいこと ansible や chef を使ってサーバを簡単に構築できるようになった昨今、デプロイにおいても「新しいサーバを構築して古いサーバを捨てる」といった手法ができるようになっています。 新規で構築されるサーバには無論新しいIPが振られる訳ですが、毎度 .ssh/config に追加していくのは正直ダルいなーと思っていたので、 config いじらずにやる方法ないかなーと思って調べてみました。 が、意外といい情報が見つけられず・・・、、 やったこと ssh_config の ProxyCommand を使います。（この子は多段SSH目的でよく使われるようです。）
アプリログの自動異常検知を試してみた~密度比による異常検知入門~ - Gunosyデータ分析ブログ
Gunosyデータ分析部アルバイトの鈴木です。今回は密度比を利用したバージョンリリースにおける異常検知について学んだことをまとめたいと思います。 やりたいこと 超長期的にやりたいこと 密度比を用いた異常検知のイメージ ダミーデータでの実装例1 今回試したやり方 今後試していくやり方 ダミーデータでの実装例2 密度比の平均二乗誤差を用いる場合 直接密度比推定する場合 参考資料 やりたいこと ニュースパス（Gunosyの提供するプロダクトの一つ）をバージョンアップした時に、もし異常があればユーザーアクションログからその兆候を見つけてslackなどに通知できるようにすることが目標です。 （QA項目以外でのログ欠損やアップデートによる予期せぬユーザ行動の検知をするためです。） 現在Gunosyでは、バージョンアップ時に異常がないかどうか調査するために人手を割いています。しかし、もし自動で異常を確実
はてなにおける機械学習の取り組みについて - Hatena Developer Blog
こんにちは、アプリケーションエンジニアのid:syou6162です。2018年になってしまいましたが、2017年のはてなにおける機械学習の取り組みについて振り返ってみたいと思います。 機械学習サブ会とは リソース/ツール整備 定例会 プロジェクトの近況を共有、より専門的な困り事を相談 技術共有/雑談 論文読み会/専門書の輪講会 社内で機械学習ハッカソンの開催 おわりに 機械学習サブ会とは はてなではより専門的な内容に関するエンジニアの小集団として、サブ会という制度が昨年から開始されています。昨年までは個人的に機械学習勉強会をランチタイムに運営していましたが、社内で正式にサブ会として認定されたことにより、業務時間内に活動しやすくなりました。このエントリではサブ会発足からの約八ヶ月の活動を振り返りってみたいと思います。 簡単に背景について説明しておきます。はてなは現在のところ、研究開発専門の部
Google Colaboratoryが便利・高速で凄過ぎる - Itsukaraの日記
Googleが研究の一環で提供しているColaboratoryを試してみました。 Jupyterと同じようなGUIでPythonのプログラムを実行可能で、GPUも使えます。 Jupyterと同様に、先頭に「!」を書くことで、Linuxのコマンドを実行可能であり、「!pip」「!conda」「!apt-get」などで機能を追加できます。 実行結果をファイルシステム上に保管でき、共有リンクを使って取り出せます。 ただし、12時間経過すると強制終了されて、ファイルは失われます。 しかし、Notebookが動いている仮想マシンにGoogleドライブをマウント可能であり、これにより、実行結果をGoogleドライブ上のファイルとして保管できます。 Deep Learningでは、途中の状態をファイルに保管して、そこからResumeできるようにプログラムを書くことが多いので、12時間で一度強制終了しても
Raspberry Pi で使えるポータブルモニタの決定版が出てた（タッチスクリーン付き、GPIOを占有しない、ケース付き、約3000円） - nomolkのブログ
当ブログではこれまで2度にわたってRaspberry Pi用の周辺機器道を探求してまいりました（１，２）。 趣旨としては、ふだんはSSHで使ってるんだけど、展示会場でWifiの接続設定がしたい時とかちょっとしたタイミングでモニタや入力機器がほしい、でもかさばるのは嫌、という人に向けた周辺機器情報です。 しかしこのたびついにポータブルモニタの決定版が出ておりましたので、ご紹介します。ちなみにkaraageさんのブログで知りました。 Quimat 3.5インチタッチスクリーン HDMIモニタTFT LCDディスプレイ Raspberry Pi 3 2 Model B Rpi B B+ A A+ 映画 アーケードゲーム オーディオ入力 RPi GPIOブレークアウト拡張ボード 保護ケースキット アクリル(透明) QC35C 出版社/メーカー: Quimatメディア: エレクトロニクスこの商品を含
非エンジニアが最速でSQLをマスターする方法 - Gunosy Tech Blog
こんにちは、データ分析部の石塚です。 Gunosyではエンジニア以外の職種でもSQLを叩いて自らデータを集計・分析するという習慣と全社員が各サービスのログ*1に触ることができる環境があります。 例えば、ユーザー獲得を担っているプロモーションチームはエンジニアが0名のチームなのですが、実際にSQLを叩いています。 それによって、自分たちの獲得したユーザーはどのような行動をしているのかを確認したり、分析することができています。 これはGunosyのみの事例ではなく、AWSのRedshiftやAthena、GCPのBigQueryが台頭してきたおかげで、どの会社も低コストにログをSQLで集計・分析できる基盤が整ってきています。 個人的にはアプリやウェブの業界で働くマーケターにはSQLは必須の知識と言える時代になってきたと感じています。 そこで今回は特別プログラミングなどの経験が無い人でも、SQL
サーバーレスなバックアップシステムを AWS SAM を用いてシュッと構築する - クックパッド開発者ブログ
こんにちは。昨晩のお夕飯は鮭のカレー風味ムニエル定食だったインフラ部 SRE グループの @mozamimy です。 鮭のカレームニエル定食 pic.twitter.com/G2c1ij2wpp— ᕱ⑅ᕱ もざみ (@mozamimy) February 6, 2018 今回は、SRE グループでの取り組みのひとつであるマルチクラウドバックアップを題材にして AWS SAM、CodePipeline (CodeBuild および CodeDeploy を含む) を用いたサーバーレスアプリケーションの構築、ビルドおよびデプロイについて書いていきたいと思います。また、1月に Lambda で Golang が利用可能になった こともあり、CodePipeline の進捗を Slack に投稿する Lambda function を Golang で作ってみたので、そちらもあわせて解説したいと思
PowerlineとVim、zsh、tmuxの環境を最速で構築する on Ubuntu 16.04 - 徒然々草
この記事はVim Advent Calender 2017の23日目の記事です。（夜までに書き終わってるといいな） 前書き 実は最近、Ubuntuで競プロとかやることが増えてきたのですが（僕はこっちにも記事を出す予定です。「競プロ!!」 競技プログラミング Advent Calendar 2017）Ubuntuなんて、仮想環境の上に組み立ててやるぐらいしかやらないので、なんども再インストールしたりするのですが、その度にPowerlineのセットアップにすごい時間を使うので、いい加減、手順をまとめておこうと思います。ちなみにJOI（情報オリンピック）本選に出場する人は本選でUbuntuを使わされると思うので、見ておくといいかもしれません。（本選で新たにパッケージをインストールすることはできないので、Vimになれるぐらいにしかならないけど） 完成予想図 環境 MacBook Air Early
vim-precious がいい感じ - mabulog
背景 Background PHPのテンプレートファイルを修正する際に、インデントがうまくいかない問題に悩まされていました。当初は下記記事を参考にインデントを行っていましたが、vim-preciousを活用することでsyntax等々含めて問題解決するのではと思い、設定してみました。 Better indent support for php with html - Vim Tips Wiki Vimで心地良い自動インデント設定を書くためのポイント9個 - TIM Labs 設定 Setting vim-precious setting 感想 Impressions 常々問題なく動いてて、これで私もテンプレートファイルをイジイジできそうです。 HTMLの正規表現がまだ若干ツメきれていないのが心残りですね。基本的には問題なく動く事は確認しましたが、HTMLタグの始まり"<"でinsertモード
Python3.4以降ならos.pathはさっさと捨ててpathlibを使うべき - Qiita
Python3.4でファイルパス操作を行うモジュールとしてpathlibが追加されました。 今までファイルパス操作はos.pathやglobを使っていましたが、pathlibを使うとファイルパスの連続操作がとても書きやすくなるので積極的に使うべきです。 pathlibの特徴 pathlibは次のような特徴があります。 オブジェクト指向 ファイルパス操作機能の統合 オブジェクト指向 今まで使っていたos.pathなどでは独立した関数で機能を提供していました。 これに対してpathlibではPathクラスのメソッドやプロパティとして機能が提供されています。 >>> from pathlib import Path >>> Path('/a/b/c.txt').parent PosixPath('/a/b') >>> Path('/a/b/c.txt').parents[1] PosixPath
Serverless Data Warehousing & Data Analysis on AWS
Data science teams need to reduce storage and maintenance costs, and at the same time provide analytics tools for data analysts and scientists. How can we make data collection and data analysis exciting, performant, and cost-effective in the Cloud? Alex will connect the dots around the data processing building blocks provided by AWS, without managing any servers!
Square の採用プロセスについて
2015年からサイボウズでAndroidデベロッパーとして勤めていたフランス人なのですが2017年の秋にAndroidデベロッパーとして Square社に応募しました。応募する側からして採用プロセスは合理的でやりやすかったので、この採用プロセスが他の企業にも似たような形で広まっていくと良いなと思って Square の採用プロセスを説明するためにこの文章を書きます。 応募インターネットで求人を見かけた事から始まりました。Android開発の世界じゃSquareが提供してるライブラリは誰でも見たことがあると思います。正直なところ、直接応募するのには不安があって、先に SNS 上で Squareの社員に声かけて話を聞いてみようと考えました。相談にのってくれた Squareの社員は親切な人で話が終わるところで「よかったら連絡先を教えてもらえばうちの人事から連絡がいくようにお願いするよ」と言ってくれ
異常検知ナイトでLT登壇しました - yasuhisa's blog
機械学習の中でもマイナーなテーマであろう異常検知がテーマの勉強会、異常検知ナイトというイベントでLTの登壇をしてきました。マイナーテーマなのに300人以上が集まる東京怖い。 3ページしかないですが、発表資料も置いておきます(LTのレギュレーションで3ページ5分)。 異常検知ナイト LT登壇資料 はてな id:syou6162 from syou6162 LTのテーマは、現在自分がどんなデータで異常検知をやっているか、どういう困り事があるかを発表してプロの方からアドバイスをもらおうというものです。Mackerelで今まさに異常検知機能の開発をしていて、時系列周りのモデルのハイパーパラメータを開発データでチューニンングしたいけれども、そもそも異常データを含む開発データって手に入らないことが多くてどう対応していくのがよいのか?という質問をさせてもらいました。プロからのアドバイスは動画で見れるので
ユーザー アカウント、承認、パスワード管理に効く 12 のベスト プラクティス | Google Cloud 公式ブログ
アカウント管理、承認、パスワード管理をうまくこなすにはコツが必要です。多くの開発者にとってアカウント管理は、十分な注意が払われていない “ダーク コーナー” になっています。製品マネジャーやお客様の中には、期待を裏切られるようなアカウント管理の経験がある方も少なくないでしょう。 幸い、Google Cloud Platform（GCP）には、ユーザー アカウント（本稿では、お客様であれ社内ユーザーであれ、システムに対して自分の身元を証明したうえでアクセスする人々を指します）の作成、セキュアな処理、そして適切な認証に役立つツールが用意されています。 この投稿記事では、Google Kubernetes Engine にホストされているウェブ サイト、Apigee の API、Firebase を使うアプリケーションなど、認証されたユーザーを扱うサービスを開発している人々のために、アカウント認
The Algorithm Design Manual
The Algorithm Design Manual, 3rd Edition Steven Skiena This newly expanded and updated third edition of the best-selling classic continues to take the "mystery" out of designing algorithms, and analyzing their efficacy and efficiency. Expanding on the first and second editions, the book now serves as the primary textbook of choice for algorithm design courses while maintaining its status as the pr
CloudBees Jenkins Enterprise | CloudBees Docs
CloudBees Jenkins Enterprise solves the automation needs of organizations that need scalability, security, manageability and resiliency capabilities, built on a cloud native architecture. CloudBees will no longer be supporting CloudBees Jenkins Enterprise 1.x after July 30, 2020. This end-of-life announcement allows CloudBees to focus on driving new technology and product innovation for CloudBees
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - moul/assh: :computer: make your ssh client smarter
GitHub - aws/aws-sam-cli: CLI tool to build, test, debug, and deploy Serverless applications using AWS SAM
GitHub - haya14busa/vim-operator-flashy: :flashlight: Highlight yanked area
GitHub - rhysd/clever-f.vim: Extended f, F, t and T key mappings for Vim.
GitHub - osyo-manga/vim-anzu: Vim search status.
GitHub - cohama/lexima.vim: Auto close parentheses and repeat by dot dot dot...
EN - Lampe Gras
NoOpsへの挑戦
GitHub - marionebl/commitlint: Moved to https://github.com/conventional-changelog/commitlint
workflow-aggregator-plugin/demo at master · jenkinsci/workflow-aggregator-plugin
site:jenkins.io mobile - Google 検索
How do I implement a retry option for failed stages in Jenkins pipelines?
How to write a production-level code in Data Science?