FargateのvCPU性能と価格感等雑感 - Qiita
こちらはAWS Fargate Advent Calendar 2017の12/13分の記事です。 普段の業務ではECS上でGoで書いたアプリケーションを運用しています。 日本からre:Inventのライブストリームを視聴していた勢ですが、予想通りEKSとLambdaのGo対応がアナウンスされ感激していたら、さらにFargateまで来てしまい、とても興奮した二日間になりました。 今回はFargateのアドベントカレンダーにお声掛け頂いたので小ネタと雑感などを記したいと思います。 Fargateで提供されるvCPUの性能について ECSであれば自身でプロビジョニングしたコンテナインスタンスを使用しているためCPU性能なども把握できますが、FargateではAWSが用意したコンテナインスタンス上でtaskが実行されるため、どのようなインスタンスタイプ上で実行されるのかわかりません。 そこで、今
Implementing Japanese Subtitles on Netflix
Japanese subtitles were first made available on the Netflix service as a part of the Japanese launch in September 2015. This blog post provides a technical description of the work we did leading up to this launch. We cover topics including our specification for source subtitle files, the transformation model from source subtitle files to those deliverable on the Netflix service, the model for deli
goでWebサーバを書くためのシンプルなライブラリchiの紹介 - Qiita
この記事は Go3 Advent Calendar 2017 の13日目の記事です。 はじめに goでwebサーバを書く際にはいろいろやり方がありますが、ざっくり分けて以下のような感じだと思います。 net/http で十分。必要に応じてルーティングに gorilla/mux 使ったりする 軽めのwebフレームワークを利用する。 gin, echo, gojiなどを使う 全部入りのrailsみたいなやつが欲しい。Revel などを使う パフォーマンスとか書きやすさとかそれぞれ違うので、各自好きなの使えばいいと思います。ちなみに自分は、一つ前のプロジェクトでは gojiを使っていて、今はechoを使っています。 個人的にはechoよかったんですが、 GoogleAppEngineで go1.8と echoのver.3以降で使おうと思うとcontextの扱いがいまいちきれいに書けない感じになり
Elasticsearchのための新しい形態素解析器 「Sudachi」 - Qiita
tl;dr （要約） Kuromojiに代わる新しい形態素解析器「Sudachi」 なにが良いの？ 最新の辞書 企業（ワークスアプリケーションズ）による継続的な更新 複数の分割単位 → 検索用途での再現率と適合率の向上 プラグインによる拡張 省メモリ Elasticsearchで使いたい プラグイン: WorksApplications/elasticsearch-sudachi 使い方は当記事の後半をご覧ください 注: この記事の執筆者はSudachiの開発に関わっています さまざまな形態素解析器 形態素解析は、伝統的な自然言語処理（Natural Language Processing, NLP）において基盤となる技術です。そして世の中にはさまざまな形態素解析器が存在します。販売されているものもありますが、一般に公開されているものだけでもいくつか例をあげると、JUMANとRNNLMを利
Concertmaster - Classical music front-end for Spotify
Finally, classical music and Spotify working together Transform Spotify into a magical classical music jukebox - browse composers, genres and periods, search for recordings, create playlists of multi-movement works, start no-nonsense radio stations and much, much more, for free! The "classical problem" Online music is here to stay. But, like most platforms, Spotify was designed for popular music,
Latest - shitcode - home of shitty code
/** * Stringify a JSON object * @param {*} value JSON value to stringify * @returns {string} stringify JSON */ function stringify(value) { var result = {}; try { result = JSON.stringify(value); } catch (e) { Logger.error('Error while trying to stringify ' + e); result = JSON.stringify(result); } return result; } var lightBox_ReplaceSelectsWithSpans = function() { var selects = document.getElements
2017年12月13日 モジュラー化はいったん白紙に…「Fedora 27 Server classic」がリリース | gihyo.jp
Linux Daily Topics 2017年12月13日モジュラー化はいったん白紙に…「Fedora 27 Server classic」がリリース Fedoraプロジェクトは12月11日（米国時間）、11月にリリースされた「Fedora 27」のサーバ版となる「Fedora 27 Server classic」をリリースしたことを明らかにした。Fedora 27はすでに「Workstation」と「Atomic」の2エディションが正式リリース済みだが、サーバ版に関してはモジュラー化を図った「Fedora 27 Modular Server」のベータ版を出すにとどまっており、1ヵ月後である12月中旬に正式リリースするとアナウンスしていた。しかし結局、モジュラー化計画は"白紙"となり、前バージョンのFedora 26 Serverをアップデートしたエディション"classic"として
aswrap - ~/.aws/(config|credentials) で定義した AssumeRole 定義から一時キーを取得してコマンドを起動してくれる wrapper を書いた - 酒日記 はてな支店
業務では多数の AWS アカウントを運用しています (現時点でアクティブなのは100行かないぐらい)。 AWS アカウントごとに利用者それぞれに IAM User や IAM key を発行するのは権限管理が煩雑になるため、以下のようなアカウント運用をしています。 ログインを集約する専用の AWS アカウントを用意 (account A とします) このアカウントに IAM User を作成し、IAM key を発行する 各案件用の AWS アカウント(account B) に IAM Role を定義し、Assume Role によって権限を付与 (最近 AWS Organization が Single Sign On に対応したので、今後は不要になるのかもしれませんが…) こうしておくことで、AWS console には account A でログインした上で、各アカウントにロールの
店舗決済端末のICクレジット対応、義務付けも目立つ遅れ
政府は2017年11月29日、改正割賦販売法（割販法）の施行日を2018年6月1日にすると閣議決定した。同法はクレジットカード取引のセキュリティ対策強化を求めており、加盟店にカード決済端末のIC対応などを義務付ける。ただし、大手チェーンを中心に対応の遅れが目立つ。施行日に間に合わない企業が続出しそうだ。 クレジットカードには磁気ストライプのほか、金属端子・ICチップが付いている。日本の店舗ではカードをスライドさせて磁気ストライプを読み取る方式の決済が主流。不正読み取り（スキミング）や偽造カードの作成が容易で、不正使用が問題になってきた。 カードを端末に差し込んで使うIC決済は安全性が高い。クレジット取引全体に占めるIC決済比率は欧州ではほぼ100パーセント。日本は2016年半ば時点で20パーセント程度とみられ、米国やアジア諸国に比べても低い。 日本クレジット協会によれば、2017年1～6月
Amazon Auroraの先進性を誰も解説してくれないから解説する - Qiita
TL;DR; Amazon AuroraはIn-Memory DBでもなくDisk-Oriented DBでもなく、In-KVS DBとでも呼ぶべき新地平に立っている。 その斬新さたるやマスターのメインメモリはキャッシュでありながらWrite-BackでもなくWrite-Throughでもないという驚天動地。 ついでに従来のチェックポイント処理も不要になったのでスループットも向上した。 詳細が気になる人はこの記事をチェキ！ Amazon AuroraはAWSの中で利用可能なマネージド(＝運用をAWSが面倒見てくれる)なデータベースサービス。 ユーザーからはただのMySQL、もしくはPostgreSQLとして扱う事ができるのでそれらに依存する既存のアプリケーション資産をそのまま利用する事ができて、落ちたら再起動したりセキュリティパッチをダウンタイムなしで(!?)適用したりなどなどセールストー
Extended Validation is Broken
Extended Validation Is Broken By @iangcarroll Extended validation ("EV") certificates are a unique type of certificate issued by certificate authorities after more extensive validation of the entity requesting the certificate. In exchange for this more rigorous vetting, browsers show a special indicator like a green bar containing the company name, or in the case of Safari completely replace the U
分散データベースで因果一貫性を担保するための仕組み「ベクトルタイムスタンプ」がエモい - Qiita
まえふり LITALICOの管理栄養士 @Sadalsuud です。好きな食べ物はピザです。 以前からインスタレーションなどを作成してTwitterに投稿していたことがあり、入社数日目にはCTOの @takish さんがフォロワーだったことが判明。 それからなんやかんやあって、社内ハッカソンに参加させていただいたり、このAdvent Calendarにも参加させていただいたりしています。 というわけで、『LITALICO Engineers Advent Calendar 2017』12日目の記事です。 読むのが面倒になった方は最後にあるgifだけ見て帰っていただければ幸甚です。 分散データベースのうわべの話 分散データベースでは、データベースがクラスタ化され、各ノードに処理が分散されます。 AWSのNoSQLである、AmazonDynamoDBは次のように説明されています。 Dynamo
DOTSプロトコルを使ってDDoS対策を自動化してみたい！ - Qiita
NTTコミュニケーションズアドベントカレンダー 12日目。 今日は、荒ぶるDDoS攻撃1からサービスを防御するための新しいプロトコル DOTS (DDoS Open Threat Signaling)を紹介します。 DOTSプロトコルについての詳しい日本語の記事は初めてなのではないかと思います。 DOTSとは？ DOTSとはIETFで策定中のDDoS対策のためのプロトコル DDoS対策の自動化と標準化を実現するよ OSSによる実装がでているよ この記事では、OSS実装である go-dots を使って、DOTSプロトコルの利用方法を紹介します。 これからのDDoS対策の話をしよう DDoS攻撃は2つの方向で脅威が進化しています。 大規模化: Arbor社によると、2016年のリオオリンピックでは、500Gbpsを超えるDDoS攻撃があったとのことです。IoTなどインターネットに接続される機器
[正規表現] .*?は最短マッチではない - Qiita
# Ruby 2.4.2 "<<<hoge>>>".match(/<.*?>/)[0] #=> "<<<hoge>" なぜこうなるのか .*?は、 最短マッチ 最左マッチ の2つの原則に従い、しかも最左マッチの原則の方が優先順位としては高いからである。 より嚙み砕いて言うと <.*?>は先頭の<がマッチした後に、そこからマッチする部分をできるだけ最小化しようと試みる。 <<<hoge>>>に対して<.*?>をパターンマッチさせる際に行われる実際の処理の流れは、次のようなイメージになるだろう。 < # <までマッチ << # <>のマッチに失敗、.の数を増やしてリトライ << # <.までマッチ <<< # <.>のマッチに失敗、.の数を増やしてリトライ <<< # <..までマッチ <<<h # <..>のマッチに失敗、.の数を増やしてリトライ <<<h # <...までマッチ <<<ho
![[正規表現] .*?は最短マッチではない - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/cc1023ba3f0a12c4673c2278bded8efe28942cb5/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCJUU2JUFEJUEzJUU4JUE2JThGJUU4JUExJUE4JUU3JThGJUJFJTVEJTIwLiUyQSUzRiVFMyU4MSVBRiVFNiU5QyU4MCVFNyU5RiVBRCVFMyU4MyU5RSVFMyU4MyU4MyVFMyU4MyU4MSVFMyU4MSVBNyVFMyU4MSVBRiVFMyU4MSVBQSVFMyU4MSU4NCZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9ODQzNTNkOTFmZDE2M2U0ZTA2ZjMyOTNkZTcxY2E4NDc%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwYW5xb29xaWUmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT0zNiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPTQ5M2QwYTkxMTg2OTExM2YwNTYzZDZkNGJlOTIxZmRm%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D5b0ddb1a18aeb27c362f508b1324d60d)
パスフレーズ付き SSH 秘密鍵の暗号化を解く方法 | DevelopersIO
EC2 上に Windows インスタンスを起動した場合、ログインパスワードを知るためには、起動時に指定したキーペアのうち「プライベートキー（秘密鍵）」が必要になります。 さてここで、下記のような場合には少し困ったことになりがちです。 該当インスタンス起動時に指定したキーペアが、macOS や Linux などの上で ssh-keygen コマンドで生成された公開鍵（id_rsa.pub）をインポートしたものだった場合 ssh-keygen コマンドで SSH 公開鍵・秘密鍵を生成するとき、通常だとパスフレーズを設定すると思います1。 ただしそのようにして生成された秘密鍵は、暗号化された状態で保存されることになります。 中身を見てみると、下記のような感じになっているかと思います。 $ head -3 ~/.ssh/id_rsa -----BEGIN RSA PRIVATE KEY-----
AWS Single Sign-On 紹介 | Amazon Web Services ブログ
Amazon Web Services ブログ AWS Single Sign-On 紹介 12/7 にリリースされた AWS Single Sign-On (AWS SSO) サービスをご紹介します。このサービスにより、複数の AWS アカウントやビジネスアプリケーションへの SSO アクセスを簡単に集中管理できるようになります。AWS SSO はユーザポータルを提供するため、ユーザは既にある企業内の認証情報を使ってアサインされた全ての AWS アカウントやアプリケーションを確認して、アクセスできます。AWS SSO は AWS Organizations と統合されており、組織内にある複数の AWS アカウントへのアクセスを管理できます。加えて、AWS SSO は Security Assertion Markup Language (SAML) 2.0 をサポートしており、AWS S
I/O負荷の正確な状況はiowaitでは分かりません - Qiita
さくらインターネットのアドベントカレンダー9日目として、サーバ屋らしく、運用に関するコマンドの使い方を紹介します。 サーバの負荷が高まってきたときに、vmstatやtopなどのコマンドで調査する事が出来ますが、I/O負荷をwa(iowait)によって判断する人も多いと思います。 ただ、結論から言うと、iowaitは正確にI/Oの負荷を表しているわけではありません。 これらを、実際に演習をしながら見ていきたいと思います。 iowaitとidle iowaitとはあくまでも、CPUが空いているのにI/Oがボトルネックになっているプロセスを示しているだけで、CPUの利用率が高いときにはI/Oがボトルネックになっていてもiowaitが上がりません。 同様に勘違いされがちなのが、id(idle)はCPUの空きを示しているというものですが、idleは必ずしもCPUの空き時間を示しているものではありませ
ΛIRMΛSH
Use any of the following services to sign in to save your account progress and achievements.
Dockerで最小のGoのイメージを作成する（cgo編） - Qiita
「最小のNode.jsのDockerイメージを目指すスレ」、「JavaでもDockerでマルチステージビルド」というエントリーでは、Node.jsとJavaを使ったアプリケーションのイメージをなるべく小さくするトライアルをしました。 今度はGoでやってみます。ただし、Pure Goで最小というのはすでに方法があって、scratchという何も含まれないイメージを元に、静的リンクしたバイナリを配置するという方法です。 Building Minimal Docker Containers for Go Applications Goを使う場合に、一部cgoで使われたパッケージを利用したいこともあるでしょうし、雑にコマンドラインを利用することもあるだろう、ということで、今回も、できることを減らさずに（やりたいことにしたがって細かく作戦を微調整する必要がない）、なるべく小さく、という方針でいきたいと
PostgreSQL Exercises
Welcome to PostgreSQL Exercises! This site was born when I noticed that there's a load of material out there to help people learn about SQL, but not a great deal to make it easy to learn by doing. PGExercises provides a series of questions and explanations built on a single, simple dataset. It's designed for use as a partner to a good book or Postgres' excellent documentation. The exercises on thi
Healthchecks.io – Cron Job Monitoring
Simple and Effective Cron Job Monitoring We notify you when your nightly backups, weekly reports, cron jobs, and scheduled tasks don't run on time. How to monitor any background job: On Healthchecks.io, generate a unique ping URL for your background job. Update your job to send an HTTP request to the ping URL every time the job runs. When your job does not ping Healthchecks.io on time, Healthcheck
Looking Forward to 2018 - Let's Encrypt - Free SSL/TLS Certificates
Let’s Encrypt had a great year in 2017. We more than doubled the number of active (unexpired) certificates we service to 46 million, we just about tripled the number of unique domains we service to 61 million, and we did it all while maintaining a stellar security and compliance track record. Most importantly though, the Web went from 46% encrypted page loads to 67% according to statistics from Mo
tiperc20: Slack上でERC20トークンを送りあってコミュニケーション - Pepabo Tech Portal
こんにちは、あんちぽちゃんです。ビールを飲みながらコードを書くと、大変はかどります（そのあたりについて「酒を飲みながらコードを書く」というLTをしたことがあったりします）。 さて、先日の記事「Ropstenのテストネット上でERC20トークンを作成・送付してみる」では、ERC20トークンをテストネット上にデプロイ、送付してみました。その際は、コンソールから手動で送付するというプリミティブな手段を採ったのですが、どうせならUIもほしくなってきます。そこで、tiperc20というソフトウェアを作ったので、その紹介をします。 この記事はEthereum Advent Calendar 2017の9日目の記事です。 ERC20トークンとは その前に、少しERC20トークンについて説明します。 Ethereumのスマートコントラクトによってトークンを実現する際の標準仕様としてERC20というものがあ
Docstand / Rocro
Link your GitHub repo to Docstand and get hosted API documentation within seconds. Documentation libraries are run automatically and all user access controls are inherited from GitHub. User Access ControlAll user permissions are inherited from source control, meaning users with read access to a given GitHub repo also have read access to the documents generated from that repo. Managed HostingWith D
Stopify Technology Demo: a JS-to-JS compiler that makes it easier to build IDEs and compile to JS
What is Stopify? This is a demo of Stopify, a JavaScript-to-JavaScript compiler that makes it possible for other compilers and Web-based IDEs to gracefully run long-running programs, stop non-terminating programs, support blocking I/O, set breakpoints, and step through code entirely in the browser. To demonstrate, this demo applies Stopify to the JavaScript output by several existing compilers wit
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google Design
MySQL 5.7 と互換性を持つ Amazon Aurora のプレビューの発表
GitHub - reinterpretcat/lfs: Docker configuration for building Linux From Scratch system
GitHub - ergenekonyigit/diy-macbook-stand: Stand for 12" MacBook, 13" MacBook Air and 13" MacBook Pro
更新され続ける世界を目指して
GitHub - sandglass/sandglass: Sandglass is a distributed, horizontally scalable, persistent, time sorted message queue.
Dasynq — the event-loop library
OSSのデータ収集ツール「Fluentd」に任意コマンド実行などの脆弱性（JVN） | ScanNetSecurity
TrimPCAP - Reduces PCAP dataset size
GitHub - draios/sysdig-inspect: Sysdig Inspect - A powerful opensource interface for container troubleshooting and security investigation
Disco!