Linuxのloadavgが約7時間ごとに上昇する現象の原因 - Mackerel お知らせ #mackerelio
Mackerelチームのエンジニアのid:itchynyです。 「mackerel-agentを入れるとloadavgが7時間ごとに上昇する」 先日、このような問い合わせを複数のお客さまから受けました。私も実験してみたところ、確かに再現しました。EC2 t2.microにmackerel-agentを入れて簡単なログ監視とプロセス監視を設定し、数日放置しました。 確かに、約7時間ごとにloadavgが上昇しています。この周期のcronの設定はしておらず、またmackerel-agent内部でも7時間ごとに行う処理はありません。しかし、プラグインを多く入れるほどloadavgのピーク値も上がります。 本エントリーでは、この現象の原因について説明します。 loadavgが上昇する原因を調べるには、まずloadavg自体がどう計算されているかを知る必要があります。 まずは、Linuxがloada
AWS シンプルアイコン - AWS アーキテクチャーセンター | AWS
アーキテクチャダイアグラムは、設計、デプロイ、トポロジーを伝達する手段として優れています。このページでは、AWS 製品アイコン、リソース、およびダイアグラムの作図に役立つその他のツールを含む AWS アーキテクチャアイコン (旧称シンプルアイコン) の公式セットをご覧いただけます。 AWS は、お客様やパートナーがアーキテクチャダイアグラムを作成するために以下のリソースを使用することを許可します。これらのアイコンは、ホワイトペーパー、プレゼンテーション、データシート、ポスター、または技術資料などのダイアグラムに取り入れやすいよう、シンプルなデザインになっています。 AWS リファレンスアーキテクチャダイアグラムを閲覧し、AWS アーキテクチャセンターの専門家によるガイダンスとベストプラクティスを利用しながらより効率的かつ効果的に AWS で設計する方法を学びます。
「RTで画像自動トリミング、著作者人格権侵害に当たる」 知財高裁判決、Twitterユーザーに衝撃
著作者に無断でTwitterにアップされた写真入りツイートをRTした行為が「著作者人格権の侵害に当たる」と判断した知財高裁の判決が、Twitterユーザーに波紋を広げている。 自ら撮影した写真が無断でTwitterに投稿され、投稿者とは別のTwitterアカウントにリツイート（公式RT）されたことにより著作権が侵害されたとして、プロカメラマンがTwitter Japanに対して、投稿者とRTしたユーザーそれぞれの情報開示を請求していた訴訟で、知財高裁が出した控訴審判決がこのほど公表され、その内容がネットで波紋を呼んでいる。 訴訟の経緯はこうだ。原告のカメラマンが撮影し、Webサイトで公開していた写真が、あるTwitterユーザーによって無断でTwitterに投稿された。その後、別のアカウントがその写真付きツイートをRTした。結果、RTしたアカウントのタイムラインには、元写真をトリミングした
Flake8: Your Tool For Style Guide Enforcement — flake8 6.0.0 documentation
Note It is very important to install Flake8 on the correct version of Python for your needs. If you want Flake8 to properly parse new language features in Python 3.5 (for example), you need it to be installed on 3.5 for Flake8 to understand those features. In many ways, Flake8 is tied to the version of Python on which it runs.
FxCop (.NETのプログラミングチェック) - NEXTSCAPE blog
このページでは.NETのコーディングにおけるルールチェックツールであるFxCopに関する説明を公開します。 FxCopとは FxCopは、.NETのプログラミング内容が適切かチェックするMicrosoftのツールです。基本的にMicrosoftが提供する「クラス ライブラリ開発のデザインガイドライン」に基づいてアセンブリを分析します。 FxCopでは、GUIアプリケーションが用意されており、チェックするルールを選択できます。 上図を見てわかるように、FxCopのチェックルールは10個のカテゴリから構成されています。 デザイン(設計) グローバリゼーション(国際化対応) インターオペラビリティ(相互運用性) モバイル 命名規約 パフォーマンス ポータビリティ(移植性) セキュリティ セキュリティ透過性 語法・使用法 これらのカテゴリに含まれるチェックルールによって、コンパイル後のアセンブリに
kubernetes初心者のための入門ハンズオン - Qiita
この記事はリクルートライフスタイル Advent Calendar 2016の10日目の記事です。 DEPRECATED! [2020/12/05追記] この記事内のコマンドは現在のバージョンの挙動と一部異なっていたり、説明に不正確な部分があります。 例えば公式のチュートリアルなど、信頼できる情報を参照ください。 https://kubernetes.io/ja/docs/tutorials/kubernetes-basics/ 2019/05/30追記 下記内容は若干の不正確を含みますので、軽く読み流して雰囲気を掴んでいただいたあとは https://qiita.com/Kta-M/items/ce475c0063d3d3f36d5d などご参照いただくとよいかと思います。 こんばんは 「sshするときの-p 443ってなんの数字ですか？」ぐらいの素人がインフラ周りを担当し8ヶ月、kub
Building a Docker image on CircleCI
In CircleCI, developers can freely combine arbitrary images like building blocks to create CI container environments. For example, CircleCI supports Docker natively. You can build, push and deploy the application as a Docker image. CircleCI builds the Docker image using Docker in a Docker container. In this post, I will describe how to build a Docker image in CircleCI and push the image to Docker
CircleCI2.0でS3経由のCodeDeployを行うためのコンテナを作りました - Innovator Japan Engineers’ Blog
こんにちは、東京オフィスで働くエンジニアの @hanhan1978 です。 早速ですが、CircleCIのバージョン1.0が 2018年8月31日で終了することはご存知でしょうか？ CircleCI 1.0 End of Life on August 31, 2018 1.0と2.0では根本的に仕組みが異なるため、両方を同時にメンテナンスしていくのは難しいようですね。 弊社においても、バージョン1.0を利用しているアプリケーションが多数存在するため、2.0化を推し進めている最中です。 CircleCI2.0の簡単なおさらい CircleCI2.0にはworkflowという概念があり、workflowの各jobにおいてビルドやデプロイを行います。 出典 : Introducing Workflows on CircleCI 2.0 - CircleCI 図における一つ一つのjobでは、Doc
CircleCIがGithubに登録するデプロイキーを利用してコンテナ内のみで復号できる暗号を生成 - Qiita
例えばCircleCIの環境変数に何かの認証情報を入れたいという時。プライベートとわかっちゃいるが、文字列を直接貼ることにどうしても気持ち悪さを覚える際の選択肢。 屋上屋を架す。 CircleCIのデプロイキー GithubのリポジトリをCircleCIと関連付けると、public/private問わず、cloneするためのデプロイキーが登録されます。 こんな感じですね。 この公開鍵に対する秘密鍵は、CirlcleCIでコンテナが起動するときにセットされています。 具体的にはココ。 ~/.ssh/id_circleci_github。フィンガープリントで比較してみます。あってますね。 $ ssh-keygen -yf ~/.ssh/id_circleci_github > pub ; ssh-keygen -lf pub 1024 fc:85:2a:xxx:9f:c4:b9 pub (RS
第9回［最終回］ データパイプラインのためのワークフロー管理 | gihyo.jp
基本KPIや応用KPIが決まり、実際に、毎日の運用の中で定期的にデータを更新して、可視化するためには、一連の処理を自動化する必要があります。今回は、データパイプラインを扱うためのワークフロー管理ツールを紹介していきます。 データパイプラインとワークフロー管理 データパイプライン （以下、パイプライン）とは、データ処理を行なう小さなタスク（1回のファイルコピーや、SQLの実行など）を順次実行することにより、最終的に求める結果を得るための一連のプロセスを指します。狭義には、単体のシステム内で完結するパイプラインを指します（SparkやGoogle Cloud Dataflow、など）。 また、広義には、複数のシステムを組み合わせて大きなパイプラインを構成することもあります（MySQLから取り出したデータをRedshiftで集計する、など）。今回、取り上げるパイプラインとは、広義のパイ
日本の科学技術「力が急激に弱まった」 白書を閣議決定：朝日新聞デジタル
政府は１２日、科学技術について日本の基盤的な力が急激に弱まってきているとする、２０１８年版の科学技術白書を閣議決定した。引用数が多く影響力の大きい学術論文数の減少などを指摘している。 白書によると、日本の研究者による論文数は、０４年の６万８千本をピークに減り、１５年は６万２千本になった。主要国で減少しているのは日本だけだという。同期間に中国は約５倍に増えて２４万７千本に、米国も２３％増の２７万２千本になった。 また、研究の影響力を示す論文の引用回数で見ると、上位１割に入る論文数で、日本は０３～０５年の５・５％（世界４位）から、１３～１５年は３・１％（９位）に下がった。 海外の研究者と共同で書いた論文ほど注目を集めやすいが、日本の研究者は海外との交流が減っている。００年度に海外に派遣された研究者の数は７６７４人だったが、１５年度は４４１５人に。海外から受け入れた研究者の数も、００年度以降は１
CircleCI 2.0 をlocalで動かす - Qiita
自分のブログに書いたけれども誰にも見られてなくて悲しかったので転載しました。 http://selmertsx.hatenablog.com/entry/2017/11/20/192719 概要 自分がいるプロダクトでCircleCI 2.0 の導入をすることになった。 恥ずかしいことにCircleCIの設定を自分でしたことが無かったので、設定を簡単にする方法を探した。 公式ドキュメントを読んでいたら、circleci をlocalで動かす方法が見つかったのでやってみた。 その結果、10minくらいで簡単に動かせることが分かった。 このドキュメントには、circleciをlocalで動かす方法と、localで動かす際の注意点を記載する。 基本的には、このドキュメントからの抜粋なので、疑問に思ったらそっちを見て頂けると 手順 circleciコマンドのインストール circleci 2.0用
「ゲームバー」大阪で一斉閉店 著作権団体から警告 任天堂の許可なく大会も
「ゲームバー」大阪で一斉閉店 著作権団体から警告 任天堂の許可なく大会も：「スプラトゥーン2」など（1/2 ページ） 大阪で「クロノス」が運営する“ゲームバー”が3店舗同時に閉店すると発表。コンピュータソフトウェア著作権協会（ACCS）から警告を受けたためという。どのような点が問題なのか。ACCSに見解を聞いた。 据え置き型を中心にさまざまな家庭用ゲーム機が店内にそろっており、飲食しながら遊べる“ゲームバー”。ユーザーを集めて大会を開く店舗もあり、ファンが交流する場にもなっている。 ただ、ゲームを顧客に貸し出したり、ゲーム大会を使って集客したりする営業形態は、ゲーム開発元に対する著作権侵害行為に当たるケースがある。そのため、ゲーム会社やコンピュータソフトウェア著作権協会（ACCS）はゲームバーに対し、業態の改善や営業停止をたびたび要求している。
掲載記事に関する指摘について - お問合せ｜株式会社Gunosy（グノシー）
グノシー上の掲載記事がお客様の権利に抵触している可能性がある場合は、こちらのフォームよりご連絡ください。 お送りいただきました情報を基に記事の削除等の対応について検討させていただきます。 ただし、記事の削除をお約束するものではありませんので、予めご了承ください。 また、グノシー上の記事は提携媒体会社から提供された記事をそのまま掲載しているため、 いただきました情報を元記事の配信会社に共有する場合がありますので、ご了承の上ご連絡ください。 ※お問合せフォーム送信後に、ご記入いただきましたメールアドレス宛に 「お問合せ 受付確認(自動送信)」のメールを送信しております。 端末設定によって、迷惑メールとして受信されている場合がございます。 @gunosy.com(ドメイン)が受信できるよう設定ください。 ※必須項目の入力漏れ、メールアドレスの入力ミスにご注意ください。 ※代理人の場合は、代理人で
なか卯×進撃の巨人 キャンペーン
なか卯×進撃の巨人 キャンペーン 全国のなか卯で、対象商品を１つにつき、オリジナル描き下ろしカードを1枚プレゼント！さらに、ポイントを貯めて応募すると、豪華グッズが抽選で当たる！
ゲームバー問題｜スター綜合法律事務所
家庭用ゲーム機を設置し，飲食を提供するとともに，ゲームを楽しむ場所を提供する「ゲームバー」が問題になっています。 大阪で三店舗のゲームバーを運営しているクロノスは，ゲーム会社などから警告を受け，平成30年7月28日に店舗を閉鎖することを発表しました。 ゲーム会社が販売するゲーム機やゲームソフトを提供するゲームバーは，どのような法的問題を抱えているのでしょうか。 著作権法では，「映画の効果に類似する視覚的又は視聴覚的効果を生じさせる方法で表現され，かつ，物に固定されている著作物」を「映画の著作物」に含むと規定されています。 上記のとおり，「映画の効果に類似する視覚的又は視聴覚的効果を生じさせる」と規定されていることから，聴覚的効果を生じさせることは映画の著作物の要件ではなく，視覚的効果を生じさせることが要件となっていると理解することができます。 そして，「映画の視覚的効果」とは，映写される影
秘密主義のアップル、OSS利用を公表した狙い
秘密主義で有名な米アップル（Apple）が、知られざる社内ビッグデータ環境の一端を明らかにした。2018年6月4～6日（米国時間）に米サンフランシスコで開催された「Spark + AI Summit 2018」で、オープンソースソフトウエア（OSS）の分散データ処理ソフト「Apache Spark」の利用事例を公表したのだ。 アップルが社内におけるOSSの利用事例を公開するのは珍しい。5日の基調講演には情報セキュリティ部門に所属するドミニク・ブレジンスキー（Dominique Brezinski）氏が登壇して、セキュリティ監視や不正検出にSparkを活用していることを紹介した。6日の技術セッションでも、社内に構築するストレージ容量1エクサバイトを超えるSparkクラスターの詳細や、Spark用のリソーススケジューラーを自社開発した事情などを説明している。 アップルはSparkを使ううえで、
「Pythonプロフェッショナルプログラミング 第3版」は、10年の取り組みの集大成 - ビープラウド社長のブログ
2018年6月12日にビープラウドのメンバーで執筆した「Pythonプロフェッショナルプログラミング 第3版」が出版されます。 Pythonプロフェッショナルプログラミング第3版 作者:株式会社ビープラウド出版社/メーカー: 秀和システム発売日: 2018/06/13メディア: Kindle版 第1版が2012年3月26日、第2版が2015年2月27日、第3版が2018年6月12日の発売で、約3年おきに版を重ねてきました。 最新技術に合わせてバージョンアップ IT技術は日々バージョンアップされ、数年もすれば技術の構成やベストプラクティスも変わってきます。 技術の進歩に合わせて、書籍も第3版としてバージョンアップしました。 主な改訂内容は以下のとおりです。 Python2.7.6→Python3.6.4 Ubuntu14.04 LTS→Ubuntu16.04 LTS Webアプリケーション(
Configuration introduction - CircleCI
How CircleCI finds and runs config.yml. How you can use shell commands to perform actions. How config.yml interacts with your code. How to trigger a build. How to use Docker containers to run your jobs in a specific environment. How to use workflows to orchestrate your build. How to add approval steps to your workflow. CircleCI believes in configuration as code. Consequently, the entire delivery p
CircleCI経由でRailsアプリをデプロイ - Qiita
最近CircleCIもprivate repoのビルドが無料になった。（1コンテナまで） せっかくなので使ってみようということで、 Railsアプリのビルド実行に使うサービスをwerckerから乗り換えてみた。その設定などのメモ。 Continuous Integration and Deployment on CircleCI just got better: now it’s free. | The Circle Blog 設定ファイル 他のCIサービスと同じく、基本的にRailsプロジェクトのルートディレクトリに置いたyamlファイル(circle.yml)に記述していく。 設定については、ドキュメント見れば詳しく書いている。 Configuring CircleCI - CircleCI 凝ったことをする必要がなければ、そんなに設定をいっぱい書かずともビルドとデプロイができる印象。
プライベートリポジトリを激安にCI出来るCircle CIが凄い。 - Qiita
@takehiro に教えて貰ったCircle CIを使ってみるともの凄く良くて、とてもお勧めなので記事を書きました！ Circle CIって何？ Travis CIと同機能でWebでのUIが若干違うサービスです。 CIとしての仕事はきちんと行えます。 Circle CIの使い方 https://circleci.com/ にアクセスします。 Githubアカウントでサインアップを行います。 画面に従って進むとプロジェクトをfollowする画面が表示されます。 CIしたいプロジェクトをfollow後、"Done Managing Repos"をクリックします。 ここでは"camelmasa/spree"を選択します。 するとfollowしたプロジェクト一覧のテスト結果の画面が表示される様になります。 これでCIが出来る環境が整いました！ 後はgithubにpushする毎にCIが実行される様
CircleCI入門の入門
概要 以前Jenkins入門の入門にてCIについてとCIツールであるJenkinsついてまとめましたが、今回は別途話題になっているCircleCIについてまとめてみます 人口的にはまだJenkinsを使っている人が多いみたいですがJenkinsからCircleCIに乗り換えている人もいるみたいなのでどんなものなのかイメージできるぐらいに調べてみたいと思います CircleCIとは 前提としてCIとJenkinsについて以下にまとめているので単語の意味だけでも目を通してもらえればと Jenkins入門の入門 CircleCIとはCIサービスになります https://circleci.com/ 上記のページから登録を行うことによりJenkinsのようなビルドやテスト、デプロイを自動で実行することができます Jenkinsは自前でJenkinsサーバを立てる必要がありますがCircleCIはサ
GitHubのプロジェクトをCircleCI 2.0でテストできるように移行してみる - jtwp470’s blog
前回書いたマストドンの記事が地味にバズっていてびっくりしているたんごです。 今日はマストドンとは全く関係ないですが、自分のGitHubのリポジトリでCircleCIでテストをしているプロジェクトをCircleCI 2.0でテストするようにしたので、簡単にそのメモ書きを残しておきます。 CircleCI 2.0ってなんぞ circleci.com を読め、という気持ちなんですが簡単に言うと以下のような違いがあります。 基本的にDockerコンテナがそのままCircleCIで動かせるよ。 ローカルでビルドできるようになるよ。 キャッシュがめっちゃ効かせられるよ はい。意味がわかりませんね。一番でかいのはやっとNativeのDockerをサポートしたということではないでしょうか。今までだと、例えば docker -v でマウントしたり、docker exec でコンテナ内のコマンドが実行できなか
RestrictedPython。 - rokujyouhitoma's blog
RedashやPloneで使われているRestrictedPython。使う機会あったのでまとめる。 とりわけ、自前RestrictionTransformerクラスによるpolicyの設定方法は情報がネット上に皆無だったので、残しておけれればと思う次第。 ...諸兄姉においては、RestrictedPythonさらにはexec、evalを使わざるおえない局面が来ないことを祈る（セキュリティ観点で） 環境 macOS Sierra 10.12.4 Python 3.6.5 RestrictedPython RestrictedPython · PyPI 概要 Pythonのソースコード文字列の実行時評価（e.g. exec、eval）する際に、評価するコードに制約（e.g. for statementの禁止）をかけるためのライブラリ。 CPython 2.7、3.4、3.5、3.6がサポー
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://waybe.me/
言語Rubyの操作的意味論と型解析
Sider Review
Aws cli & pip | CircleCi 2.0 | save time
Usage of RestrictedPython — RestrictedPython 5.0 documentation
GitHub - zopefoundation/RestrictedPython: A restricted execution environment for Python to run untrusted code.