背景 今月始めにMicrosoftからRemote Development Extension Pack. というのが発表された。簡単に言うと、VSCodeでコードを書くOSとプラグインが実行されるOSを別にすることが出来る。 よくあるパターンで、「MacでNokogiriがビルドできません」「WindowsでESLintを実行するにはどうしたら良いですか」みたいな質問がある。 最終的にサービスを公開するときにはどうせLinux使うのに、開発するときしか使わない別のOSで同じものを動かす苦労って無駄だよなあ、と思っていた。 じゃあ最初からLinuxで開発すればいいかというと、最近の高度化したWeb開発はIDEの支援なしに実行することが困難で、RubyだったらRuboCop、JavaScriptだったらPrettierやESLintで文法チェックしてもらわないと人類にはついていけない。これら

Version 1.90 is now available! Read about the new features and fixes from May. Installation See the Download Visual Studio Code page for a complete list of available installation options. By downloading and using Visual Studio Code, you agree to the license terms and privacy statement. Debian and Ubuntu based distributions The easiest way to install Visual Studio Code for Debian/Ubuntu based distr

Fork爆弾『 :(){ :|:& };:』とは? Linuxに限らず、UNIX系のオペレーティングシステムで実行してはならないとされるコマンドや処理に「Fork爆弾」がある。これはひたすらプロセスをfork(2)する処理を行うことで、処理のほとんどをプロセスの生成やコンテキストスイッチに費やさせたり、新しいプロセスの生成を困難にさせたりして、システムを正常に利用できない状況にすることを指す。サービス妨害攻撃(Denial-of-service attack)の一種とも言える。 Fork爆弾は実行が簡単なことでも知られており、Bashであれば「:(){ :|:& };:」と入力するだけで実行できる。今回はこのコマンドを実行してみる。 Ubuntu Serverで『:(){ :|:& };:』を実行 では、早速Ubuntu Server 18.04 LTSで『:(){ :|:& };:』を実

ZMAPとは、ミシガン大学の研究者たちがワシントンで開催されたUSENIXセキュリティカンファレンス上で発表した、オープンソースのネットワークスキャナです。 このツールの売りは、「スキャンの速さ」で、インターネット上にあるすべてのIPv4アドレス(/0)をわずか45分でスキャンできると言われています。スキャンツールとして有名な「Nmap」はネットワーク全体のスキャンに2～3ヶ月かかると言われていますから、ZMAPはとんでもない速さです。 ZMAPのサイトはこちら↓ ZMap · The Internet Scanner ZMAPはLINX系OS全般に対応しているようですが、今回はKali Linx 64bitへのインストールの手順を説明します。 最も簡単な方法は以下のようにapt-getすることなのですが、何故か自分の環境ではできませんでした。("Unable to locate pack

#1: OSとサービス、daemon、Linuxのinitソフトウェア #2: SysVInit、ハンズオン、SysVInitの問題 #3: Systemd、ハンズオン、Dockerでの問題と対応（本記事） Systemdはどこが違うか SystemdはSysVInitやUpstartの問題を改善した最も新しいinitですが、SysVInitとの互換性はありません。 その代わり、SysVInitではstart / stopなどの処理やPIDファイルの扱いを手動で書く必要があったのが、良くある処理なら設定ファイルを記述するだけで書けるようになりました。 さらに複雑な管理も可能で、サービス同士の依存関係を定義したり、お互いに依存しないサービスを並列起動したりできます。 また、SysVInit系にはないモニタリング機能があるので、不慮の終了時といった条件を指定した起動を「システム起動時以外にも」

nixCraftは6月24日(米国時間)、「Linux / Unix: Test Internet Connection Speed From SSH Command - nixCraft」の記事をアップデートした。記事は、ssh接続でLinuxやUNIXを利用している状態でインターネット通信速度を計測する方法を紹介するというもの。 インターネットの通信速度を計測するコマントどして、以下が取り上げられている。 wget - ダウンロードスピードテスト向け wput - アップロードスピードテスト向け axel - 軽量ダウンロードアクセラレータ iperf - ネットワークスループット試験向け speedtest-cli - インターネットスピードテスト 記事では、上記のコマンド以外にもlftpを使って通信速度を計測する方法が紹介されている。その0利用例は次のとおり。 lftpを使ったダウ

Fedora Projectが6月20日、「Fedora CoreOS」プロジェクトを発表した。CoreOS Container Linux（CL）とFedora Atomic Hostの良いところを組み合わせ、コンテナ化されたワークロードを安全に動かすことができるコンテナホストを作成するとしている。 Fedora CoreOSはFedora Projectの最新のプロジェクト。小規模でフォーカスを絞ったベースを持つOS向けコンポーネントを目指し、CoreOSのアップストリームとしての役割を持つ。 CoreOSのContainer Linux（CL）、FedoraのAtomic Hostの取り組みは類似性が多く、同じようなユースケースをターゲットとしていたことから合体させることにしたという。お互いから良いところを組み合わせるとしており、例えば、CLのプロビジョニングツール「Ignition

はじめに こんにちは、技術顧問の武内です。 本記事はサイボウズの次期インフラ開発チーム(Necoチーム)が遭遇した、CoreOS Container Linux (以降 CoreOS)においてリアルタイムプロセスを実行できないという問題について、次のようなことを記載したものです。 どういう問題なのか どのように根本原因を突き止めたのか 今後どのように対処するのか 問題要旨 本来なら成功するはずのroot権限におけるリアルタイムプロセスの実行が失敗する 根本原因 CoreOSではカーネルのリアルタイムグループスケジューリングという機能が有効になっている 同機能が有効な場合、cpu cgroup配下のプロセスはデフォルトではリアルタイムプロセスを実行できない systemd環境下で生成されたプロセスは何らかのcpu cgroupに所属させられる 対処方法 リアルタイムプロセスが属するcpu c

Linuxバイナリを最適化して性能を向上させる「BOLT」、Facebookがオープンソースで公開。言語やコンパイラに依存せず高速化 Facebookは、Linuxバイナリの内部配置を最適化することによりCPUのキャッシュ効率などを向上させ、実行速度を改善する「BOLT」をオープンソースで公開しました。 BOLTは「Binary optimization and layout tool」の略とされています（もしかしたら、より速く走るという意味でウサイン・ボルト氏にかけているのかもしれません）。 BOLTは言語やコンパイラに依存せず、ソースコードも不要 BOLTのおもな効果は、Linuxバイナリの実行状況をperfコマンドで取得し、高頻度で実行されている部分などを判別した上で、そうした部分がCPUキャッシュにヒットしやすいようにバイナリの内部配置を改善することなどで実行速度を向上させることと

Mackerelチームのエンジニアのid:itchynyです。 「mackerel-agentを入れるとloadavgが7時間ごとに上昇する」 先日、このような問い合わせを複数のお客さまから受けました。私も実験してみたところ、確かに再現しました。EC2 t2.microにmackerel-agentを入れて簡単なログ監視とプロセス監視を設定し、数日放置しました。 確かに、約7時間ごとにloadavgが上昇しています。この周期のcronの設定はしておらず、またmackerel-agent内部でも7時間ごとに行う処理はありません。しかし、プラグインを多く入れるほどloadavgのピーク値も上がります。 本エントリーでは、この現象の原因について説明します。 loadavgが上昇する原因を調べるには、まずloadavg自体がどう計算されているかを知る必要があります。 まずは、Linuxがloada

HowtoForgeに3月7日(米国時間)に掲載された記事「Linux nl Command Tutorial for Beginners (7 Examples)」が、nlコマンドの使い方を伝えた。nlコマンドはテキストデータに行数を付与するコマンド。オプションで、空行の扱いや始まりの行数、増加数など、挙動を変更することができる。 紹介されている主な使い方は次のとおり。 nlコマンドの基本的な使い方（空行には行番号がつかない） # nl /etc/libaudit.conf 1 # This is the configuration file for libaudit tunables. 2 # It is currently only used for the failure_action tunable. 3 # failure_action can be: log, ignore,

ネットワークガイド I. 作業開始前の準備 Expand section "I. 作業開始前の準備" Collapse section "I. 作業開始前の準備" 1. ネットワークトピックの概要 Expand section "1. ネットワークトピックの概要" Collapse section "1. ネットワークトピックの概要" 1.1. IP ネットワークと非 IP ネットワークの比較 1.2. 静的 IP アドレス指定と動的 IP アドレス指定の比較 1.3. DHCP クライアントの動作の設定 Expand section "1.3. DHCP クライアントの動作の設定" Collapse section "1.3. DHCP クライアントの動作の設定" 1.3.1. DHCPv4 の永続化 1.4. ワイヤレス規制ドメインの設定 1.5. netconsoleの設定 1.6.

by Sh4rp_i ここ10年間に製造されたIntelのプロセッサに、設計上の欠陥が見つかりました。最悪の場合、パスワードやログインキー、キャッシュファイルなどが格納されたカーネルメモリーの内容を読み取られる恐れがあるとのことなのですが、Intel x86ハードウェアに存在する欠陥のため、マイクロコードアップデートでは対応不可能で、各OSがソフトウェアレベルで修正をかけるか、バグのない新たなプロセッサを導入する必要があるとのこと。 'Kernel memory leaking' Intel processor design flaw forces Linux, Windows redesign • The Register https://www.theregister.co.uk/2018/01/02/intel_cpu_design_flaw/ このバグは、データベースアプリケーショ

Amazon S3 Best Practice and Tuning for Hadoop/Spark in the CloudNoritaka Sekiyama

Linus Torvalds氏が11月12日、「Linuxカーネル4.14」のリリースを発表した。長期サポート版（LTS）となり、新しいperfツールの導入、x86_64のメモリ上限の拡大など多数の機能が加わっている。 Linux 4.14は、9月に公開されたLinux 4.13に続くもので、8回のリリース候補（RC）版を経ての正式版となる。長期サポート版として6年間のサポートが提供される（通常のサポート期間は2年間）。 大きな変更点としては、まずx86_64ハードウェアにおけるメモリ上限が拡大された。以前はそれぞれ256TiB、64TiBが上限だったが、仮想アドレス空間で128PiB、物理アドレス空間で4PiBとなった。 また、AMDの「EPYC」プロセッサ向け暗号化技術「AMD Secure Memory Encryption」のサポートが追加された。AMD Secure Proces

Steven J. Vaughan-Nichols （Special to ZDNET.com） 翻訳校正： 編集部 2017-11-14 10:58 Linuxの生みの親であるLinus Torvalds氏が米国時間11月12日、最新の「Linux 4.14」カーネルをひっそりとリリースした。しかし、このリリースは大きな注目を集めるはずだ。Linux開発者らは、4.14がLinuxカーネルの次の長期サポート（LTS）版になることを過去に発表している。このことは重要である。なぜなら、LTS版Linuxカーネルのサポート期間が6年間に延長されたからだ。そのため、IoTやスマートフォン、組み込み型Linuxデバイスの開発者は、それらのOSが2023年までサポートされるという安心感の下で機器を構築することができる。 さらに、新しいLinuxセキュリティ開発ツール群のおかげで、Linuxはかつてな