はてなブックマーク

はじめに システムの稼働状況とかミドルウェアの統計情報とかを手っ取り早く可視化するためにRを使ってみようということで書き始めた連載企画です。 Rでは、集計結果をサクッとWebアプリケーションとして作成するためのShinyというステキなパッケージが提供されています。Shinyを使えば、Webアプリケーションの知識があまり無くても、割と簡単にWebアプリが作れて、きれいなWebページでRによる集計結果を表示させることができます。 今回はshinydashboard編です。 関連記事 インフラ屋さんのためのR言語: 環境構築編 オフラインでのR環境構築 on RHEL z/OSにRを導入してみた インフラ屋さんのためのR言語: プログラミング編 R Markdownによるレポート生成 R MarkdownのHTMLレポートをブラッシュアップ R - ShinyによるWebアプリケーション作成:

はじめに NTFSフォーマットのUSB HDDをLinuxに接続して認識させようとした時にちょっとつまづいたのでその時のメモです。 ターゲットのLinuxマシンが外部のWebにつながっておらず(オフライン)、Linux用のSWのインストーラーをWindowsマシンで入手してUSB HDD経由でLinux環境に持っていく、みたいな状況を想定してます。 ※環境: RHEL 7.2 NTFS認識用パッケージ導入 通常NTFSのファイルシステムをマウントしようとすると"unknown filesystem type"で怒られます。 RHELでは標準でNTFSファイルシステム認識用のパッケージは提供されていないようです。 NTFS関連のパッケージはepelリポジトリで提供されていますが、ここではLinuxがWebと接続できない想定なので、以下のサイトから個別にダウンロードして適用する必要があります。

はじめに Excelのマクロを使ってなんやかんやデータの集計をしたりすることがあると思います。これが定型的な処理で日次とか週次で実行する、あるいはパラメーターを変更して大量のケースを機械的に行う必要がある、というような場合、いちいちExcelファイル開いてパラメーター変えてポチっとマクロのボタン押すってのも面倒なので、自動化したいですよね。 バッチファイルからExcelマクロを実行することができる、ってのが分かったので整理します。何かと応用が利いて便利だと思います。 マクロを実行するVBScript バッチから...と言いつつ、実はVBScriptです。というのも、VBScriptはよく分からないので、基本バッチを使ってバッチで出来ないところは他の仕組みで補うという方針なもので... 関連記事: Windowsバッチまとめ Windowsバッチまとめ 補足: バッチで出来ないことを他の仕組

#はじめに Apache Spark勉強用に、Windows上にSpark環境作ってアプリケーション(とりあえずScala)を作成/コンパイル/実行する、という所までやってみます。 色々眺めていると開発環境としてはIntelliJ, Eclipseあたりが主流なようです。あとはJupyter Notebook？ 合わせてビルドツールとしてsbt, mavenなどが使われたりするようです。が、素人には初モノの要素が盛りだくさんすぎてアワアワしはじめたので、最低限sbtだけ使ってまずは動かす所までの手順を整理しておきます。 #環境構築 ##Apache Sparkのインストール この辺の記事を参考にSparkをインストールします。 Sparkアプリケーションの基本と、はじめに押さえておきたい重要な概念 まずはApacheのサイトからダウンロード。 https://spark.apache.or

はじめに Apache Saprkのお勉強を始めるにあたってPC上に環境を作ってみようと思ったのですが、IBM Bluemix上でSparkのサービスが提供されているようなので使ってみました。 基本的なコマンドを実行してみる所までのメモです。 ※Bluemixは30日間無償のフリートライアルというのが提供されています。 ※Bluemixのユーザーインターフェースは結構コロコロと変わるイメージがあります。細かい所はすぐ変わってしまうかもしれませんがあしからず。 手順例 Sparkインスタンス作成 BluemixにログインしてカタログからSparkを検索します。 データ&分析のカテゴリに 「Apache Spark」というサービスが表示されるので、ポチっとクリックします。 サービス名とか変更できるようですが、そのまま。 価格プランは2 Spark Execution(無料)を選択して、作成！

はじめに Rは統計解析用の言語として広く使われているもので、その開発/実行環境はオープンソース(フリー・ソフトウェア) として提供されています。 R多様な統計手法に対応しているらしいのですが、私は統計には全く疎いのでその辺は置いておいて... スクリプト言語なのでお手軽に使える: フリーの開発環境も充実しているし、インタプリタ言語ながらそれなりに高速に処理できるらしい きれいなグラフが比較的容易に描ける レポート作成の自動化がしやすい: Word, PDFなどの静的レポートだけでなく、HTML文書, WebアプリのようなInteractiveにグラフを動的に操作できるレポートも作れる！ という辺りの特徴に注目すると、システム(OS、ミドルウェア、アプリ等)が出力するログを分析して可視化(グラフ化)するのに使うといいんじゃないかと。 例えば、プロセス毎のCPU使用率、メモリ使用率、ディスクの

はじめに システムの稼働状況とかミドルウェアの統計情報とかを手っ取り早く可視化するためにRを使ってみようということで書き始めた連載企画です。今回はレポート生成編です。 R Markdownというパッケージを使用すると、Word, PDF, HTML等の形式のレポート生成を自動化できます。Rでデータを集計してグラフを作ったとしても、それをExcelやWordにコピペしてレポートを作っていたのでは非常に効率が悪いです。そこをサクッとスマートにやりましょうという話です。 レポート生成の自動化の意義や、R Markdownの使い方等については、以下にすばらしい連載記事がありますので是非一読されることをお勧めします。 R Markdownで楽々レポートづくり 詳細は上の記事見ていただくのがよいと思うので、ここでは一通りレポート生成させてみる所を中心にまとめます。 関連記事 インフラ屋さんのためのR言

はじめに Python? PHP?　いやいや、そんなオサレなものではなく、ここで取り上げるのは今そこにあるWindowsバッチです。 たまたま最近Windows Server周りの管理やWindowsを使ったバッチ運用の仕組み作りに携わることがあり、今更ながらWindowsバッチと格闘することになったので、備忘録としてまとめます。 Unix系のシェル・スクリプトに慣れているとWindowsバッチは結構クセがあって使いづらいと思います。VBScriptも今更な感じだし本命はPowerShellなのかなと思いますが、PowerShellはパッと見とっつきにくそうで拒絶反応が出ました。 手軽にグーグル先生に頼れない現場環境であったということもあり、手っ取り早くWindowsバッチを使ってみたという感じです(Windows10だとbashが使えるらしいので早くそういう環境が広がってほしいんですが.