タグ

ブックマーク / dev.classmethod.jp (10)

  • ExcelデータをTableauで分析し易くする為に整形・編集する | DevelopersIO

    Tableau DesktopではExcelをデータソースとして扱う事が出来るのでTableau自体のデモや簡単なデータ検証・分析を(データベース等に環境を容易せずに)行う事が可能ですが、分析の際に利用するデータは必ずしも分析に適したフォーマットになっていない可能性があります。そこで当エントリではTableauによる分析の初歩段階、Excelで作られたデータに対して接続を行う際に、そのExcelを『より分析に適した』形に成形・編集するポイントについて見て行きたいと思います。(※内容的にはExcelをベースにした形となりますが、一部内容はDBやDWHにデータを格納する際の参考にもなると思います) 目次 Tips 1).1行目はヘッダーとする事 2).同じ種別のデータは行内で並べず、別のデータ行として切り出す 3).ヘッダは単一行に留める(複数見出し行、中見出しのような形でヘッダ項目1つだけ、

    ExcelデータをTableauで分析し易くする為に整形・編集する | DevelopersIO
  • Alteryxで何が出来るのか – 実行可能タスク全197種 概要紹介&リファレンスまとめ #alteryx | DevelopersIO

    データブレンディング及び分析機能を有する『Alteryx』は昨年末から弊社でもパートナーシップ締結を行い、諸案件でも積極的に活用を推し進めているプロダクトですが、こちらのツールでは実に様々な処理を行う事が出来ます。 データブレンディング&予測分析ツール『Alteryx』の米国:Alteryx社とのパートナーシップ締結に関するお知らせ | Developers.IO Alteryx Designer14日トライアル版の入手とインストール、サンプル実行まで | Developers.IO Alteryx Visual Analytics Kit for TableauTableau&Alteryx連携を実現|Tableau Software Tips&Viz Advent Calendar 2014 #19 #tableau | Developers.IO Alteryxを使ってShapef

    Alteryxで何が出来るのか – 実行可能タスク全197種 概要紹介&リファレンスまとめ #alteryx | DevelopersIO
  • Amazon Redshift データ型と列圧縮タイプのまとめ(データ型&列圧縮タイプ対応表付) | DevelopersIO

    Amazon Redshiftではテーブルを作成する際の要素として幾つかポイントがあります。1.と5.については一般的なRDBMSでも用いられるような概念ですね。残りの2〜4についてはRedshift特有の設定となります。当エントリではこの中の『データの型』と『列圧縮タイプ』について、その概要と、実践で使いやすい/調べやすい様に諸々個人で整理した情報などを併せて投下したいと思います。 1.データの型(data types) 2.列圧縮タイプ(column compression types) 3.分散キー(distkey) 4.ソートキー(sortkey) 5.制約(constraint) 目次 データ型 数値型 文字型 日付型 ブール型 列圧縮タイプ raw bytedict delta delta32k lzo mostly8 mostly16 mostly32 runlength t

    Amazon Redshift データ型と列圧縮タイプのまとめ(データ型&列圧縮タイプ対応表付) | DevelopersIO
  • Amazon Redshift: テーブル列圧縮定義の診断・テーブル間データ移行ツール『Amazon Redshift Column Encoding Utility』 | DevelopersIO

    Amazon Redshift: テーブル列圧縮定義の診断・テーブル間データ移行ツール『Amazon Redshift Column Encoding Utility』 先日投稿した下記2のエントリでは、Amazon Redshiftの管理・作業を行なっていく上で便利なクエリを『amazon-redshift-utils』というGitHubプロジェクトのコンテンツを紹介しました。 Amazon Redshift便利ツール『amazon-redshift-utils』の便利SQLスクリプト紹介(AdminScripts編) Amazon Redshift便利ツール『amazon-redshift-utils』の便利SQLスクリプト紹介(AdminViews編) 当エントリでは、その『amazon-redshift-utils』で展開されている『ColumnEncodingUtility』と

    Amazon Redshift: テーブル列圧縮定義の診断・テーブル間データ移行ツール『Amazon Redshift Column Encoding Utility』 | DevelopersIO
  • 【社内資料公開】運用手順書を作る時のポイントについて書いてみた | DevelopersIO

    はじめに こんにちは植木和樹@上越妙高オフィスです。日は私がここ10年くらい意識している運用手順書を書くときのポイントについてまとめてみました。 対象読者 開発・構築したシステムを別の人に引き継ぐ予定のある人 他の人が作ったシステムを引き継ぐ担当の人 半年後の自分でも分かる手順書の書き方に困っている人 (この記事を読むのにかかる時間の目安:5分) 1. ドキュメントの冒頭に書くこと まず個々の詳細手順の前に、ドキュメント自体について記載してもらいたいことです。 1.1. ドキュメントに書かれていることを3行で書く ドキュメントの最初には、このドキュメントに何が書かれているのかを100文字くらいで書いておくと良いでしょう。 システムが増えれば増えるほど手順書も増えていくものです。見つけたドキュメントに自分の期待するものが書かれているのか、冒頭数行でわかるようになっているとうれしいです。 1

    【社内資料公開】運用手順書を作る時のポイントについて書いてみた | DevelopersIO
  • Amazon Redshiftで良く使いそうな便利系SQLをまとめてみた | DevelopersIO

    Redshiftで色々環境構築や調査を進めて行くと、割とちょいちょい良く使うSQL等も出て来ます。そこでこのエントリでは、普段使っている便利系SQL、都度アクセスしてはコピペして使ってるようなSQL、更にはそれらにちょっと一手間加えたSQL等を集約し一覧としてみる事にしました。 必須なもの、また『これも使えるね』というようなものについては適宜追加更新を行っていこうと思ってますので、オススメのSQL文があれば是非教えて頂けると幸いです。 目次 S3からのCOPY処理エラーに関するログを確認する COPY処理時に出力させるエラー件数量を制御する 指定テーブルのテーブル定義を確認する(type1:psqlコマンドで簡易表示) 指定テーブルのテーブル定義を確認する(type2:distkey,sortkey等も表示) 指定テーブルのテーブル定義を確認する(type3:コメント文も併せて表示) テー

    Amazon Redshiftで良く使いそうな便利系SQLをまとめてみた | DevelopersIO
  • Amazon EC2でCentOS6を使用するときのハマリポイント | DevelopersIO

    森永です。 弊社はリモートワークが可能なので、私は休みを取らずに帰省し地元のゆめタウン内でこの記事を書いております。 テーマソングが頭に残るのでどうにかして欲しいです。 さて、先日CentOS6の公式AMI(Amazon公式ではなくCentOS公式)を使って構築を行いました。 その時ハマるポイントがいくつかあったので、まとめておきます。 CentOS7が出た今でも未だに6を使う案件が多いので役立つ方がいれば幸いです。 AMIの選択 MarketplaceでAMIを選択しようとした私に一つ目の関門が現れます。 CentOS6の公式AMIがなんだかいっぱい現れるのです。もうてんやわんやです。 どれを選ぶかはバージョンの要件などでまちまちなのですが、CentOS6をというだけであれば「CentOS 6 (x86_64) - with Updates HVM」をオススメします。 CentOS 6.

    Amazon EC2でCentOS6を使用するときのハマリポイント | DevelopersIO
  • re:dashを使ってRDSのクエリを可視化してみた | DevelopersIO

    ウィスキー、シガー、パイプをこよなく愛する大栗です。 最近re:dashというプロダクトが気になったので試してみました。 2015/06/21 re:dashのAMIが全リージョンで提供される様になり、東京リージョン(ap-northeast-1)でもAMIから起動できる様になりました。 re:dash? re:dashとはとは「Open Source Data Collaboration and Visualization Platform」ということで、つまりデータ連携?可視化ができるプラットフォームらしいです。SQLの可視化などを行えます。 以下のデータソースに対応しています。 PostgreSQL / Redshift MySQL Graphite Google BigQuery MongoDB URL(JSONフォーマット) Script(JSONフォーマット) Python(P

    re:dashを使ってRDSのクエリを可視化してみた | DevelopersIO
  • 【Excel改造】Visual Studio Tools for Officeを用いたExcelアドイン作成【準備編】 | DevelopersIO

    Excelのカスタマイズ 日国内では依然として広く業務でOfficeが用いられています。Officeを構成するツールの一つであるExcel様(神様)に今回は注目していきたいと思います。ちなみにExcel方眼紙は悪魔です。 Excelのカスタマイズには一般的にはVBAが用いられているかと思いますが、今回はVBAではなくVisual Studio Tools for Office(VSTO)を用いて、Excelをカスタマイズして行きたいと思います。 VSTOを用いたExcelのカスタマイズですが、例えば、リボンに独自のメニューを追加して機能を付加するといった事が可能になります。Excel 2007から画面上部にリボンというメニューが用意されており、ここに便利な機能が凝縮されているわけですが、ここに独自の機能を追加できるわけです。 下記はExcel 2013のリボンのホームタブの内容になります

  • PertinoでPrivateなEC2インスタンスにリモートアクセスする | DevelopersIO

    ども、大瀧です。 AWS環境の導入支援でよく課題に挙がるものとして、"PrivateなEC2インスタンスへのメンテナンスアクセス"があります。 AWSというとパプリッククラウドとしてインターネット経由でのアクセスが連想されますが、Amazon VPCではインターネットとの相互接続を持たないPrivateなEC2インスタンスを構成することができます。Webシステムの場合はAPサーバーやDBサーバーなどDMZ領域に置かないサーバー用途で設定することがあり、業務システムの場合は、VPNやDirect Connectでオンプレミスと接続してVPC全体をPrivate構成とすることもあります。一方で弊社のような導入支援やソフトウェア開発に参加する協力会社など、ユーザーのオンプレミス以外のネットワークからインターネット経由で接続したいというニーズもあり、どうやってアクセスするか検討する必要が出てくるわ

    PertinoでPrivateなEC2インスタンスにリモートアクセスする | DevelopersIO
  • 1