サクサク読めて、アプリ限定の機能も多数!
トップへ戻る
ノーベル賞
hotchpotchj37.wordpress.com
こんにちは。まーやです。先日de:codeのセッションで、Koalasというものがあるよ!と教えていただきました。とても気になるライブラリだったのでとりあえず触ってみることにしました。・・・のブログです。 Koalas とは Databricks 社が開発中のPython分散処理用DataFrameのライブラリです。 https://koalas.readthedocs.io/en/latest/ もともとPySpark DataFrame というSpark用のDataFrameが存在していますが、このPySpark DataFrameはPandasとは少々書き方が異なります。 似ているところも多いけれどもともとの思想がSQL思考(Spark DataFrame)と表計算思考(Pandas)と異なるため、記法に統一感はありません。 そのため、例えば、 「分析チームがpandasを使った分析
こんにちは。まーやです。つい最近までSAML認証の処理について実装にちょっぴり携わっていたので自分のメモがてら、ブログしておきたいと思います。細かい設定についてはさておきざっくりと流れだけね。私自身まだ知識があいまいなところもたくさんあるし、間違って覚えてることもたくさんあるかもなので、間違いあったらぜひご指摘ください。 SAML認証とは いきなりですが詳しい話は「SAML とは」でぐぐってほしい・・・。こんなページとかあります↓ https://boxil.jp/mag/a2950/ Security Assertion Markup Languageの略で、要するにシングルサインオン(以後SSO)の規格です。XML形式で認証情報のやり取りを行います。このSAMLを使う認証システムの代表格としてはMicrosoftアカウントを利用した認証(Active Directory/ Azure
どーもです。まーやです。作業中にちょっとハマったので自分用にメモ。 やりたかったこと S3でstatic website hostingを実施 AWS Lambda 内で以下操作を行う(今回対象となるファイルはJSONファイル) S3 バケツ内のファイル読み込み 読み込んだファイルのデータを更新してS3へupload 読み込む&uploadするファイルにはパブリックアクセス権限(everyone read)を付与したい Lambdaは諸事情によりNode.jsで実装しました。 やったこと S3のstatic web hostingについてはネット上にたくさん落ちているので割愛。 Lambda内でS3 getbjectもほぼチュートリアル通りに実装。 この後に、とってきたJSONを使ってごにょごにょしたかったのでPromise使って順番制御しました。 /** この変数群は後述するs3Uplo
今日はエンジニアらしいんだからしくないんだかよくわからないけど、知見溜まったし大変便利になったので自分の備忘録がてらブログ綴ります。 今日のテーマは、「そうだ。全部Slackにまとめよう。」です。何をまとめるのか。自分が確認しなくちゃいけないありとあらゆる通知を全部です。 具体的には何を指すのか。私の場合は以下通知。 会社内の会話 会社のシステムエラー通知 会社のBacklog/redmineのチケット更新 Java女子部のstaffやりとり会話 Java女子部のSNS各種通知や問い合わせ JJUGのSNS各種通知や問い合わせ JJUGの幹事やりとり会話 PyLadiesTokyoのstaffやりとり会話 PyLadiesのSNS各種通知や問い合わせ などなど・・・ざっくり出してもこんなかんじ。SNS各種〜とかまとめていますが、それぞれのコミュニティでそれぞれTwitterとかFacebo
本記事は Java Advent Calendar 2015 19日目 です。19日目大変ギリギリの投稿で本当に申し訳ないです。 どうもこんにちは。まーやです。Javaの猛者が集うアドベントカレンダーになぜかうっかり参加しちゃった初心者系の人間のお話です。 最近お仕事で参画した某改修プロジェクトでは、文字列の連結の処理がものすごい多いソースでした。改修にあたり「そういえば文字の連結ってどのくらいの量の時にどれ使えばいいのかしらん…」とふと考えました。多分多くのできるエンジニアとっくにそんなところは通り過ぎたと思うし、ググれば”これくらい差があるよ!”って結果が出された記事もたくさん見ることがでるんですが、あえて「自分でも検証してみよう〜」というのが今回の記事の内容・・・だったんですが、タイトルの通り、脱線してまーやがいかに無知だったかの話になります。 【最初に考えていたこと】 文字列の連結
本日の投稿は Python Advent Calendar の5日目 です。初Python系のに参加です。初心者が紛れ込んですみません・・・ 私は普段(多分)極度のSlack依存生活です。運営しているコミュニティ3つ、カンファレンスグループ2つ、と会社のやつ。付け加えて、自分が興味のあるもの(例えばAWSのニュースとか舞浜関係の情報とか)をキュレーションしたり遊び開発したりに使ってる1人Slackが1つ。とりあえずSlack開いておけば見たい情報は流れてくるような生活です。 が。どうでしょう。Qiitaのアドベントカレンダーはrssがついているので /feed subscribe 【URL】 してあげれば毎日データが流れてくるのですが、ADVENTARは残念ながらrssが見当たりません(探すのが下手なだけ?)。でも私はSlackにADVENTARのアドベントカレンダーの情報も流したい!Ge
Amazon Linux に Pandocを入れて色々検証してみようと思ったら、最初のインストールでちょっぴり嵌ったのでメモしておきます。 基本的にはコチラのサイトにあるとおり、Homebrew(mac)やapt-get(Ubuntu系)、yum(RedHat系)でいけるはずです。 が。 私が今回使ったのはAmazonLinux。「yumでいけるやろ!」と実施してみた結果・・・No package エラーで怒られた(´・ω・`) で、Google先生に聞いてみたらコチラのサイトがヒットしましたので試してみました! #rpm wgetして・・・ wget http://sherkin.justhub.org/el6/RPMS/x86_64/justhub-release-2.0-4.0.el6.x86_64.rpm rpm -ivh justhub-release-2.0-4.0.el6.x
このページを最初にブックマークしてみませんか?
『hotchpotchj37.wordpress.com』の新着エントリーを見る
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く