AWS LambdaでDynamoDBから取得した値に任意の集計をかける - Qiita
★IDの指定の仕方に関して更新が入っています。最新の記事はこちら★ AWS LambdaでDynamoDBから取得した値に任意の集計をかける（グルーピング処理追加） 前回書いた記事「AWS LambdaでDynamoDBから取得した値の最新レコードを取得する」を、以下の集計にも対応させてみました。 最新値 (latest) 最大値 (max) 最小値 (min) 平均値 (avg) 合計値 (sum) 件数 (count) 前提＆仕様 以下を前提＆仕様として作成しました。 DynamoDBのハッシュキーにID（文字列）、レンジキーに時刻（文字列）を指定しているものとする。 データは時系列に格納されているものとする。 指定したカラムの集計を取るようにする。 集計の時間を指定できるようにする。 集計の種類は指定可能とする。 ID、集計期間、集計対象のカラム、集計の種類はそれぞれJSONのインプ
DynamoDB ベストプラクティス - Qiita
今年は始めて、re:Inventに参加してきたので、その際に見た「Amazon DynamoDB: Data Modeling and Scaling Best Practices」というセッションの内容を共有したいと思います。 内容をだいぶ端折ってるので、間違っている場合には、びしばしツッコミいただければと思います。 では、まいります。 1. CacheはCashなり なんでDynamoDBを使うかといえば、やっぱり、ポチポチっと設定するだけで簡単に読み込み、書き込み性能を上げたり、下げたりできるっていうのが大きなポイントかと思います。 ただ、設定した性能も、データのアクセスパターンによっては思い通りの性能が出ないことがあります。 例えば、ReadCapacityを 100から5,000 に上げたとします。そうると、DynamoDBは、「オレ１人では捌き切れない」と思って、パーティション
Vimで心地良い自動インデント設定を書くためのポイント9個 | Webシステム開発／教育ソリューションのタイムインターメディア
問題 Vimではデフォルトで500種類以上の言語をシンタックスハイライトすることができます。 また、シンタックスハイライト以外の設定も充実しており、 デフォルトでは約100種類の言語で専用の自動インデントが行われるようになっています。 この約100種類は普段使用する範囲ならば何の問題もないのですが、 人口比率の少ない言語で何かを書こうとしたら デフォルトでは専用インデント設定がなかったというケースは案外あります。 文法がC系の言語であれば'smartindent'で誤魔化すことができるのですが、 人口比率が少ない言語は大抵の場合 'smartindent' が使えない言語です。 という訳で独自の自動インデントの設定を書く必要が出てきました。 しかしどう書けばよいのでしょうか。 解決方法 例として Haskell 用のインデント設定を書くことにしましょう。 Haskellはメジャーな言語では
Vimメモ : The NERD Treeでディレクトリツリーを表示してファイル操作 - もた日記
The NERD Tree github.com The NERD Treeというプラグインを使うと図のようにディレクトリツリーを表示することができ、ここからファイル表示、作成などのファイル操作が行える。 インストール NeoBundleの場合は下記行をvimrcに追加。 NeoBundle 'scrooloose/nerdtree' 基本的な使い方 :NERDTreeToggleというコマンドを実行するとディレクトリツリーの表示／非表示を切り替えられるが、毎回コマンドを打つのは大変なので以下のような設定をvimrcに追加。この場合は<C-n>キーで切り替えが可能になる。 map <C-n> :NERDTreeToggle<CR> ディレクトリツリーのキー操作については?を押すとヘルプが表示されるので、これを参照すればよい。 ファイルノード操作 キー 説明 o または <CR> 開く go
[Vim Plugin] NERDTreeのオススメ設定とコマンド一覧 - KAMIYAのアレ
[Vim Plugin] NERDTreeのオススメ設定とコマンド一覧NERDTreeの設定とコマンドについてまとめました。 標準のファイルエクスプローラも使いにくくは無いですが、NERDTreeによって更にVimが使いやすくなります。 NERDTreeとはNERDTreeは高機能なファイルエクスプローラで、GUIのIDEで良くある常時表示型のファイルタブを提供してくれます。 NERDTreeの導入方法NeoBundleでインストールすると楽です。 インストールが終わりましたら､Vimを起動して:NERDTrreeまたは:NERDTreeToggleを実行してみてください｡ 左側に上記画像のようなエクスプローラが表示されます｡ ショートカットキーは下に記載していますが､?キーを押下することで表示できます(トグル) NERDTreeの基本的な使い方 ファイルを開く 基本 enter↵ または
![[Vim Plugin] NERDTreeのオススメ設定とコマンド一覧 - KAMIYAのアレ](https://cdn-ak-scissors.b.st-hatena.com/image/square/77ef6c95c52382d8b1701ff623d654995b1a06d9/height=288;version=1;width=512/http%3A%2F%2Fkamiya555.github.io%2F2015%2F10%2F14%2Fnerdtree-command%2Fnerdtree.png)
GitHub - preservim/nerdtree: A tree explorer plugin for vim.
Use your favorite plugin manager to install this plugin. tpope/vim-pathogen, VundleVim/Vundle.vim, junegunn/vim-plug, and Shougo/dein.vim are some of the more popular ones. A lengthy discussion of these and other managers can be found on vi.stackexchange.com. Basic instructions are provided below, but please be sure to read, understand, and follow all the safety rules that come with your power too
VimのNERDTreeがTmuxの移動を加速させる [動画付き] | RickyNews
Tom Maisey TmuxとVimを併用されている方も多くいらっしゃると思います。 実はこの2つを組み合わせると移動がすごい便利になります。 意外とVim + Tmuxの組み合わせ技の記事は無いため、書こうと思います。 Vimでいえば、ターミナル派とGVim派の2流派に分かれると思いますが、 もっぱら私はターミナル派です。なぜならTmuxとの親和性が良いからです。 エディタでコードを書きながら、すぐにMySQLなどコンソールに叩くことも簡単です。 たまにあのGVim特有の滑かで早い描画に戻りたくなることもありますが、これはトレードオフと思いぐっと我慢しています。 Vimでのコマンドライン もちろんVimでもシェルのコマンドはデフォルトで叩けます。 EXモードに移行し、エクスクラメーションマークをつければコマンドを実行可能です。 :!mv file.txt file.backup.txt
![VimのNERDTreeがTmuxの移動を加速させる [動画付き] | RickyNews](https://cdn-ak-scissors.b.st-hatena.com/image/square/44f6371238499d97ff4209de7bdbea538c5f4f39/height=288;version=1;width=512/http%3A%2F%2Fwww.rickynews.com%2Fimages%2Farticles%2F20140728%2Ftree.jpg)
TweepyのStatusオブジェクトをJSONに変換する - Qiita
jsonで書き出したい時に困ったけどドキュメント見てもググっても見つからなかったからメモ 結局 t._jsonで出来る（tはTweepyのStatusオブジェクト）。 import sys import tweepy import json consumer_key = sys.argv[1] consumer_secret = sys.argv[2] access_token = sys.argv[3] access_token_secret = sys.argv[4] screen_name = sys.argv[5] auth = tweepy.OAuthHandler(consumer_key, consumer_secret) auth.set_access_token(access_token, access_token_secret) client = tweepy.API(
Tweepyのstatusリストで何が取れるのかわからなかったので、取り出してみた - Qiita
# Timelineの先頭のツイートを取得 status = api.home_timeline()[0].text なんてやって値を取っていたわけなんですけど、text以外の値も欲しいなと思って、調べてリストにしたのでメモがてら貼っておきます。 * Document見ながら作ったわけじゃないので、わからなければ、Document読んで下さい。 開発環境 機種名 : MacBook Pro OS : Yosemite 10.10.5 プロセッサ名 : Intel Core i5 2.6 GHz メモリ : 16 GB グラフィック : Intel Iris 1536MB python 2.7.12 Tweepy 3.5.0 本題 えいっ
[Python] インスタンスのプロパティへ動的にアクセスする - YoheiM .NET
こんにちは、絶賛Pythonコーディング中の@yoheiMuneです。 今日はPythonのインスタンスに対して、動的にプロパティを追加したり読み取ったりする方法をブログに書きたいと思います。 Pythonでデータを持つにはクラスのインスタンスが便利 Pythonでデータを保持するためには、配列、辞書、タプルなどいろいろとありますが、個人的にはクラスのインスタンスが便利です。例えば以下のような空っぽのクラスを作ります。 # 空っぽクラス class Container(): pass そのクラスに対して、好きなプロパティを追加していくことで、データを保存します。 c = Container() c.name = "Yohei" c.age = 30 c.city = "Yokohama" この保持の仕方であれば辞書（Dictionary）でもできますが、文字列でキーを指定するところがちょっ
![[Python] インスタンスのプロパティへ動的にアクセスする - YoheiM .NET](https://cdn-ak-scissors.b.st-hatena.com/image/square/6034aeb1eb87eccaf652a0fd5ce6f86c6efde904/height=288;version=1;width=512/https%3A%2F%2Fwww.yoheim.net%2Fimage%2F460.jpg)
最近覚えたSQLAlchemyのTips
先週は、レガシーなOracleデータベースと格闘していた(文字エンコーディングの件もその一つ)。 __table__と__tablename__の違い __table__は適切に設定済みのテーブルに対して使うらしい。自分でごちゃごちゃと設定したい場合は__tablename__と__table_args__を使うべし How to override a column name in sqlalchemy using reflection and descriptive syntax 複合プライマリーキーでのone-to-many 主キーが複合プライマリーキーの場合はそれぞれにprimary_key=Trueをつけるが、外部キーで一対多の関連付けをしたい場合には __table_args__で外部キー設定をしておく。 class Protocol(Base): __tablename__ =
Flaskでpostされたjsonを受け取る - conta's diary
Flaskのrequestでデータを受け取るには request.data request.form request.json 等がある。 それぞれ、Content-Typeで受け取り方が切り替わるらしい。 request.jsonはContent-Typeをapplication/jsonに設定していれば 自動的にオブジェクトへパースしてデータを返してくれる。 POSTするデータはJSON.stringifyしてないと400エラーが出て怒られる。 なので、Javascript側ではajaxの設定を下記のようにする。 Content-Typeをapplication/jsonに データはJSON.stringifyで文字列に 例) $.ajax( { url:'/api/test', type:'POST', data:JSON.stringify(data), dataType: 'js
EventTarget: addEventListener() メソッド - Web API | MDN
addEventListener() は EventTarget インターフェイスのメソッドで、ターゲットに特定のイベントが配信されるたびに呼び出される関数を設定します。 対象としてよくあるものは Element、Document、Window ですが、イベントに対応したあらゆるオブジェクトが対象になることができます （XMLHttpRequest など）。 メモ: addEventListener() メソッドは、イベントリスナーを登録するための推奨される方法です。以下のような長所があります。 1 つのイベントに対して複数のハンドラーを追加することができます。これは、ライブラリーや JavaScript モジュール、あるいは他のライブラリーや拡張機能とうまく動作させる必要があるその他の種類のコードで特に有効です。 onXYZ プロパティを使用するのとは対照的に、リスナーが起動されるときの
セレクトボックスを選択したらサブミット - Qiita
セレクトボックスを選択したらサブミットしてほしい時がありませんか？ （例えば、名古屋事業所と福岡事業所とで表示させる内容を変えたい時とか） 忘れるといけないので、書き留めておこうと思います。 ①submit()関数をonchangeイベントで呼び、this.formのアクションを実行させる方法 <form method="post" action="#"> <select name="office" onchange="submit(this.form)"> <option value="名古屋">名古屋</option> <option value="福岡">福岡</option> </select> </form>
ぽよメモ
TL; DR おうちサーバも監視したい SaaS 比較検討 Mackerel Datadog Elastic Cloud NewRelic Grafana Cloud セットアップ Grafana Cloudのアカウント作成 Grafana Agentのインストールとセットアップ cAdvisorを建てる cAdvisorのメトリクスを参照する Grafana Cloudで表示する ダッシュボードを作る ログを検索する 無料枠を超えないために Promtailの設定にリミットを入れる scraping intervalを広めにとる 不要なメトリクスやlabelをdropする アラートを仕掛ける 注意点 まとめ TL; DR Grafana Cloudは無料枠が大きく個人でも使いやすい メトリクス・ログ・アラートに加えトレースまで扱える Grafana Agentをnon-rootで動かして
Basic Relationship Patterns — SQLAlchemy 2.0 Documentation
Basic Relationship Patterns¶ A quick walkthrough of the basic relational patterns, which in this section are illustrated using Declarative style mappings based on the use of the Mapped annotation type. The setup for each of the following sections is as follows: from __future__ import annotations from typing import List from sqlalchemy import ForeignKey from sqlalchemy import Integer from sqlalchem
SQLAlchemyのback_populatesとbackrefの違いとどちらも使わない場合 - Qiita
SQLAlchemyのback_populatesとbackrefって何がどう違うの？っていうかどっちも書かないとどうなるの？という話。 結論から書くと、 (1)backrefを使用した場合 双方向のリレーションを自動的に組んでくれる。 (2)back_populatesを使用した場合 双方向のリレーションを自分で組む必要がある。 (3)back_populatesもbackrefも使用しない場合 トランザクション中、逆方向のフィールドが自動更新されない。 ということになる。 では、具体例を見ていく。 例としてEventモデルとTicketモデルを考える。 1つのEventは複数のTicketをもっている、One to Manyの関係。 backrefを使用した場合 class Event(Base): __tablename__ = 'event' id = Column(Integer
[python]文字列置換(フォーマット)まとめ(format関数, %dなど) - dackdive's blog
python による文字列置換の書き方について。 いくつかあるのでまとめてみました。 python は2.7。 色々調べましたが、公式ドキュメントが一番詳しかった気がします。 （文中にリンクあり。または「リファレンス」参照） ここから中身。 まず、文字列のフォーマットにはざっくりと以下の2つの方法があります。 %d, %sなどの%演算子のフォーマット format() 関数を使ったフォーマット 2は python2.6 から導入された新しい関数です。 1. %演算子のフォーマット 参考: http://docs.python.jp/2/library/stdtypes.html#string-formatting 基本的な書き方 # 基本形 >>> print 'Hello, %s!' % 'World' Hello, World! # 複数ある場合はタプルで渡す >>> print 'H
![[python]文字列置換(フォーマット)まとめ(format関数, %dなど) - dackdive's blog](https://cdn-ak-scissors.b.st-hatena.com/image/square/676f8dd85fce284e8907a544dd0ffe0630586bff/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F12921228815712615374%2F8454420450073396162%2F1645799893)
新刊『朝日ぎらい』のあとがきを公開します – 橘玲 公式BLOG
6月13日発売の新刊『朝日ぎらい』の「あとがき」を、出版社の許可を得て掲載します。 ****************************************************************************************** お気づきの方も多いと思うが、『朝日ぎらい』のタイトルは井上章一さんのベストセラー『京都ぎらい』から拝借した。この“パロディ”を快諾していただいたばかりか、大いに面白がってくださった井上さんにまずは感謝したい。 本書を最後までお読みいただいた方はおわかりだと思うが、私の政治的立場は「リベラル」だ。「普遍的人権」という近代の虚構を最大限尊重し、いわれなき差別のない自由な社会が理想だと思っている。 「リバタニア」のなかでは日本では数少ない「リバタリアン部族」に属し、日本は重層的な身分制社会だとして、その根幹にある日本的雇用を批判してき
[axios] axios の導入と簡単な使い方 - Qiita
axios について､いくつか記事を書いておきながら導入についての記事を書いていなかったので､導入について記しつつ こちらの記事 で示した構成も作ってみた｡ 更新情報 2018/05/15 axios へのリンクを更新しました( @ledsun 様、ご指摘ありがとうございました ) 2018/07/02 axios のインスタンス生成時に指定している headers の内容を修正しました( @dyoshikawa 様、ご指摘ありがとうございました ) 過去に書いた axios の記事 [axios] axios で UnitTest 時に adapter を利用する [axios] 画像データのレスポンスを取得する際にハマった話 この記事を実施した環境 Windows10 Home 64bit macOS High Sierra( 10.13.4 ) nodist v0.8.8 ( in
![[axios] axios の導入と簡単な使い方 - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/344e7c69ed356914069c04942361f1d6c3c0cbb9/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCYXhpb3MlNUQlMjBheGlvcyUyMCVFMyU4MSVBRSVFNSVCMCU4RSVFNSU4NSVBNSVFMyU4MSVBOCVFNyVCMCVBMSVFNSU4RCU5OCVFMyU4MSVBQSVFNCVCRCVCRiVFMyU4MSU4NCVFNiU5NiVCOSZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9NjU2OGY1YjlhYzM1MDdjMzQ5NDhjNGM4MWYwZTNkNDU%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwa3NoLWZ0aHImdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT0zNiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPWMwYjMwZGRlMzU5NDgyNDEyNDc3ZDRlMDg5NjEwNTk4%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3Dde90dc63de1253f78e81a419ea64560d)
Python初心者が1時間以内にjanomeで形態素解析できた方法 - Qiita
Python初心者（プログラミング未経験者含む）が1時間以内に何らかの文章（複数可）をPythonのjanomeで形態素解析する方法、解析した語彙の出現頻度を調べる方法を紹介します。 準備するもの： パソコン、形態素解析したい文章・語彙の出現頻度を調べたい文章 環境： windows7,Python3.6.2, janome0.3.3 mac等でできなかったらすいません。 活用例: メルマガやブログのタイトル・本文に含まれるワードの出現頻度調査(効果が高い・低いメルマガ・ブログはどんなワードが多く含まれているか) ※今回、エクセルから文章を読み取って形態素解析します。エクセルは1列目しか使用しませんが、複数行の登録も可能です。文章の量にもよりますが、2万行くらいいけます。（1列目にばーっと下へ文章が並ぶイメージ。一文でも可） 1列目(1行目から文章をいれてください) Pythonインストー
Python 3で日本語をprintする際のUnicodeEncodeErrorはLANGに気をつける - Qiita
サマリ Python3でUnicodeEncodeErrorが起きたときには LANG=ja_JP.UTF-8 と環境変数が設定されているか確認する language-pack-ja がインストールされているか確認する 現象 今まで7年ほどPython 2系を使ってきましたが、そろそろ3系に移ろうと思っています。 Python3では、文字列まわりがUnicodeに統一されて、便利になったと聞いていたのですが、UnicodeEncodeErrorでつまづきました。 OSはUbuntu 14.04.4 LTSでPythonはpyenvで入れた3.5.2です。 実行したコードは下記のHello Worldです。
プログラミングは何歳までなら習得可能か？｜山本一成🚗TURING
私は今32歳で、プログラムを始めた時は20歳くらいからでした。始めた時にすぐ思ったことは、ずっと小さい時からプログラムをしている人たちには勝てないでした。でもどうやらそんなに簡単なことではないようです。 今でも告白すればアセンブラというものすごいローレイヤーのことは全然わかりません。本当に読めません。一応様々な分野のプログラミングは少しずつはできたりしますが、本当に得意なところはごくごく限定された領域だけです。私、コンピュータのすべての領域に全然精通していません。 Software is eating the world「ソフトウェアが世界を食い続けている」こういう言葉があります。世界中の様々な領域がソフトウェア化していることを表しています。もはやコンピュータが絡まない学問領域やビジネス領域はほとんど残っていないといってもいいはずです。 もうどんなプログラマもコンピュータの世界すべてを見通
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
pythonでオブジェクトのクラスを調べる - Qiita
python: sqlalchemy で複合主キーを設定する : プログラマー社長の「日々発見」
GitHub - axios/axios: Promise based HTTP client for the browser and node.js
python で形態素解析。Janome が簡単。pip 一発でインストール | コード７区
Pythonで辞書のキー・値の存在を確認、取得（検索） | note.nkmk.me