A Fast, Minimal Memory, Consistent Hash Algorithm ご紹介(システム系論文紹介 Advent Calendar 2014）. - Qiita
A Fast, Minimal Memory, Consistent Hash Algorithm ご紹介(システム系論文紹介 Advent Calendar 2014）.hashシステム系論文紹介分散ストレージjumpconsistenthash (本稿は, システム系論文紹介 Advent Calendar 2014, 12/20 です http://www.adventar.org/calendars/440) 論文は arXiv から取得できます. http://arxiv.org/abs/1406.2294 Jump Consitent Hash と呼ばれる, 分散ストレージ系で有益なハッシュ関数を求めるアルゴリズムです. 現在史上最強のハッシュアルゴリズムのひとつと言えるでしょう. 無性に分散ストレージライブラリを作りたくなってきますね! 共著者の Eric Veach にも注
GitHub - facebookarchive/beringei: Beringei is a high performance, in-memory storage engine for time series data.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
This is a very long transcript for a very long talk. The talk’s running time is close to 120-150 minutes, and transcript may take even longer if digested thoughtfully. Please plan your reading accordingly. There are five large sections which are mostly independent of each other, that should help to split the reading. The talk is correct to the best of my knowledge, but parts of it may still be inc
PyDbLite, a small in-memory database engine « Python recipes « ActiveState Code
PyDbLite, a small in-memory database engine (Python recipe) by Pierre Quentel A small, fast, in-memory database management program The database object supports the iterator protocol, so that requests can be expressed with list comprehensions or generator expressions instead of SQL. The equivalent of : cursor.execute("SELECT name FROM table WHERE age=30") rows = cursor.fetchall() is : rows = table(
GitHub - spotify/annoy: Approximate Nearest Neighbors in C++/Python optimized for memory usage and loading/saving to disk
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
This document summarizes key aspects of memory management in RubyMotion. It discusses how Ruby uses garbage collection while iOS uses reference counting. Developers need to avoid retain cycles when objects strongly reference each other. Using WeakRef allows child objects to weakly reference parent objects to prevent retain cycles from occurring. The document demonstrates examples of retain cycles
zod-to-openapiで、既存のAPI実装にOpenAPIドキュメントを後付けする | Memory ice cubes
昔々あるところに、既存のWeb APIの実装がありました。 それなりに実装を進めた後に、天の声が言いました。「OpenAPIのドキュメントを公開したい」と。 さて、あなたならどうする？っていうニッチな問いに対する一つの答えとして。 ルーターごと乗り換える？ たとえば今回でいうと、元のAPIはCloudflare Workersにデプロイされてた。 ので、たとえばhonoとかitty-routerとか、OpenAPIのドキュメント生成ができるエコシステムが整ってるルーターに乗り換えてしまうという手がある。 https://github.com/honojs/middleware/tree/main/packages/zod-openapi hono好きなあなたに https://github.com/cloudflare/itty-router-openapi/ itty-router好きな
MySQL performance: Impact of memory allocators (Part 2)
Last time I wrote about memory allocators and how they can affect MySQL performance in general. This time I would like to explore this topic from a bit different angle: What impact does the number of processor cores have on different memory allocators and what difference we will see in MySQL performance in this scenario? Let me share a conclusion first: If you have a server with more than 8 cores
Out of memory and no killable processes... のカーネルパニックを起こしたい - hibomaの日記
イントロ dsas.blog.klab.org こちらのエントリを拝見したのだが Out of memory and no killable processes... というログを出してカーネルパニックするケースがあるのだなと初めて知った。 幸いにして、過去に同様のメッセージを出すカーネルパニックには遭遇したことがない。あるいはログが取れてなくて気がつかなかっただけかもね! モチベーション 故意に異常を起こして、このカーネルパニックを見てみたい 🔥💀 Out of memory and no killable processes ... のコード 該当のログを出してカーネルパニックするコードは out_of_memory に書かれている (ソースは CentOS7.4 1708 ) /** * out_of_memory - kill the "best" process when w
Memory Alpha
ようこそMemory Alpha日本語版へ! Memory Alpha とは、スタートレックに関するあらゆる情報を網羅した百科事典サイトを作成する共同プロジェクトです。 本国アメリカでは2003年11月にプロジェクトがスタートし、この日本においても2008年1月にプロジェクトがスタートしました。 現在の総記事数は3,266件です。プロジェクト参加・活動中のメンバー数は3名です。 スタートレックとは？→詳細はこちら
メモリーカードから削除した写真を復元できるソニー公式ソフト「Memory Card File Rescue」 | フリーソフトラボ.com
ソニーが公式配布している無料のファイル復元ソフトです。SDカードやメモリースティックから削除した写真や動画ファイルの復元が可能で、復元性能が非常に高いのが特徴です。
Fusion IO が，Auto Commit Memory という新技術のプレスリリースをした．プレスリリースによると，数十億 IOPS という驚異的な性能が出るということだが，PCI Express の Bus を介して毎回 commit しているとすると，明らかに物理性能を超えており，ホントにデータの永続化が保証されているか気になったのでメモしておく．根拠は全て書いているが，ところどころに私の予想が入っているため，正しさは保証できないので注意されたし． まず，数十億 IOPS を達成するには，PCI Express の bus を介していたら間に合わない．しかし，特殊なハードウェアを使っているわけではなく，プレスリリースには HP ProLiant DL 370 + ioDrive2 Duos を使っていると記述されている． (プレスリリースから引用 http://www.fusio
GitHub - aws/aws-secretsmanager-agent: The AWS Secrets Manager Agent is a local HTTP service that you can install and use in your compute environments to read secrets from Secrets Manager and cache them in memory.
The AWS Secrets Manager Agent is a client-side HTTP service that you can use to standardize consumption of secrets from Secrets Manager across environments such as AWS Lambda, Amazon Elastic Container Service, Amazon Elastic Kubernetes Service, and Amazon Elastic Compute Cloud. The Secrets Manager Agent can retrieve and cache secrets in memory so that your applications can consume secrets directly
GitHub - bloomberg/memray: Memray is a memory profiler for Python
Memray is a memory profiler for Python. It can track memory allocations in Python code, in native extension modules, and in the Python interpreter itself. It can generate several different types of reports to help you analyze the captured memory usage data. While commonly used as a CLI tool, it can also be used as a library to perform more fine-grained profiling tasks. Notable features: 🕵️♀️ Tra
Memory Allocation
One thing that all programs on your computer have in common is a need for memory. Programs need to be loaded from your hard drive into memory before they can be run. While running, the majority of what programs do is load values from memory, do some computation on them, and then store the result back in memory. In this post I'm going to introduce you to the basics of memory allocation. Allocators
Memory Analysis for Android Applications
[This post is by Patrick Dubroy, an Android engineer who writes about programming, usability, and interaction on his personal blog. — Tim Bray] The Dalvik runtime may be garbage-collected, but that doesn't mean you can ignore memory management. You should be especially mindful of memory usage on mobile devices, where memory is more constrained. In this article, we're going to take a look at some o
The latest news from Google on open source releases, major projects, events, and student outreach programs. We’re pleased to announce C++ B-Tree, a C++ template library that implements B-tree containers with an analogous interface to the standard STL map, set, multimap, and multiset containers. B-trees are well-known data structures for organizing secondary storage, because they are optimized for
西川善司の3DGE：「Radeon RX 6000」詳報。高性能の鍵となる「Infinity Cache」と「Smart Access Memory」の仕組みとは
西川善司の3DGE：「Radeon RX 6000」詳報。高性能の鍵となる「Infinity Cache」と「Smart Access Memory」の仕組みとは ライター：西川善司 開発コードネーム「Navi 2X」と呼ばれていた「Radeon RX 6000」シリーズの第1弾として，「RX 6800 XT」（以下，RX 6800 XT）と「Radeon RX 6800」（以下，RX 6800）が登場した。AMD初のリアルタイムレイトレーシング対応GPUの登場に，胸が熱くなったRadeonファンも少なくないだろう。 本稿では，発売前に掲載した筆者による解説記事の第2弾として，第1弾の時点では明確になっていなかった詳細についてレポートしたい。 ついにRadeon VIIを超えたハイエンドGPUのNavi 2X RDNA 2アーキテクチャベースのGPUはNavi 2Xと呼ばれていたが，「Ra
Memory Management of C# with Unity Native Collections
This document discusses C# and memory management in Unity. It begins by introducing the author and some of their open-source projects related to C# and Unity, including libraries for serialization and reactive programming. It then discusses using async/await with Unity through the UniTask library. The document also covers differences in memory management between .NET Core and Unity due to using di
A recent trend in Deep Learning are Attention Mechanisms. In an interview, Ilya Sutskever, now the research director of OpenAI, mentioned that Attention Mechanisms are one of the most exciting advancements, and that they are here to stay. That sounds exciting. But what are Attention Mechanisms? Attention Mechanisms in Neural Networks are (very) loosely based on the visual attention mechanism found
ブログ パスワード認証 閲覧するには管理人が設定した パスワードの入力が必要です。 管理人からのメッセージ 閲覧パスワード Copyright © since 1999 FC2 inc. All Rights Reserved.
先日、Publickeyにて"Fusion-io、10億IOPSの新技術「Auto Commit Memory」発表。ストレージなんてレベルじゃない、パーシステントなメモリだ"という記事が紹介された。10億IOPS！なんていうと、普段ITに携わっている人間としては信じがたい数字であり、思わず眉にたっぷり唾を塗って身構えてしまう。その一方で、「あのFusion-IOならやりかねない」という淡い期待も抱かずには居られない。記事を読んだところ、既存のioDrive2 Duoを使い、ソフトウェアで10億IOPSを達成したとのこと。同じハードウェアなのにいきなり性能が飛躍的に向上した！というのもにわかには信じがたい。一体どういうことだろうか？と色々考察したことをまとめてみた。（あくまでも筆者の考察および推測であるという点はご理解頂きたい。） どのようなソフトウェアだろうか？Auto Commit M
さらくのVPSでUbuntu 10.04を使っているのだけけど、nginx + php5-fpmをインストールしてみた。 以前はnginx + php5-cgiだったのだけど気がつくとphp5-cgiがお亡くなりになっていることが結構あるので、この際nginxを最新版にしphp5-cgiではなくphp5-fpmを使うことにした。 まず、最新版のnginxをインストール。 Install /etc/apt/sources.listに以下を追加。 deb http://ppa.launchpad.net/nginx/stable/ubuntu lucid main キーの追加。 $ sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-keys C300EE8C リポジトリのアップデートとインストール。 $ sudo aptitu
JUGEMテーマ：マスコミ・報道 杏野はるなというネットアイドルがゲームユーザーにけんかを売っているらしい。
GitHub - softwaremill/elasticmq: In-memory message queue with an Amazon SQS-compatible interface. Runs stand-alone or embedded.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
Answer : Shared Memory Problem - no space at /dev/shm causes SIGBUS
Consultez GNT depuis votre mobile, tablette, ordinateur, pour 1€ par mois sans publicité et avec des fonctionnalités exclusives !
Op-Ed Contributor - A Flash of Memory(By ISSEY MIYAKE) - NYTimes.com
Tokyo IN April, President Obama pledged to seek peace and security in a world without nuclear weapons. He called for not simply a reduction, but elimination. His words awakened something buried deeply within me, something about which I have until now been reluctant to discuss. I realized that I have, perhaps now more than ever, a personal and moral responsibility to speak out as one who survived w
npm workspacesで、TSファイルを共通モジュールとして使い回す | Memory ice cubes
ということをやりたくて、こうやったらできたという覚書。 やりたいこと こういうモノレポ構成とする。 - package.json - package-lock.json - packages - shared - app1 - app2 で、app1にあるコードベースを@myapp/app1とした場合、@myapp/sharedに置いたTSファイルを、そのままモジュールとして利用したいとする。 import { foo } from "@myapp/shared"; import { bar } from "@myapp/shared/bar"; // This is @myapp/app1 or @myapp/app2 code @myapp/app1と@myapp/app2は、それぞれ独自のコードベースになってて、それぞれtscではなくviteやesbuildなどのバンドラーを使う前提
X1 Instances for EC2 – Ready for Your Memory-Intensive Workloads | Amazon Web Services
AWS News Blog X1 Instances for EC2 – Ready for Your Memory-Intensive Workloads Many AWS customers are running memory-intensive big data, caching, and analytics workloads and have been asking us for EC2 instances with ever-increasing amounts of memory. Last fall, I first told you about our plans for the new X1 instance type. Today, we are announcing availability of this instance type with the launc
ハードディスクと同じように、電源が切れてもデータを保持できるフラッシュメモリ。エンタープライズの領域での活用も始まり、圧倒的に高いアクセス性能や低発熱などの特性が、これまでのコンピューティングの常識を大きく変えようとしています。 Flash Memory Summit and Exhibition - August 21-23, 2012 - Santa Clara Convention Center そのフラッシュメモリをテーマにした専門のイベント、Flasy Memory Summitが8月21日から3日間、米サンタクララで開催。その様子をいくつかの記事からまとめました。 NANDフラッシュメモリは微細化の限界が業界の共通認識 いま主流のNANDフラッシュメモリは、微細化がそろそろ限界に来ている。これが現在のフラッシュメモリ業界の共通理解であり、それをどう解決するか、その先にどのような
Lightning Memory-Mapped Database（LMDB）について調べてみた - Qiita
はじめに これは データベース・システム系 Advent Calendar 2023 の12/23の記事である そして Nostr (2) Advent Calendar 2023 の12/2の記事である LMDBというDBMSについて調べてみた内容をつらつらと書く Discraimer 筆者はデータベースシステムの専門家ではないため、頓珍漢な記述をしている可能性あり。その点ご留意頂きたく。誤っている点があれば指摘頂ければ幸甚 一部、推測に基づいた内容あり。それらの箇所は推測に基づいている旨分かるように記述する （実装を確認するといったところまでは行えなかったため） LMDBについて調べようと思ったきっかけ nostrなる分散アプリケーションのための通信プロトコル・アーキテクチャがある 比較的自由度の高いものであるが、現状の主なアプリケーションが分散SNS（マイクロブログ）であるため、その
6/9 (木) 14:45～15:15 メイン会場 講師：石井 雅人 氏（ソニーグループ株式会社） 概要： 機械学習技術の急速な発達により、コンピュータによる知的処理は様々なタスクで人間に匹敵あるいは凌駕する性能を達成してきた。一方、このような高い性能は大量かつ高品質な学習データによって支えられており、多様化する機械学習応用においてデータの収集コストが大きな導入障壁の１つとなっている。本講演では、少ないデータやラベルから効率的に学習するための様々な技術について、「足りない情報をどのように補うか？」という観点から概観するとともに、特に画像認識分野における最新の研究動向についても紹介する。
Taming Go’s Memory Usage, or How We Avoided Rewriting Our Client in Rust — Akita Software
Taming Go’s Memory Usage, or How We Avoided Rewriting Our Client in Rust A couple months ago, we faced a question many young startups face. Should we rewrite our system in Rust? At the time of the decision, we were a Go and Python shop. The tool we’re building passively watches API traffic to provide “one-click,” API-centric visibility, by analyzing the API traffic. Our users run an agent that sen
26/04/2017『Memory・in・the・mirror メモリー・イン・ザ・ミラー』#かもし(Original Piano オリジナル ピアノ) - かもしのピアノ
26/04/2017『Memory・in・the・mirror メモリー・イン・ザ・ミラー』#かもし(Original Piano オリジナル ピアノ) 『Memory・in・the・mirror メモリー・イン・ザ・ミラー』 キム・チャンギョム作 十和田市現代美術館を観に行った はじめて行ったんだけど やたらとアクセス不便じゃね？ 八戸駅から市バスで一時間… もっとよい方法があったのだろうか 誰か知ってたら共有ちて んで十和田美術館といえば看板娘の花のお馬さん てっきりクーンズの作品かと思っていたら全然違ったw チェ・ジョンファさんのフラワー・ホースでした いやーまだまだ無知ですなあ んでタイトルの作品について これも十和田市美術館の常設展です これは現実とか存在の不確かさを表現しているらしいんだが 存在の不確かさはネット社会になってからもっと露骨になってきたよね 事実なんてなんでもいい
GitHub - kzk/unicorn-worker-killer: Automatically restart Unicorn workers based on 1) max number of requests and 2) max memory
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
Become part of a community passionate about building better apps. Manual Memory Management in Go using jemalloc Dgraph Labs has been a user of the Go language since our inception in 2015. Five years and 200K lines of Go code later, we’re happy to report that we are still convinced Go was and remains the right choice. Our excitement for Go has gone beyond building systems, and has led us to even wr
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Java Memory Model Pragmatics (transcript)
Memory Management in RubyMotion
Auto Commit Memory に関するメモ
【イベントレポート】 【2013 5th IEEE International Memory Workshopレポート】 ReRAMが本命になる次世代大容量メモリの研究開発
C++ containers that save memory and time
Attention and Memory in Deep Learning and NLP
External Memory - FC2 BLOG パスワード認証
10億IOPSの新技術「Auto Commit Memory」に見るコンピュータの展望
さくらのVPSでnginx + php5-fpm | Virtual Memory
Error Check and Correct memory | 杏野はるなはゲームをやめるべきだ
【笠原一輝のユビキタス情報局】メモリ階層に大変革をもたらすOptane Persistent Memory - PC Watch
NANDフラッシュメモリは微細化の限界へ。Flash Memory Summit 2012のまとめ
Long Short-term Memory
Microsoft Teams 2.0 will use half the memory, dropping Electron...
ゲーム制作集団Child-Dream、RPGツクール95製の名作RPG「Lost Memory」を完全無償化
Manual Memory Management in Go using jemalloc - Dgraph Blog