Pokémon Go → https://goo.gle/3mRIO09 Niantic Labs → https://goo.gle/3BDtRoB Anatomy of a BigQuery Query → https://goo.gle/30ioOvU Millions of people are playing Pokémon GO, but did you know it’s built on Google Cloud? In this episode of Architecting with Google Cloud, Priyanka Vergadia speaks with James Prompanya, the Technical Manager at Niantic Labs about Pokémon GO’s architecture and how it sc
GitHub - NVIDIA-Merlin/NVTabular: NVTabular is a feature engineering and preprocessing library for tabular data designed to quickly and easily manipulate terabyte scale datasets used to train deep learning based recommender systems.
NVTabular is a feature engineering and preprocessing library for tabular data that is designed to easily manipulate terabyte scale datasets and train deep learning (DL) based recommender systems. It provides high-level abstraction to simplify code and accelerates computation on the GPU using the RAPIDS Dask-cuDF library. NVTabular is a component of NVIDIA Merlin, an open source framework for build
テック業界のトップ人材も注目「Scale AI」はAI領域のAWSになるか：米国スタートアップ冬の時代の注目企業（1） | Coral Capital
月間10万人が読んでいるCoral Insightsのニュースレターにご登録いただくと、Coral Capitalメンバーによる国内外のスタートアップ業界の最新動向に関するブログや、特別イベントの情報等について、定期的にお送りさせていただきます。ぜひ、ご登録ください！ 本記事はTemma Abe氏による寄稿です。Abe氏は東京大学経済学部を卒業後に新卒で三菱商事に入社。2016年からのアクセンチュア勤務を経て、2019年からは米国西海岸に在住し、UC BerkeleyのMBAプログラムを経て、シリコンバレーで勤務しています。現地テック業界で流行のニュースレターやポッドキャストを数多く購読しており、そこから得られる情報やインサイトを日本語で発信する活動をされています。 企業の清算・採用抑制・レイオフ・ダウンラウンド・経営陣の売り逃げなどの話題で持ちきりになってしまっている昨今の米国テック業界
How to monitor and query IAM resources at scale – Part 1 | Amazon Web Services
AWS Security Blog How to monitor and query IAM resources at scale – Part 1 March 7, 2023: We’ve fixed a typo in the blog post. In this two-part blog post, we’ll provide recommendations for using AWS Identity and Access Management (IAM) APIs, and we’ll share useful details on how IAM works so that you can use it more effectively. For example, you might be creating new IAM resources such as roles an
マイクロサービスを支える横断CDKチームの話を知ろう！Construct your constructs: Use AWS CDK to create architecture at scale BWP302 参加レポート #AWSreInvent | DevelopersIO
マイクロサービスを支える横断CDKチームの話を知ろう！Construct your constructs: Use AWS CDK to create architecture at scale BWP302 参加レポート #AWSreInvent re:Inventで聞いたAWSのサービス開発においてCrossFunctionalなCDK専門チームを組成した話について書きました。また、本稿はAWS CDK Advent Calendar 2023 14日目の記事です。 はじめに 本稿は、AWS CDK Advent Calendar 2023 14日目の記事です。 re:Invent現地参加組の佐藤智樹です。今回はre:Inventで行われていたセッション「Construct your constructs: Use AWS CDK to create architecture at s
Official NestJS Courses - Learn to build Node.js apps at any scale
NestJS Fundamentals Course Get up to speed with NestJS fast. Master the building blocks and essential concepts behind creating your own enterprise-grade applications. Prepare for an in-depth guided course & walk-through of all the fundamentals of a NestJS application from the Creator Kamil Mysliwiec himself, and Mark Pieszak (Core Team Member). Step-by-step lesson progression, code everything alon
#46 “Technology-Driven, Highly-Scalable Dragonfly Topology”#45 “How to Fight Production Incidents?
An Empirical Study on a Large-scale Cloud Service”
Technology-Driven, Highly-Scalable Dragonfly Topology ISCA '08 (International Symposium on Computer Architecture) https://dl.acm.org/doi/abs/10.1145…
WINTICKET Flutter アプリと Text Scale Factor の闘い | CyberAgent Developers Blog
はじめに 株式会社 WinTicket のアプリチームの@b4tchknです。 競輪とオートレースの投票ができるWINTICKETの Flutter アプリは、使いやすさを意識した UI/UX やレース情報を閲覧し投票を完了するまでの早さを意識したパフォーマンスなど様々な箇所にこだわりを持って開発しました。 今回の記事では、WINTICKET の Flutter アプリで対応した accessibility(a11y) について、特にその中でも特に注力して取り組んだ Text Scale Factor を変更した際のレイアウトの表示崩れに関して紹介します。 別のトピックについてもメンバーがブログを書いていますので、ぜひ御覧ください。 WINTICKET における Flutter を利用したクロスプラットフォームアプリケーションへの取り組み WINTICKET アプリ Flutter リプレ
NEC、分散ファイルSDS「IBM Storage Scale」を使ったストレージシステムを販売、分散したデータを一元化 | IT Leaders
IT Leaders トップ ＞ テクノロジー一覧 ＞ ストレージ ＞ 新製品・サービス ＞ NEC、分散ファイルSDS「IBM Storage Scale」を使ったストレージシステムを販売、分散したデータを一元化 ストレージ ストレージ記事一覧へ [新製品・サービス] NEC、分散ファイルSDS「IBM Storage Scale」を使ったストレージシステムを販売、分散したデータを一元化 2023年7月10日(月)日川 佳三（IT Leaders編集部） リスト NECは、同社のサーバー/ストレージ製品に日本IBMの分散ファイルシステムソフトウェア「IBM Storage Scale」を組み合わせたストレージシステムを2023年7月から販売する。日本IBMとの協業の一環として販売する。日本IBMが2023年7月10日に発表した。最小構成では容量数TBのエントリーモデルから入手可能である。
We introduce the Byte Latent Transformer (BLT), a new byte-level LLM architecture that, for the first time, matches tokenization-based LLM performance at scale with significant improvements in inference efficiency and robustness. BLT encodes bytes into dynamically sized patches, which serve as the primary units of computation. Patches are segmented based on the entropy of the next byte, allocating
The components of an integration test. The testing infrastructure provides the foundation on top of which engineers write their tests, and the execution platform for running them. Enabling developers to prototype, test, and iterate on new features quickly is important to Facebook’s success. To do this effectively, it’s key to have a stable infrastructure that doesn’t introduce unnecessary friction
Christopher Nolan: "Oppenheimer is one of the most challenging projects I’ve ever taken on in terms of scale"
Christopher Nolan is a master of practical filmmaking: think Tenet’s real 747 sequence, The Dark Knight’s truck flip, or Interstellar’s spacecraft sets with starry exteriors projected outside the windows in place of the standard bluescreen. His upcoming movie, Oppenheimer, about the man who contributed significantly to the creation of the atomic bomb, has afforded the filmmaker more opportunities
Does Laravel Scale?technical Jack Ellis · May 16, 2022In this blog post, I will explore whether you can use Laravel at hyper-scale and whether it could be used to power something like Twitter, Facebook or various other huge applications. What brought me hereWe're all getting tired of the "Does Laravel scale?" questions. Not because people are asking questions but because of the ignorant responses
As Android apps expand into thousands of modules, developers increasingly struggle with lengthy Gradle Build and Sync times, along with a sluggish and unresponsive IDE. It can be a nightmare waiting 20 minutes for a clean build and 5 minutes for a sync after you change branches, only to struggle with an unresponsive editor... So what if we could just make it so that we have fewer modules? This pos
NVIDIA GPU向けCUDAのコードをそのままAMD GPU向けにコンパイル出来る「SCALE」が登場 | XenoSpectrum
人々をNVIDIA製GPUに縛り付けていた枷の一つが取り払われるかも知れない。英国の企業Spectral Computeが7年の開発期間を経て、CUDAプログラムをAMD GPUでネイティブに実行できるGPGPUツールチェーン「SCALE」を公開した。これにより、開発者はコードの変更なしにCUDAアプリケーションをAMD GPUで動作させることが可能になるのだ。 SCALEがもたらすGPGPU開発の新たな道 SCALEは、CUDAソースコードをAMD GPU向けにネイティブコンパイルする「クリーンルーム実装」として設計された。これまでのHIPIFYやZLUDAなどの既存のソリューションとは異なり、SCALEはコードの変換や移植作業を必要とせず、CUDAプログラムをそのままAMD GPU向けにコンパイルできる。 特筆すべき点として、SCALEはNVIDIAのnvccコンパイラの代替として機能
GitHub - datafuselabs/databend: 𝗗𝗮𝘁𝗮, 𝗔𝗻𝗮𝗹𝘆𝘁𝗶𝗰𝘀 & 𝗔𝗜. Modern alternative to Snowflake. Cost-effective and simple for massive-scale analytics. https://databend.com
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
Build a modern data architecture and data mesh pattern at scale using AWS Lake Formation tag-based access control | Amazon Web Services
AWS Big Data Blog Build a modern data architecture and data mesh pattern at scale using AWS Lake Formation tag-based access control January 2023: This post was reviewed and updated to use version 3 of the settings for AWS Lake Formation, which allows for cross-account grants with AWS Resource Access Manager. Customers are exploring building a data mesh on their AWS platform using AWS Lake Formatio
In this work, we explore "prompt tuning", a simple yet effective mechanism for learning "soft prompts" to condition frozen language models to perform specific downstream tasks. Unlike the discrete text prompts used by GPT-3, soft prompts are learned through backpropagation and can be tuned to incorporate signal from any number of labeled examples. Our end-to-end learned approach outperforms GPT-3'
人の表情やハンドサイン、オブジェクト、動物、建物などを表した絵文字は、SNSやメッセージなどで感情や意図を表すために役立ちます。画面上だと全て同じ大きさに表示されている絵文字ですが、絵文字の元となったものはそれぞれ全く違ったサイズを持っています。そんな画面上だと全て同じ大きさに見える絵文字の「実際の大きさ」を体感できるウェブサイトが、「Emoji to Scale」です。 Emoji to Scale https://javier.xyz/emoji-to-scale/ Emoji to Scaleにアクセスすると、「Mosquito(蚊)／3mm」「Ant(アリ)／3.7mm」「Housefly(イエバエ)／6mm」がそれぞれのサイズ比を保って表示されました。メッセージやSNSの投稿では全て同じサイズで表示されていますが、当然ながら実際のサイズには差があります。 画面を下にスクロールして
Fall Guys 🥔 on Twitter: "Well, you asked for it... This is official lore now Remember: • Human shown for scale • Fall Guys are 183cm (6f… https://t.co/zYzn2u2Mjn"
Well, you asked for it... This is official lore now Remember: • Human shown for scale • Fall Guys are 183cm (6f… https://t.co/zYzn2u2Mjn
GitHub - amplication/amplication: Amplication brings order to the chaos of large-scale software development by creating Golden Paths for developers - streamlined workflows that drive consistency, enable high-quality code practices, simplify onboarding, an
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
How to design a system to scale to your first 100 million users
In order to keep up with emerging techniques, I would like to update you on this story throughout the year.Last updated on 2021 Dec 23 Photo by Kirill Sh on UnsplashIt is not easy to design a system that supports hundreds of millions of users. It always is a big challenge for a software architect (but it’ll be easy from today after reading my article 🤣) Here are some topics covered by me in this
GitHub - hatchet-dev/pickaxe: Build agents that scale with a zero-cost abstraction.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
LLM experimentation at scale using Amazon SageMaker Pipelines and MLflow | Amazon Web Services
AWS Machine Learning Blog LLM experimentation at scale using Amazon SageMaker Pipelines and MLflow Large language models (LLMs) have achieved remarkable success in various natural language processing (NLP) tasks, but they may not always generalize well to specific domains or tasks. You may need to customize an LLM to adapt to your unique use case, improving its performance on your specific dataset
Cerebras Systems, Inc.はWSEというシリコンウェハーまるごと一枚を使った巨大なAIプロセッサを独自に開発し、それを使ったAIトレーニング向けのシステムCS-2を販売しているシリコンバレーのスタートアップです。前編に続いて、2024年夏のCerebrasの取り組み、WSEの開発の状況とこれからについてお届けします。 AIトレーニングにおける「性能」 議論は再び「性能」の話に戻ります。しかしシステムのスループットとはまた異なる側面の、です。 Andy： ここは本当に（gihyo.jpの読者向けに）強調したいです。計算能力の「量」は重要です。CS-3クラスタはLlamaを1日でトレーニングすることを可能にします。GPUシステムで1ヵ月かかるのに対して。これが計算能力の「パフォーマンス」です。 その一方で、もう1つ大きな要素は、それらのモデルの「解（適切なモデルのデザインとそ
Catching the big fish: Analyzing a large-scale phishing-as-a-service operation | Microsoft Security Blog
In researching phishing attacks, we came across a campaign that used a rather high volume of newly created and unique subdomains—over 300,000 in a single run. This investigation led us down a rabbit hole as we unearthed one of the operations that enabled the campaign: a large-scale phishing-as-a-service operation called BulletProofLink, which sells phishing kits, email templates, hosting, and auto
大規模スクラム Large-Scale Scrum(LeSS) を読んだ - 下林明正のブログ
今はまあまあ人数の多いチームで働いていて、仮にこのチーム全体でスクラムをやっていくとしたらどういう形になるんだろうと思って勉強することにした。 大規模スクラム Large-Scale Scrum(LeSS) 作者:クレーグ・ラーマン,バス・ボッデ,榎本明仁,荒瀬中人,木村 卓央,高江洲睦発売日: 2019/05/15メディア: Kindle版 大規模スクラムフレームワークは色々あるけど、CSMの講師や周囲の人などの雰囲気からLeSSが良さそうと深く考えずに判断した。このあたりはちゃんと比較しようと思うと一通りのフレームワークについて学ぶ必要が出てきて学習コストが大きくなりすぎるので、アジャイルコーチで飯を食っていくわけでもなければまあこれくらいの判断で良いんじゃないかと思っている。 ただこの電子書籍の残念なところとして、固定レイアウトなのでめちゃくちゃ読みにくいしハイライトもできないという
こんにちは。id:daiksyです。 昨年の6月に、ChatworkではScrum@Scaleを用いたスケーリングに取り組んでいる、という記事を書きました。 creators-note.chatwork.com 上記の記事では、Scrum@Scaleの簡単な解説と、なぜこの手法を選択したのかについて書きましたが、2021年の4月からはじまった取り組みだったため、記事執筆の時点ではまだ実践をはじめて2ヶ月、という状況でした。 そこから継続的に取り組みを続け、組織構造にいくつかの変遷があったので、9ヶ月間の道のりを今日は書いていこうと思います。 Scrum@Scaleそのものの解説は上記で紹介した記事か、または公式ガイドなどをご参照ください。 scruminc.jp 2021年4月~6月 2021年4月~6月 将来的には複数チームにスケールしていくことを目指していますが、最初期は2チームからの
Announcing Grafana Phlare, the open source database for continuous profiling at massive scale | Grafana Labs
Solutions All end-to-end solutions Opinionated solutions that help you get there easier and faster
論文紹介 / An Image is Worth 16x16 Words: Transformers for Image Recognition at Scale
第六回 全日本コンピュータビジョン勉強会 Transformer論文読み会 にて、 "An Image is Worth 16x16 Words: Transformers for Image Recognition at Scale" [Dosovitskiy et al., ICLR 2021] …
New – AWS IoT Core for LoRaWAN to Connect, Manage, and Secure LoRaWAN Devices at Scale | Amazon Web Services
AWS News Blog New – AWS IoT Core for LoRaWAN to Connect, Manage, and Secure LoRaWAN Devices at Scale Today, I am happy to announce AWS IoT Core for LoRaWAN, a new fully-managed feature that allows AWS IoT Core customers to connect and manage wireless devices that use long-range, low-power wide area network (LoRaWAN) connectivity with the AWS Cloud. Using AWS IoT Core for LoRaWAN, customers can now
As we continue to focus our AI research and development on solving increasingly complex problems, one of the most significant and challenging shifts we’ve experienced is the sheer scale of computation required to train large language models (LLMs). Traditionally, our AI model training has involved a training massive number of models that required a comparatively smaller number of GPUs. This was th
Byte Latent Transformer: Patches Scale Better Than Tokens | Research - AI at Meta
概要We introduce the Byte Latent Transformer (BLT), a new byte-level LLM architecture that, for the first time, matches tokenization-based LLM performance at scale with significant improvements in inference efficiency and robustness. BLT encodes bytes into dynamically sized patches, which serve as the primary units of computation. Patches are segmented dynamically based on the entropy of the next by
7 Lessons from building a small-scale AI application Jan 22 2025 ChatGPT heralded a seismic shift in software, and one that I felt compelled to understand. So, over the past year, I’ve been building an AI assistant for my past-CEO-self as a pedagogical exercise. It answers questions, gets status reports, and summarizes what’s going on. Reflecting on what I know now, here are my takeaways over the
TrueNAS SCALE - Linux-based Open Source Storage Infrastructure
Open Storage that Scales TrueNAS® SCALE is an Open Source Infrastructure solution. In addition to powerful scale-out storage capabilities, SCALE adds Linux Containers and VMs (KVM) so your organization can run workloads closer to data. Scale-Up or Scale-Out OpenZFS with its excellent data management capabilities is the basis for all deployments. Scale-up by adding drives, or deploy scale-out objec
5 Good practices to scale your React projects easily
For most React developers, it's easy to just get our hands on writting new lines of code. However, we sometimes missed keeping them organized and planned for future use as the project scales. Having a plan for scaling can help you: Reuse and reduce development time Organize project and prevent project reconstructions Show you are good developer by taking consideration of the project and other devs
Most global corporates face business disruption from infrastructure downtime - well before the facility is affected. Financial services, insurance, and beyond: wherever there's a need to quantify risk, reshape strategy, and harness opportunity amidst climate challenges, we're there. We provide powerful data to enable our customers to measure hidden physical risks, and make high value, complex fina
The Accessible Usability Scale (AUS) is a free tool to measure the usability of a digital product for assistive technology users. Inspired by the System Usability Scale (SUS), the Accessible Usability Scale consists of ten questions administered at the end of a user experience to calculate a score.
Amazon EC2 Auto Scaling now lets you control which instances to terminate on scale-in
Amazon EC2 Auto Scaling now lets you control which instances to terminate during a scale-in event by allowing you to provide a custom function that selects which instances to terminate. Previously, you could use one of the predefined termination policies to determine which instances Auto Scaling would terminate. (For example, the OldestLaunchTemplate termination policy would terminate instances in
“Do things that don’t scale.” That YCombinator mantra may be the single most common piece of advice given to early-stage tech startups. And with good reason – it’s great advice! But if you follow it, with a little luck you’ll reach a point where it no longer applies (at least on a technical level). Of course, “Do things that don’t scale” is advice about how to grow an early-stage startup, not advi
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
How does Pokémon Go scale to millions of requests?
Byte Latent Transformer: Patches Scale Better Than Tokens
Autonomous testing of services at scale
Does Laravel Scale? - Fathom Analytics
Android at Scale (with Circuit)
The Power of Scale for Parameter-Efficient Prompt Tuning
絵文字になっているオブジェクトの本当のサイズを比較できる「Emoji to Scale」
進化し続けるWSE（Wafer Scale Engine）、大規模AIモデルのトレーニング性能とは――Cerebras社訪問2024【後編】 | gihyo.jp
Scrum@Scaleによる組織構造の変遷 - kubell Creator's Note
How Meta trains large language models at scale
7 Lessons from building a small-scale AI application
One Concern | Planetary-Scale Resilience Software Platform
Accessible Usability Scale (AUS)
Selecting a startup stack for scale