ついに来るのか!?拡散言語モデル｜shi3z
我々が単に「言語モデル」といった場合、それはTransformerモデルを指す。Transformerモデルは、ChatGPTやGemini、Claude-3、Command-R+などで使われている。 最近はMambaのような状態ステートマシンの言語モデルも出てきた。そしてもしかしたら今後はここに、拡散ディフュージョンモデルが加わるのかもしれない。 拡散モデルで有名なのは、StableDiffusionで、主に画像生成に使う。 実は画像生成は最初はTransformerだった。OpenAIのDALL-Eは、Transformerとして画像生成を行なった。しかしTransformerには明らかな欠点があり、それはあまりにも膨大な計算量が必要なことだ。 Transformerの事前学習プリトレーニングには、今でも天文学的な計算資源が必要だし、微調整ファインチューニングにも今なお膨大な計算機が必
Convert AWS console actions to reusable code with AWS Console-to-Code, now generally available | Amazon Web Services
AWS News Blog Convert AWS console actions to reusable code with AWS Console-to-Code, now generally available Today, we are announcing the general availability (GA) of AWS Console-to-Code that makes it easy to convert AWS console actions to reusable code. You can use AWS Console-to-Code to record your actions and workflows in the console, such as launching an Amazon Elastic Compute Cloud (Amazon EC
Kubernetes seems like the obvious choice for building out remote, standardized and automated development environments. We thought so too and have spent six years invested in making the most popular cloud development environment platform at internet scale. That’s 1.5 million users, where we regularly see thousands of development environments per day. In that time we’ve found that Kubernetes is not
Prisma Postgres®: Building a Modern PostgreSQL Service Using Unikernels & MicroVMs
October 29, 2024 Prisma Postgres®: Building a Modern PostgreSQL Service Using Unikernels & MicroVMs At Prisma, we believe that deploying a database should be as simple as adding a new page in Notion. Today, we are excited to share the first milestone towards this vision: Prisma Postgres® gives developers an always-on database with pay-as-you-go pricing — thanks to our unique architecture design. T
How Shopify improved consumer search intent with real-time ML | Google Cloud Blog
In the dynamic landscape of commerce, Shopify merchants rely on our platform's ability to seamlessly and reliably deliver highly relevant products to potential customers. Therefore, a rich and intuitive search experience is an essential part of our offering. Over the past year, Shopify has been integrating AI-powered search capabilities into our merchants’ storefronts. Shopify Storefront Search ha
Fearless SSH: short-lived certificates bring Zero Trust to infrastructure
BastionZero joined Cloudflare in May 2024. We are thrilled to announce Access for Infrastructure as BastionZero’s native integration into our SASE platform, Cloudflare One. Access for Infrastructure will enable organizations to apply Zero Trust controls in front of their servers, databases, network devices, Kubernetes clusters, and more. Today, we’re announcing short-lived SSH access as the first
Classmethod strengthens Zenn blog platform security, maintains reliable performance, and cuts costs with Cloudflare Based in Japan, Zenn is an information-sharing platform that hosts technical blogs written by engineers. Driven by a mission of “rewarding engineers for sharing knowledge,” Zenn enables engineers to easily contribute their unique insights to the IT community. Zenn is run by Classmeth
Machines of Loving Grace1 How AI Could Transform the World for the Better October 2024 I think and talk a lot about the risks of powerful AI. The company I’m the CEO of, Anthropic, does a lot of research on how to reduce these risks. Because of this, people sometimes draw the conclusion that I’m a pessimist or “doomer” who thinks AI will be mostly bad or dangerous. I don’t think that at all. In fa
Generative AI’s Act o1
Two years into the Generative AI revolution, research is progressing the field from “thinking fast”—rapid-fire pre-trained responses—to “thinking slow”— reasoning at inference time. This evolution is unlocking a new cohort of agentic applications. On the second anniversary of our essay “Generative AI: A Creative New World,” the AI ecosystem looks very different, and we have some predictions for wh
クラウド時代の新しいActive Directoryの形――Microsoft Entra Domain Servicesとは
クラウド時代の新しいActive Directoryの形――Microsoft Entra Domain Servicesとは：今だからこそ学び直すActive Directory基礎のキソ（5） ある日突然、「Active Directoryドメインを新しく作り直して」と言われたらどうしますか？ ドメインコントローラーのインストールから始まり、バックアップをはじめとする運用設計、万が一の際のリストア計画まで、全てを一から新たに作り直さなければなりません。時間をかければ先人たちの知恵を借りて再作成できるとは思いますが、時間をかけられない場合はどうするか――。今回は「学び直し」という本連載の趣旨から少し外れて、クラウド時代の新しいActive Directoryの形に触れたいと思います。 今だからこそ学び直すActive Directory基礎のキソ クラウド時代のActive Direct
Celebrating 10 Years of Amazon ECS: Powering a Decade of Containerized Innovation | Amazon Web Services
AWS News Blog Celebrating 10 Years of Amazon ECS: Powering a Decade of Containerized Innovation Today, we celebrate 10 years of Amazon Elastic Container Service (ECS) and its incredible journey of pushing the boundaries of what’s possible in the cloud! What began as a solution to streamline running Docker containers on Amazon Web Services (AWS) has evolved into a cornerstone technology, offering b
ランサムウェア（身代金要求型マルウェア）は、IPA（情報処理推進機構）が発表する「情報セキュリティ10大脅威」で連続して挙がっており、その脅威は年々高まっている。 各種セキュリティ調査でもランサムウェア攻撃の標的にされやすい業界として挙がるのが金融、公共、医療だ。中でも医療機関は、カルテや検査データなどの個人情報を多く保有し、医療行為を提供しなければならない社会的責任を負っていることから標的にされやすい。ただし、それ以外の業界が狙われにくいわけではない。サイバー攻撃はあらゆる企業・組織にとって、いつわが身に降りかかるか分からない重大なリスクだ。業種や規模を問わず、どの組織にとってもサイバー攻撃は「対岸の火事」ではなく「明日はわが身」と思って対策に取り組む必要がある。 前橋赤十字病院の市根井栄治氏（事務部情報システム課長）は、2024年9月開催のセミナー「導入ユーザーと語る！ 直面するセキュ
We're Hiring Engineers! Join us in building the future of engineering at Recall.ai. Apply Now IPC is something that is rarely top-of-mind when it comes to optimising cloud costs. But it turns out that if you IPC 1TB of video per second on AWS it can result in enormous bills when done inefficiently. Join us in this deep dive where we unexpectedly discover how using WebSockets over loopback was ulti
Amazon Route 53 announces HTTPS, SSHFP, SVCB, and TLSA DNS resource record support - AWS
Amazon Route 53 announces HTTPS, SSHFP, SVCB, and TLSA DNS resource record support Route 53 now supports HTTPS and Service Binding (SVCB) record types, which provide clients with improved performance and privacy. Instead of only providing the IP addresses of endpoints in response to a DNS query, HTTPS and SVCB records respond with additional information needed to set up connections such as whether
関連キーワード 脱クラウド | インフラ | ネットワーク クラウドサービスが今後も存在し続けることは間違いない。今やほとんどの企業が何らかの形で、クラウドサービスを業務に利用している。しかしそれと同時に、一部の企業はクラウド戦略を修正し、クラウドサービスからオンプレミスインフラへの回帰を始めている。ネットワークも例外ではない。企業はなぜネットワークをオンプレミスに戻すのか。 ネットワークを「脱クラウド」する理由とは 併せて読みたいお薦め記事 オンプレミス回帰の落とし穴 クラウドをやめる「オンプレミス回帰」が“まさかの失敗”に終わる原因 「脱クラウド」した方が“安くなる”のか、そうではないのか 企業はルーターやスイッチといった、ネットワークを構築するために欠かせない機器を、クラウドサービスとして利用できる。しかし、新型コロナウイルス感染症（COVID-19）のパンデミック（世界的大流行）を
"Your embeddings are out of sync again." It's a message that haunts engineering teams trying to build AI applications. What starts as a simple vector search implementation inevitably evolves into a complex orchestra of monitoring, synchronization, and firefighting. We've spent the past year talking to dozens of engineering teams building AI systems with vector databases, whether semantic search, r
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
We’re leaving Kubernetes - Blog
Zenn & Cloudflare | Customer Story
Dario Amodei — Machines of Loving Grace
なぜXDRが必要なのか セキュリティ対策を難しくする「普遍的な4つの課題」とは
How WebSockets cost us $1M on our AWS bill
ネットワークを「オンプレミス回帰」する理由 なぜ脱クラウドが進むのか
Vector Databases Are the Wrong Abstraction