シングルGPUで動作するTransformer相当のRNNモデル RWKV-Raven-14Bを試してみた | DevelopersIO
こんちには。 データアナリティクス事業本部 インテグレーション部 機械学習チームの中村です。 今回はシングルGPUで動作するTransformer相当のRNNモデル、という噂のRWKVについて試してみたいと思います。 RWKVとは TransformerベースのLLMと同等の性能を持つ、並列化可能なRNNモデルであり、Attentionフリー(Attention構造を持たない)なモデルです。 ライセンス形態がApache License 2.0かつ、シングルGPUでも動作する点が凄いところとなっています。 GitHub https://github.com/BlinkDL/RWKV-LM Huggin Face https://huggingface.co/BlinkDL Hugging Face側にモデルがいくつか公開されており、rwkv-4が付くものが最近よく話題で使用されているもので
ベクトル特化型データベースサービス「Pinecone」でセマンティック・キーワード検索をやってみた | DevelopersIO
本記事では、マネージド・ベクトル・データベースの「Pinecone」を活用して、セマンティック・キーワード検索を実施していきます。 ベクトル分析は、類似性の計算やレコメンドの作成などで使われる機械学習のメジャーな分析手法ですが、それに特化したユニークなデータベースのSaaSを見つけちゃいました。 Pineconeについて Pineconeは2019年にカリフォルニア州で創業されたスタートアップです。もともとAmazon SageMakerの開発に携わっていた方が創業したようで、シード期ながら$10Mもの資金調達に成功しており、期待値の高さが伺えます。GoogleやPinterestのようなビッグカンパニーが使用している、高次元ベクトルのデータを格納できる機械学習用のデータベースを一般企業にも広めたい、というモチベーションのもとPineconeを開発・提供しています。 Pinecone la
ソフトウェア設計についてAIと壁打ちしたら良い体験でした（準中級者〜中級者向け） | DevelopersIO
こんにちは。AWS事業本部コンサルティング部に所属している今泉（@bun76235104）です。 ソフトウェア設計・クラス設計などの学習捗ってますか？ 私は実際にソフトウェア設計に関する本を読んで学習したり、OSSを書いてアウトプットしたりするのですが、なかなかフィードバックをもらえず上達しているのか分かりません。 普段のお仕事も直接的にコードを書くことも少ないので、先輩によるご指導などももらいにくい状況です。 そこで今回、話題のAIとソフトウェア設計の考え方について壁打ちしてもらったところ、非常に良い学習方法だと感じたので、この記事を書いてみました！ ちなみに私は以下のようにソフトウェア設計関連の書籍を読んで学習しています。 ちなみに今回は以下ブログ記事で公開しているくらにゃんGPTをベースにしたBotと会話をしています。 ChatGPT API model: gpt-3.5-turbo
ChatGPTの嘘を克服できる？！Chrome拡張機能「WebChatGPT」を使ってみた | DevelopersIO
こんにちは、つくぼし(tsukuboshi0755)です! みなさんChatGPTは使ってますか？(もちろん私も使ってます) そのまま使うだけでも相当便利なChatGPTですが、以前ChatGPTをもっと便利に使えるようにするGhrome拡張機能が、以下のブログで紹介されています。 上記のブログでも紹介がありますが、Chrome拡張機能「WebChatGPT」を実際に使ってみた所、ChatGPTの欠点である嘘の大半を克服できるすごい拡張機能だと感じました。 これはChatGPTを使っている方にはぜひ試して頂きたい！と思い、今回改めて詳細について紹介します。 ChatGPTが嘘をつくメカニズム 巷で良く言われるChatGPTの欠点として、平気で嘘をつく事が挙げられます。 ここで、なぜChatGPTは嘘をついてしまうのでしょうか。 上記の疑問に対して、OpenAIの公式Q&Aにヒントとなる文献
ChatGPTに要件定義をお願いしたらハンパなかった | DevelopersIO
架空の営業管理システムを作ってもらう前提で、ChatGPTに要件定義をお願いしてみました。 実験として軽く試すレベルで始めてみたのですが、予想を超えるクオリティでしたので、一部始終を皆様にもご紹介します。 ChatGPTとのやりとり まず、ざっくりと必要な機能の洗い出しをお願いしてみました。 あっという間に必要な機能を網羅的にリストアップしてくれまた。私自身、SFA/CRMをいくつか触った経験がありますが、適切な内容だと思います。 中には、「データのインポート・エクスポート機能」のように、検討初期段階ではつい忘れそうな機能も含まれています。さらに頼んでもいないのにオススメの検討プロセスまで教えてくれました。気が利いてます。 機能ベースだと要件の妥当性が判断しにくく思ったので、画面ベースで要件定義してもらことにしました。 「図で教えて」とできないことをお願いしたところ、やんわり断りつつ、意図
Heroku から Render へ移行してみた | DevelopersIO
こんにちは、森田です。 以前、趣味でHerokuでアプリケーションを作っていたのですが、先日Herokuの無料利用枠がなくなるという話を耳にし、別のPaaSへの移行を行うことにしました。 無料利用枠があるPaaSを調べたところ、どうやらRenderが良さそうだったので、本記事では、Heroku から Renderへ移行についてご紹介します。 Heroku と Render Heroku、RenderともにPaaS型のクラウドプラットフォームです。現時点での両者の比較が、Renderのwebページにありましたので気になる方は是非ご参照ください。 どちらでも似たような機能を提供しているので、どちらを利用するかは好みかなと思いますが、 私の場合は、前述したように趣味のアプリケーションをただ動作させるだけの用途なので、無料利用枠のあるRenderへ移行を行います。 移行するアプリケーションについて
【書評】「プロを目指す人のためのTypeScript入門」 TypeScript をこれから勉強したい人にも、これまで使ってきた人にもおすすめの一冊 | DevelopersIO
こんにちは。CX事業本部MAD事業部のYui(@MayForBlue)です。 自分のGWの課題図書にしていた「プロを目指す人のためのTypeScript入門 安全なコードの書き方から高度な型の使い方まで」（技術評論社）を読み終えて、とてもよい本だと感じたので感想を書評としてまとめました。 書籍情報 著者 鈴木 僚太(すずき りょうた) さん （ Twitter: @uhyo_ ） 2013年からTypeScriptを使用中。LINE株式会社でフロントエンドエンジニアとして自社開発に従事しながら、技術顧問なども行っている(本書発行当時)。専門はTypeScriptとReactで、講演やインターネット上での記事公開を通じて初心者向けから上級者向けまでさまざまな情報を発信している。OSS活動にも積極的だが自作のライブラリはあまり流行っていない。 目次 第1章 イントロダクション 第2章 基本的な
[FaaS] はじめてのfn #fnproject | DevelopersIO
この中で最小限動作に必要なものは fn, fdk, cliの3つです。 それ以外のComponentはスケールが必要な環境の構築や本番運用時に必要になるツールのようです。ツールやサーバーはほぼGoで記述されており、コード量は比較的少ないように見えます。 Dockerベース fnはDockerのContainer技術をコアにサービスが構成されており、Docker Image Repository(もしくはそれに準拠するRepository)を利用することができます。つまり、Docker CompatibilityであればECR等のサービスでも利用が可能です。 公式には以下のような特徴が記載されています。 Open Source Native Docker: use any Docker container as your Function Supports all languages Run
![[FaaS] はじめてのfn #fnproject | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/85e03c29e660651192482daf2596a1ea29e351ea/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2018%2F10%2Ffn-icon.jpg){kind=icon}
csv/tsvに対しSQLを実行できるqについて現バージョンでふれてみた #q | DevelopersIO
CSV/TSV等のテキストファイルに対してSQLを実行できる「q」について、オプション指定でややハマりがあったため、備忘録としてまとめてみました。 qについて おおまかな概要については、DevelopersIOの過去記事に上がっています。 CSV/TSVに対してSQL発行できるツール「q」 主機能面については現在も変わりありません。 オプションの作用 delimiterとskip-header以外を除いて、データ構成上にはそこまで大きな影響はないと思います。 検証には以下のデータを用いてみました。 id,name,value 1,a,0 2,b,0 3,c,1 4,d,1 5,e,2 6,f,1 7,g,1 8,h,1 9,i,2 , , , , , , ,, beautify 文字幅が最大長の行に合わせて表示整形します。Terminal上での可視チェックにはつけておいた方が無難です。 %
TypeScript Deep DiveでTypeScriptに入門する | DevelopersIO
TypeScript Deep Dive とは TypeScript Deep Diveとは、TypeScriptはもちろん、JavaScript（ES6）/ サーバーサイドJavaScript（Node.js）/ Reactなどで使うJSX など、TypeScript周辺技術を包括的に学ぶことができるTypeScriptの入門サイトです。 TypeScript Deep Dive TypeScript Deep Dive 日本語版 GitHub TypeScript Deep Dive 日本語版 TypeScript環境構築 TypeScript Deep Diveで勉強を始めるための、環境構築を行なっていきます。 環境 項目 バージョン 1. Node.jsのインストール HomeBrewを使って、nodebrewをインストールします。 $ brew install nodebrew
AWSアカウントを作ったら最初にやるべきこと ～令和元年版～ | DevelopersIO
はじめに 中山（順）です 4年ほど前にこの記事のタイトルと同じテーマで資料を作成したことがあるのですが、古い内容があったり新しいサービスのことが含まれていなかったりするので改めてまとめてみました。令和だし！ その時の資料はこちらです（クラスメソッドにジョインするくらい2年前です）。 AWSアカウントを作ったら最初にやるべきこと サインアップ （業務利用の場合）非個人メールアドレスでサインアップ サポートプランの確認 ID管理 / 権限管理 CloudTrailの有効化 ルートアカウントのMFA設定 IAM User / IAM Groupの作成 パスワードポリシーの設定 GuardDutyの有効化 Security Hubの有効化 請求 IAM Userによる請求情報へのアクセス許可 支払通貨の変更 Budgetの設定 Cost Explorerの有効化 Cost Usage Report
ガントチャートが作れるサービスを使ってみた【teamgantt編】 | DevelopersIO
はじめに モバイルアプリサービス部のPMをやっとりますアンディです。7月から本格的に新たなプロジェクトが始まるということでガントチャートを作り始めたのですが、前職の時みたいにEXCELで作るのもなんだなと思い、ガントチャートサービスをいくつか試してみることにしました。まずは世間の評判と見た目でteamganttから使ってみます。 teamganttとは ガントチャート作成に特化することでシンプルな見た目や操作性を実現しているサービスです。 teamgantt公式 こういった特化系サービスは急に消えて無くなることが多く不安を感じますが、teamganttはフォーチュン500の17%の企業が導入している点や、10年近く続いているという点で、安心感があります。 早速使ってみた ざっと使ってみた感じ、ガントチャートとしての基本機能は一通り押さえられており、さすが10年近く続いているサービスだなとい
Treasure Data社のOSSワークフローエンジン『Digdag』を試してみた #digdag | DevelopersIO
Digdag が Apache License 2.0 の元でオープンソース化されましたよ！ さぁ試すんだ…！ 今すぐにでも！ https://t.co/Uzc4a5GLCe ドキュメント：https://t.co/PF8wy5KHln — Sadayuki Furuhashi (@frsyuki) 2016年6月15日 という訳で試してみました。注目度の高かったワークフローエンジン『Digdag』がついにOSS化されました！Githubリポジトリ及びドキュメントは以下となります。 treasure-data/digdag: Workload Automation System Getting started — Digdag 0.8 documentation 目次 インストール 環境の準備 Digdagのインストール実施 その他ドキュメントの内容について Digdagサンプルワークフロ
OpenVPNでリモートアクセスVPNのトラフィックを全てVPN経由にする方法 | DevelopersIO
こんにちわ。EWはサンドロック派なガノタ市田です。 今回は、OpenVPNでインターネットアクセスもVPN経由にする小ネタです。 前提構成 OpenVPNの作成については、VPCのルートテーブルの設定以外は下記の通りに作成しておきます。 Amazon EC2とOpenVPNでサーバ-多拠点クライアント間通信をセキュアに行う ｜ Developers.IO 初期設定で確認してみる 上記の内容で作成した状態では、IPマスカレードなし になっています。 この状態でVPN接続してからインターネットにアクセスしてみます。 試しにhttp://ifconfig.ioにアクセスしてみます。ifconfig.ioはアクセスしているIPを表示してくれるので、自分のIPアドレスを調べるのに便利です。 この状態だとインターネットアクセスは、VPNを経由せずに出ています。 次にopenvpn.confに以下を追記
Embulk＋DigdagでExcelのデータをPostgreSQLにロードする | DevelopersIO
データインテグレーション部 大矢です。 DBのテストデータをExcelで書くことはよくあると思います。 今回はExcelで書いたデータをEmbulkでDBにロードする、ということをやってみようと思います。 使用した環境は以下のとおりです。 Embulk v0.8.13 Digdag v0.8.16 PostgreSQL 9.5.3 Mac OS X El Capitan version 10.11.6 ExcelのデータをPostgreSQLにロードする 作業ディレクトリ 先に今回の作業で使用するディレクトリ構成を示しておきます。最終的にはこうなります。 excelload ├── allsheet.dig └── embulk ├── sales.yml ├── testdata.xlsx └── users.yml Excelのテストデータ ロードするデータ Excelのテストデータシ
【メモ】gRPCのクライアントツールpolyglotでサンプルアプリケーションに接続する | DevelopersIO
ども、大瀧です。 先月GAを迎えたGoogle製RPCフレームワークgRPCをちまちま触っています。 今回はgRPCサーバーへの接続をデバッグするためのクライアントツールpolyglotの最低限の使い方を、サンプルアプリケーションを実行するgRPCサーバーを使ってご紹介します。 セットアップ polyglotはJava版gRPCクライアントのCLIツールです。手元のマシンにJREをインストールしリリースページからjarファイルをダウンロード、実行すればOKです。 動作確認環境 OS: macOS Sierra Java: バージョン1.8.0_51 polyglot: v1.2.0 $ java -jar polyglot.jar --help [main] INFO me.dinowernli.grpc.polyglot.Main - Polyglot version: 1.2.0 [m
【メモ】HTTP/2リバースプロキシnghttpxをDockerで実行するときのTips | DevelopersIO
ども、大瀧です。 gRPCの関連ツールとしてHTTP/2リバースプロキシであるnghttpxを触っています。手軽に利用するためにDockerで実行する場合のTipsをいくつかご紹介します。 1. Dockerイメージはdit4c/nghttpxがオススメ Docker Hubでnghttpxを検索するといくつかのイメージが表示されますが、dit4c/nghttpxが使い勝手が良く、おすすめです。ベースイメージがAlpine Linuxなのでイメージのサイズが小さく、最小限のDockerfileなのでカスタマイズしやすいです。ただ、タグがルーズ(latestのみで、ビルド時のAlpine Linuxのパッケージ最新版を利用)なので、以下のようにnghttpx -vを実行してバージョンを確認してから利用するのが良いでしょう。 $ sudo docker run -it --rm dit4c/n
メジャーアップデートしたXamarin.iOSでiOS 10のアプリ(翻訳アプリ)を作ってみた | DevelopersIO
1 はじめに iOS 10やXcode 8が公開された9月14日と同じ日に、Xamarinもメジャーアップデートされました。 Xamarin.iOSは、10.0となり、iOS10対応、Xamarin.Android 7.0となり、Android 7.0 Nougatに対応しています。 今回は、この新しいXamarin.iOSで、iOS 10 のSDKで新たに追加されたSpeech APIを使用して、簡単な翻訳アプリを作成してみました。 本アプリで利用させて頂いたフレームワーク等は、次のとおりです。 音声入力 SFSpeechRecognizer 翻訳 Microsoft Translator 読み上げ AVFoundation 2 実行画面 実際に動作している画面です。 一番左が起動時の状態です。そして、「開始」ボタンを話しかけると、入力が上の欄に表示されます。 続いて、「翻訳」のボタンを
[iOS 10] iOS 10がついにリリース！Developers.IOにiOS 10の特集記事を100本公開しました！ | DevelopersIO
[iOS 10] iOS 10がついにリリース！Developers.IOにiOS 10の特集記事を100本公開しました！ はじめに 本日、日本時間の9月14日午前2時に、ついにiOS 10がリリースされました。既にWWDC16にて新しい機能についての発表などもあり、 iOS 10の新機能やAPIの情報はDeveloper以外も情報を得ることができていましたが、改めてどんな機能や新APIが提供されたのかをまとめました。iOS 9の時は9週連続 BootCampという形で勉強会を開催しましたが、今年は、原点に戻りブログにしました。既に100本公開されていますが、今後も随時追加していきます。 iOS 10特集ページはこちら 何が変わったの？ iOS 10のAppleからのメッセージは「よりパーソナルに。よりパワフルに。 より楽しく。」というメッセージです。iOS 10は、メッセージアプリケーシ
![[iOS 10] iOS 10がついにリリース！Developers.IOにiOS 10の特集記事を100本公開しました！ | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/d8db8c7f323fb1ea0bbf6e8d7a8449861cc9ffb7/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2016%2F09%2Fios10_feature_400x400.png)
Lambda（Node.js）をES2015のPromiseを使って今っぽく書いてみる | DevelopersIO
モバイルアプリサービス部の五十嵐です。 私のNode.jsの知識は0.x系で止まっているので、今っぽい（と言ってもAWS Lambdaで使いたいのでv4.3.2の）書き方を調べてみました。その中でも一番良く使われるであろうPromiseの使い方をまとめてみます。 サンプルコードは、以前作成したLambda Function（bisque33/slack-slash-commands-with-serverless）をPromiseを使って書き直しました。実際の差分比較はこちらです。 環境 node.js 4.3.2 npm 2.14.12 Promiseとは Promiseは、リンク先の言葉を借りると Promiseオブジェクトは処理の延期(deferred)と非同期処理のために使われます。Promiseはまだ完了していないが、いずれ完了する処理を表します。 とあります。ScalaでいうF
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
