この記事について 本記事は、筆者が普段AWSの各種サービスを使って感じた感想・気づきをもとに、クラウドアーキの設計やサービスのより良い使い方Tipsを考察するシリーズです。 第二弾も第一弾に引き続きDynamoDBについてです。 DynamoDBはkey-value型のNoSQLであり、従来よく使われていたRDBとは異なるDB特性・クエリ特性を持っています。 そのためRDBを設計するときと同じようなノリでスキーマ設計・テーブル設計を行うと、後から「この操作をやらせるならDynamoDBじゃないほうが良かったんじゃないか？」ということが発覚しがちです。 本記事では筆者が遭遇した「DynamoDBでやらせてみたら苦労した・できなくて設計変更を強いられた」というユースケースをまとめることで、DynamoDBのクエリ特性や適性を考察することを目指します。 使用する環境・バージョン 2024/1/1

シェルスクリプトを書いていると「それはbash独自機能だから」「POSIXシェルには無い機能だから」と言われることがよくあります。だいたいは「それみんな使ってるのでPOSIXで標準化されてると思った」といったものなのですが、本記事では便利なものから「え、それやるくらいならPythonでよくない?」まで、bashの機能を紹介しようと思います。 for文でC言語っぽくループを回す シェルスクリプトでfor文といえばfor i in $(seq 10)とかをよく使いますが、bashだと以下のように書けます。

2023.12.30 18:00 「ガウェインの結婚」を歴史の授業で使わないで！～中世の英文学と女性がもっとも望むこと 2年ほど前に「世界史講義録」というウェブサイトの「最初の授業」という記事がバズったことがありました。これは高校世界史の授業初回で、アーサー王伝説の「ガウェインの結婚」をとりあげ、歴史は面白い……というような話の枕にするというものです。 詳しくはリンク先の元記事を読んでいただきたいのですが、非常にざっくり説明すると、アーサー王が敵の騎士から「すべての女性がもっとも望むことは何か」という問いを出され、それの答えが「自分の意志を持つこと」だったという話をネタに、「700年から500年くらい前の時代につくられた物語」なのに既に女性の人権に関係するようなトピックを取り扱っていて現代的だ……という内容です。 このウェブサイトの講義は、2009年発行の竹田青嗣『中学生からの哲学「超」入

TL;DR 3.6Bパラメータの日本語LLMに対し全パラメータをSupervised Fine Tuning (SFT)をした さらにLoRAを使用してProximal Policy Optimization (PPO)を行った 精度を定量評価できるようなタスクでSFT, PPOを行い、PPOにより確かに精度が向上することを確かめた 学習はすべてGoogle ColabのA100 GPU1枚を用いて行った はじめに GPT-3.5などのLLMの学習は以下の３段階で行われています。 Pre-traininig: 大規模なコーパスを用いた言語モデルの事前学習 Supervised Fine Tuning (SFT): 対話形式や指示・応答形式のデータセットを用いたファインチューニング Policy Optimization: 人間にとって好ましい応答をさせるためのファインチューニング（ポリシー

3畳ほどの拘置所での日々。 いったいどのくらいの時間がたっただろうか。 技術者として、長年会社に貢献してきた男性の体調は日増しに悪化していきました。 幾度もの保釈請求は繰り返し却下。がんと診断されたあとも、精密な検査を受けさせてもらうことさえできませんでした。 亡くなってから半年後に、実質的な無罪の判断がなされました。 男性の命を奪ったものは何だったのか。 関係者の証言、2500ページに及ぶ資料を分析した先にみえたのは、命を軽視しているかのような司法手続きのありようでした。 （社会部記者　佐伯麻里） 相嶋静夫さん。 青春時代にラジオやアンプを作ることに夢中になり、大学に入ると、化学の実験に明け暮れました。 自分の得意なことが生かせるのではないかと機械メーカーに入社。 以来35年間、技術畑を歩みました。 客の要望に合わせた機械をなんとかして作ろうという熱い思いを持った技術者だったといいます。

弊社Nucoでは、他にも様々なお役立ち記事を公開しています。よかったら、Organizationのページも覗いてみてください。 また、Nucoでは一緒に働く仲間も募集しています！興味をお持ちいただける方は、こちらまで。 はじめに 英語での適切な命名は、コードの可読性や保守性を向上させるために重要です。適切な命名規則を守ることがコードの理解や共有において不可欠です。 英語での命名規則を学び、適切な命名を行うことで、コードの読みやすさや保守性を向上させ、チーム全体でのコードの理解を促進する手助けとなります。 この記事では、日本人エンジニアが英語での命名規則を理解し、適切な命名を行うための指針を提供します。 命名フローチャート 変数 関数 クラス 1. 変数 1-1. boolean 1-1-1. 存在するかどうかのフラグ 名詞 + exists

南山大学で2023年12月5日に実施した「ソフトウェア工学特別講義 」の講義資料です。 アジェンダ: ・ 大規模言語モデル (LLM) とは？ ・NTT版大規模言語モデル tsuzumi のご紹介 ・プログラミングへの活用 ・プログラミングを超える範囲のソフトウェア開発タスクへの応用

TL; DR LangChainのメリデメを整理する過程で、今となってはopenai-pythonのうちChatGPTのAPIをを簡単に取り回せる程度のシンプルなライブラリがあるだけでも十分便利なんじゃないかと思ったので、ライブラリを個人で作ってみました。（バージョン0.0.1なのでちょっとお粗末な所もありますが） github.com はじめに こんにちは、データサイエンティストの坂元です。ABEJAアドベントカレンダーの13日目の記事です。世は大LLM時代ということで、ありがたいことにABEJAでも複数のLLMプロジェクトを推進させて頂いています。私自身もいくつかのLLMプロジェクトに参画しています。LLMといえばLangChainが便利ですね。OpenAI APIの利用だけでなく、各種ドキュメントのパースが出来たり、HuggingFaceやインデックスDBを扱う他のライブラリとインテ

はじめに 今回はエンジニア初心者から中級者が読むべき書籍を10冊厳選して紹介します。 1年目の自分に読んでもらいたい書籍としてまとめました。 リーダブルコード エンジニアの必読書 他の人が理解しやすいコードの書き方が学べる 我流からの脱却 豊富なコードが掲載されているので実践しやすい 「美しいコードを見ると感動する。優れたコードは見た瞬間に何をしているかが伝わってくる。そういうコードは使うのが楽しいし、 自分のコードもそうあるべきだと思わせてくれる。本書の目的は、君のコードを良くすることだ」(本書「はじめに」より)。 コードは理解しやすくなければならない。本書はこの原則を日々のコーディングの様々な場面に当てはめる方法を紹介します。 名前の付け方、コメントの書き方など表面上の改善について。コードを動かすための制御フロー、論理式、変数などループとロジックについて。 またコードを再構成するための

コミックDAYSは正規版配信サイトマークを取得したサービスです。 © KODANSHA Ltd. All rights reserved. このサイトのデータの著作権は講談社が保有します。無断複製転載放送等は禁止します。

娘の運動会には毎年必ず参加する。 今年は運動会のプログラムに強制参加の保護者競技があった。 私が娘の帽子をもらって入場門の列に並ぶと、周りは誰かの父親ばっかりだった。応援席では誰かの母親が頑張れって応援してて、児童席では私の娘が真顔でこっちを見ていた。私は元々運動は得意では無いので、保護者競技は余裕で最下位だった。 うちに夫はいない、2021年に他界している。 保護者競技が終わったあと、 退場列の中で、他所の家庭の声援を聞きながら、ふと、ここに夫がいれば良かったのに、と思ってしまった。 「いれば良かったのに」が脳内で勝手に 「(生きて)いれば良かったのに」に高速変換される。そして「もういない」と続く文章を自覚した瞬間に、突然いろんな言い訳と後悔と思い出がどばどば溢れてきて涙が止まらなくなった。 肩凝りがやばいって笑う夫に湿布を貼ったこと、なんてマヌケなんだろう。コロナ禍なんて気にせず病院に

「ソース」が一体なんなのかがよく分かりません。中濃ソース、とんかつソース、ウスターソースなどありますが、ただ揚げ物やとんかつにかけてればいいのでしょうか。成分をみると想像以上にフルーツや野菜がたくさん入っていて、不健康なイメージを持っていたので少し驚きました。オタフクソースはまた全然別ジャンルのような気もしますし、案外似たものなのでしょうか。日本のソースはイギリスのウスターソース由来と聞いたこともありますが、どのように使うのが正解でしょうか。イナダさんのお考えをお教えください。 イナダシュンスケ:これはまた哲学的な質問ですね。 ウスターソース、中濃ソース、とんかつソース、お好みソースなどなどは、総称して「ウスターソース類」と呼びます。長いし一般的な呼称ではないので、ここでは単にソースと書きますね。トマトソースやソース・ヴァン・ブランなどそれ以外の一般名詞としてのソースはいったん省きます。

こんにちは。MNTSQの下村です。 コーポレートエンジニアとして、MNTSQ従業員の生産系向上施策等を実施していたりします。 ( Twitterもやっている のでフォローしてもらえると嬉しいです！ ) 本日は社員からの問い合わせ業務 いわゆる ヘルプデスク業務について効率化するためのツールを自作した 話を書いてみます。 この記事の要約 一人目コーポレートエンジニアとして参画したがヘルプデスク業務が非効率だったので効率化した。 質問に対して特定のemojiを押すとGitHub ProjectsのItemを作成するようにした。 SlackスレッドのコメントとGitHub ProjectsのItemを双方向同期するようにした。 Azure OpenAIも利用して効率化した。 きっかけ 2023年5月からMNTSQの一人目コーポレートエンジニアとして参画しています。 情報システムを色々と整備してい

killrain @aloward ドルゴ通気弁。 何回も取り付けたし、使用中のものを見たこともあるけど、こんなに音が出てるのは初めて見ましたｗ ドラム音だけじゃなくて空気が通る時の反響音がいい味出してるｗｗｗ twitter.com/10chf/status/8… 2017-06-02 01:02:16 SAKUMAMATATA（サクママタタ）｜作曲家 @skmmtt 「駅のトイレ通気孔ビート」がめっちゃカッコよかったのでサンプリングして曲にしてみました。喧騒に溢れる駅構内でトイレへ立ち寄りただ用を足すだけのはずが不運にも凶悪な犯罪者たちに遭遇してしまい、いつの間にかとんでもない事件に巻き込まれてしまう...！的なイメージ。 pic.twitter.com/UCcvTusr9w 2017-05-31 22:02:35

こんにちは、Saldraです。普段はPictoriaという会社でAIの美少女の錬成に励んでいるエンジニアです。この記事はローカルLLMの概要をつかむことを目的とします。対象読者は以下です。 なんとなく ChatGPT は使ったことある人 ローカル LLM を聞いたことあるけどやったことない人 ローカル LLM とは OpenAIがAPIを公開してから、大規模言語モデル（以降LLMとします）は大きく進化していきました。この進化はOpenAIのAPIだけでなく、ローカルLLMも進化をしています。 ローカルLLMとは「一般向けにファイルとして公開されたモデル」で推論させる遊びです。APIは便利ですが、インターネットの接続が必要であったり、API提供側に依存する問題があります。ローカルLLMは自前で運用ができるため、APIにはないメリットや魅力があります。一方で、環境構築やマシンスペック等、少し始

・メールが届かない場合は、迷惑メールボックス等をご確認ください ・登録メールアドレスはアカウント設定ページから変更いただけます

[電話予約の無人化]Amazon Connect + GPT-4 JSONモード + Whisperで、1回の発話から予約情報(日付,時間など)を抽出 はじめに Amazon Connect + GPT-4 JSONモード + Whisperで、1回の発話から予約情報(電話番号,日時,名前,人数)を正しく抽出できるか検証しました。 コールセンターでは、有人対応から無人対応に変更したいニーズが増えているように思います。 電話予約の無人対応を想定し、1回の発話で、下記の５つの予約情報を抽出できるか確認します。 お名前 電話番号 予約日 予約時間 人数 発話で予約情報を抽出する方法として、GPT-4 Turbo のJSONモードを利用します。 JSONモードの詳細は、下記を参照ください。 例えば、「名前はクラスメソッドで、電話番号は09011111111。来週の火曜日の19時に4名で予約できます

「謝ったら死ぬ病」をご存知だろうか？ どんなに証拠を突き付けても、絶対に非を認めない人だ。 プライドの高さや負けず嫌いといった性格的なものよりもむしろ、過ちを認めることが、自分の命にかかわるものだと頑なに信じている。すなわち、「謝ったら死ぬ」という病（やまい）に取り憑かれている―――そんな人がいる。 もちろん、想像力が衰えて視野が狭く、無知な自分を認めたがらないような頑固者なら、可哀そうに思えども理解はできる。 だが、第一線で活躍する知識人や学者で、ものごとを客観視できるはずなのに、この病気に罹っている人がいる。それどころか、その優れた知性を用いてコジツケを考えだし、論理を捻じ曲げ、のらりくらりと言い逃れる。 なぜ、あの人は、あやまちを認めないのか？ ずばりこのタイトルの本書を読んだら、疑問が氷解した。 それと同時に、「謝ったら死ぬ病」は私も罹患していることが分かった。「あの人」ほどは酷く