こんにちは。DeployGateの藤﨑です。 仕事をしていると、とにかく考えて答えを出さないといけないことが数多くあります。すぐ思いついてアウトプットできることならいいのですが、大事なものは大体、どこから考え始めればいいのか分からないことだったり、なんとなく浮かんでいるんだけどうまく言語化できないものだったりします。 そんなときに、どうやってその状況を抜け出して、話を深めていくか。今日は、最近自分がやってみて、とても効果を感じられた手法について紹介します。 これまでの手法自分が考え事をする上で、まずやるのはテキストで書き出すということでした。何らか課題について考えるときは、ひたすら箇条書きで考えを書き出していくということをします。だいたいNotionにページを作って箇条書きでひたすら書き出しています。 それ以外だと、やはり紙とペンです。長年適当なコピー用紙→ノート→コンパクトなメモ…と移り

［ロンドン　２９日　ロイター］ - 世界で最も普及している人工甘味料の１つである「アスパルテーム」が、世界保健機関（ＷＨＯ）傘下の国際がん研究機関（ＩＡＲＣ）によって７月に初めて「ヒトに対する発がん性を持つ可能性」のリストに掲載される。事情に詳しい２人の関係者が明らかにした。 アスパルテームは、コカ・コーラのダイエット・ソーダやマースのエクストラ・チューインガム、スナップルの幾つかの飲料などさまざまな製品に使われている。

はじめに Turing 株式会社のリサーチチームでインターンをしている東京工業大学 B4 横田研究室の藤井(@okoge_kaz)です。 大規模言語モデル(Large Language Model: LLM)への注目がGPT-4のリリース以降高まっていますが、LLMを作るための知見は十分に共有されているとは言い難いと個人的に感じています。 Turingでは、Vision and Language, Video and Languageなどのマルチモーダルなモデルの研究開発を行っている一環として、Megatron-DeepSpeed, GPT-NeoXなどを用いて数十Bのモデルの学習を行う知見を蓄積しています。今回はLLMの事前学習を行う際に候補となるMegatron-DeepSpeedを用いてGPT-2-7B(6.6B)の学習をどのように行うのかについて解説します。 分散並列学習がどのよう

JASRAC許諾第9009285055Y45038号 JASRAC許諾第9009285050Y45038号 JASRAC許諾第9009285049Y43128号 許諾番号 ID000002929 ABJマークは、この電子書店・電子書籍配信サービスが、著作権者からコンテンツ使用許諾を得た正規版配信サービスであることを示す登録商標(登録番号 第6091713号)です。

過激なエロ・グロ表現を含む、いわゆる「有害図書」。戦後広まった自治体による規制は近年、ネット空間や民間へと波及している。漫画家やクリエーターらは危機感を強める一方、青少年への悪影響を懸念して規制の必要性を訴える声も根強い。有害図書規制はどうあるべきか。各界の有識者に聞く。初回は人気ボクシング漫画「はじめの一歩」を連載中の漫画家・森川ジョージ氏だ。 森川さんへのインタビューは全3回です。「有害図書」規制のあり方を有識者に聞く連載は、以下のラインアップです。 ▽漫画のエロ・グロ表現で犯罪が起こる?　「はじめの一歩」作者の憂い ▽“寸止め”パンチでボクシング描けない　有害図書規制と表現の萎縮 ▽「表現の自由のため」じゃない　漫画家が有害図書規制と闘うワケ ▽科学的根拠ない「萌え広告」規制はダメ　議員になった漫画家の警鐘 ▽性表現は「理性的な基準で吟味を」　憲法学者がみた有害図書規制 ▽形骸化する