はじめに エンジニアとして就職する前に読んだ「なれる!SE 2週間でわかる?SE入門」の内容があまりにも厳しく、業界に就職するのが怖くなったことを覚えています。本の中に登場する中学生の少女にしか見えない凄腕のSE、室見立華さんのような人物は現実には存在しないでしょうが、実際の業界には彼女のような凄腕エンジニアや年齢不相応な技術力を持つ人間も確かに存在します。 なれる！SE ２週間でわかる？ＳＥ入門 (電撃文庫) 作者:夏海 公司,IxyKADOKAWAAmazon SREの探求『Becoming SRE』の内容紹介 私は「なれる!SE」が好きすぎるあまり、「なれる!SRE」というタイトルのクソみたいな文章を吐き出したこともありましたが、そのクオリティがあまりにも低かったため、外には公開せずに留めておきました。そんな中、SREの探求の原著者であるDavid Blank-Edelman(ott
英語アニメ「Curious George」（おさるのジョージ）で使われた英単語（10話分）を分析して分かったこと - 塾の先生が英語で子育て
映画やドラマ、アニメを使って楽しく英語学習ができれば最高ですね。 これまで１５の映画で使われる英単語を分析してきました。 www.jukupapa.com 今回は英語アニメ「Curious George」の10話分で使われた英単語を調べてみました。 「Curious George」は日本で手軽に見られる英語アニメの中でも、簡単な番組のひとつです。 NHK Eテレで毎週土曜日に放送されており、副音声に切り替えることで手軽に英語で聞くことができます。 「Curious George」については、こちらで詳しく解説しています。 www.jukupapa.com この記事を読んで頂ければ、「Curious George」を英語で観たいと思って頂けるかもしれません。 尚、英単語の分析には、有志の方々が作成した原稿を使っています。 実際とは若干異なる可能性があります。 ご了承ください。 「Curiou
以前博士論文執筆の際にお願いしたいことを書きましたが、 今回は論文の体裁に関するもっと細かいことを書き留めておきたいと思いました。 色んな学生さんの論文を審査したり添削したりすることがありますが、同じことに何度も巡り合いますので。 以下は主に弦理論、素粒子論業界の人のためのものですが、英文、数式に関しては適用範囲は広いかと思います。 また、以下書くことはどうでもいい慣習に関することも多いです。 しかし、業界の慣習を破る場合は、自分がそれが正しいと思って、意図的にやってくれたほうが良いと思います。 構成について 修士論文で新規の結果があるばあい、博士論文のばあいは、論文中のどこが先行研究のレビューでどこが新規なのかが明確にわかるようにしてください。 イントロダクションに明記した上で、該当節においても強調してください。 書いている本人は当然わかることですが、読んでいるほうにはわかりません。 S
論文を書く上での規則 - Qiita
スライドの作り方 → イショティハドゥス的スライドの作り方 やりがちだけど、やらないべきだよねって思っていること。 論文を書く上でどちらにするか迷うところ。 この記事さえ読めば体裁はまずまともになると思います。 日本語・英語両方について書きます。英語は適当なので雰囲気だと思ってください。 ここで出している例はほとんどすべて実在する論文から引用しています。 面倒くさいので引用元は書いてありませんが、Google Scholar などで検索すればすぐ出てくると思います。 Disclaimer あくまで僕の考えなので、参考にするかしないかはおまかせします。 おすすめの文献 科学英文のチェックマニュアル 英語論文におけるポイントはかなりまとまっている上、かなり信頼できます。 英語論文を読む前に一通り目を通しておくとよさそうです。 日本語論文を書く上でも参考にになる場所があります。 科学論文に役立つ
Prompt Tokensはテキストの15%になっています。 計算しやすいようにCompletion Tokensをどちらも1,000とすると、 画像として処理した場合は0.022595ドル=3.55円 テキスト抽出して処理した場合は0.065995ドル=10.38 円 と約3倍もの開きがあります。 一方で処理時間は1.5倍に増加しています。 実装紹介: 論文から解説生成 落合陽一さんが紹介したサーベイの方法論を使い、論文解説を生成します。 処理手順 arXiv URLからプレプリントをダウンロード base64形式に変換後 GPT-4oに渡して解説を生成 実装 def download_paper(arxiv_url: str, save_dir: str) -> str: """ arXivから論文をダウンロードする関数 Args: arxiv_url (str): ダウンロードする論
英米豪8サイトのWord of the Year 2019総まとめ【英単語で振り返る2019年！】 - 崖っぷち舞台役者が婚活を始めたら英語がペラペラになりました
こんにちは。 2020年が始まったところですが、皆さん、Word of the Yearというものがあるのをご存知でしょうか。イギリス、アメリカ、オーストラリアなどの辞書サイトや団体が、その年を表す英単語を選ぶものです。 日本でも、今年の漢字というのがありますよね。 それぞれ、検索回数、有識者による選定、一般ユーザーによる投票など、様々な基準により選出されていますが、どれもその1年を代表する英単語が選ばれており、非常に興味深いです。さらに、時事英語と一緒に、英語圏の最新の話題や社会問題を知ることができて、スピーキングやライティングの試験対策にもピッタリなんです！ 今回は、英単語で振り返る2019年と題して、英米豪8つのサイト（American Dialect Society, Australian National Dictionary Centre, Cambridge Dictiona
この記事ではＤＵＯ３．０の英文解説を行います。 今回は section 17 の英文を解説します。この記事を読んでいる方でもし、「この英文も解説してくれ」というものがあれば、コメント欄からリクエストをお願いします。 186.I can’t figure out why on earth everybody feels so much contempt for Bob! 高校以上の英文は、文構造を複雑にして難しく見せるなんてことがよくあります。こういう時は主語と動詞をまず見つけちゃうことが大事です。 これなんかは、後ろにズラズラと並んでいますが、主語は I 、動詞は figure out ですね。 だから文の大意は「私は理解できない」になります。そしてその後ろの文章は節。この節は「間接疑問文」で、「なぜ～か（分からない）」という内容です。 この中にも主語、動詞に相当するパーツと枝葉に分けられ
前回はグラフベースのキーフレーズ抽出手法と pke での実験結果を紹介しました。今回は、spaCy, scattertext, ... 等々の OSS を用い各種のテキストマイニング手法についてコード例とサンプルプロットを交えながら説明したいと思います。 1. はじめに 本記事ではテキストマイニングの概要と代表的な手法について、コード例とサンプルプロットを交えて説明します。分析対象には、この連載で何度か用いている livedoor ニュースコーパスを用い、Google Colaboratory で動かすことを想定したコードスニペットを入れていきますので、実際に動かしたり対象を変えてみたりして試して頂けると良いかと思います。 2. テキストマイニングとは テキストマイニングとは、ざっくり言うと「自然言語の文書データを対象に使用される単語の出現傾向等を分析して何らかの有益な情報を取り出すこと」
近ごろの様子
2024年5月 自分の個人ウェブサイト内でのここの呼称を「かつてTwitterとして知られていたプラットフォーム」で統一したい (12時35分) Firefoxに昔からあったので、大して調べずにoverflow-inlineプロパティーを使い始めたら、全然実装されていなかった (7時2分) 東西線の工事の日を確認しているが、関係なかった (8時1分) 隠したテキストは検索できないことがあるので、ちゃんと表示するようにした(v9.30.5) (7時33分) ソフトミント色のAirPods Proとか出たら買っちゃいそう (18時52分) Kindleのマンガが1000冊を超えてしまい、1冊500円とすると50万円だなと思い、ブックオフで売りたい (18時52分) Firefoxのプライベート・ウィンドウのタブでは、ダークモード対応のfavicon.svgでダークモード側が選択されるという学び
オープンなKindle用英和辞書 - 豪鬼メモ
Kindleの実機（無印、Paperwhite、Oasis、Voyage等）で使えるオープンな英和辞書を作ってみた。以前の記事で紹介したEPUB辞書をKindleのmobiフォーマットに変換したものである。データソースにはWordNetやWiktionaryなどのオープンに使えるものを使っている。辞書ファイルをダウンロードできるようにしておいたので、試しに使ってみてほしい。 何年かぶりに、Kindle Paparwhiteの新型が発売された。私にとっては待望だったので、早々に購入して使っている。画面が広くなってコントラストも高くなって動作も早くなって、値段が17000円と高い以外は、良いこと尽くめだ。とはいえ、よく使う期間には携帯電話よりも長時間触れるデバイスであるから、それなりの投資をするのに吝かではない。 Kindle端末には、もともとプログレッシブ英和中辞典がバンドルされている。日本
仕事で行っているPoCの中で、文章の要約が使えるのではと思い、調査をし始めています。 今回はsumyのLexRankの実装を使い、過去の投稿を要約してみます。 LexRank LexRankは、抽出型に分類される要約アルゴリズムで、文書からグラフ構造を作り出して重要な文のランキングを作ることで要約と言える文を発見します。2004年に提案されています (提案論文はこちら) 。 要約アルゴリズムは抽出型と生成型に大きく分けられます 抽出型は、対象の文章内から要約と言える代表的な文を抜き出す方法 (大事なところに線を引くのと近い方法) 生成型は、文章内の文をそのまま使わずに、要約文を作る方法 (読書メモを作るのと近い方法) LexRankのキーポイントは2つで、PageRankから着想を得たTextRank (提案論文PDF) の派生となります。 文をノード、文間の類似度をエッジとした無方向グラ
第３回 black market（闇市場） 英語圏では昔から “English is a living breathing thing and words evolve through time.” （英語は生きていて、言葉は時と共に進化する）と言われていますが、ここ最近で特に急激に扱いに変化が起きたのは、‘black’というひと言が入っている言葉でしょう。 キング牧師（Martin Luther King, Jr.）やマルコム X（Malcolm X）が公民権運動を起こし、黒人民族主義を主張する Black Panther Party（黒豹党）が結成された1960年代から70年代にかけてのアメリカでは、ほぼすべての黒人が “Black is beautiful!” と叫び、黒人であることを誇りに思っていました。アメリカ近代史では、この時代を the Era of Black Power（
共起ネットワークとは、SNS投稿やWebサイト、アンケート、書籍/論文、歌詞などの「文章」に含まれる「単語間の共通性」を見出し、図で表現する方法です。 この共起ネットワーク、テキストにおける単語同士のつながりを可視化し、視覚的に理解を促せるため、テキストマイニングの手法として非常に人気が高いです。 この記事では、「青空文庫」に掲載されている小説を題材とし、KH CoderやPythonを使って共起ネットワークを作る方法を解説します。加えて、どういったことが読み取れるのか、どんな示唆出しができるのか、など共起ネットワークの解釈方法についてもお伝えします。 KH Coderは、無料で使えるテキストマイニングツール（主にWindows端末向け）です。Pythonは、無料で使える統計解析や機械学習に用いるプログラミング言語のひとつ。テキストマイニングのためのライブラリも完備しています。 KHCod
日本語書記技術WG報告書（2019年3月31日付）
慶應義塾大学SFC研究所 Advanced Publishing Laboratory 日本語書記技術WG報告書 2019年3月31日 目 次 日本語書記技術 WG の議論の概要… …………………………… 小林龍生… 5 EPUB は Web ではない…………………………………………… 村 田 真… 19 Is EPUB part of the web?… ………………………………… Florian Rivoal… 23 リフロー可能なドキュメント環境とは………………………… 木田泰夫… 29 簡便な行組版ルール（案） … ……………………………………… 小 林 敏… 35 読み効率を高める日本語電子リーダー設計の試み…………… 小林潤平… 49 組版についてのアクセシビリティ要件………………………… 村 田 真… 57 ルビの簡便な配置ルール（案） … ………………………
【超初心者向け】Pythonで顧客のアンケートデータを自然言語処理してみた｜半蔵門と調布あたりで働く、編集者のおはなし
みなさんこんにちは！FOLIOアドベントカレンダーの8日目の記事です！ 昨日は弊社の顧客基盤部でバックエンドエンジニアをされているmsawadyさんによる記事でした！ ８日目の本記事は、FOLIO金融戦略部でコンテンツの編集＆執筆をおこなっています設楽がお届けします。 この記事の目的・初心者向けに、Pythonを使ったデータ分析（自然言語処理）の初歩の初歩を伝える記事。 読者対象・Python初心者。データ分析初心者 ・アンケートとか顧客の声を分析してみたいと考えている人 私ですが、普段は弊社サービスを使って頂いているユーザー様向けに、投資や資産運用に関するいろいろな記事を執筆、編集しているという、データ分析とかプログラミングとは全然関係ない業務をおこなっています。 今回は、お客様から回答頂いているアンケートを使い、サービスがもっと良くなるためのヒントや、お客様がどういう点に困っていたり悩
わかりやすい研究発表をするための3つの手順【スライド・話し方】
こんにちは、みのんです。 今回は研究室に配属されてゼミ発表や学会発表をしなければいけないのに 「研究発表をどうやって準備したらいいかわからない」 と悩んでいる学生の方々のために、 「わかりやすい研究発表をするための方法」 をお話します。 研究室に配属されるまでって、あまりプレゼンをする機会がないですよね。 しかも、「プレゼンの準備方法」を教えてくれる人ってなかなか居ません。 当然、自分もそんな親切な方は居らず、独学で試行錯誤しながらプレゼン方法を学んできました。 とはいえ、 国内学会で9回国際学会で2回 の学会発表を経験させて頂いたおかげで、なんとなく「わかりやすい研究発表の方法」がわかってきました。 しかも、ありがたいことに 優秀発表賞を2回日本学術振興会の特別研究員DC1にも面接経由で採用 などある程度の成果を挙げることができ、学部生の方に教えてあげられるくらいのレベルには達したのでは
A Philosophy of Software Design, 2nd Edition (English Edition)英語版 John K. Ousterhout (著) 形式: Kindle版 Amazon.co.jpで詳細を見る 良い設計をするためのコンセプトを解説した本。類書はいろいろとあるが、自分が読んだものの中では一番良かった。ソフトウェアエンジニアリングを行う人には広くおすすめできる。コンパクトですぐに読み切れるのも良い。 複雑さをいかに削減するかという観点と、その対策としての深いモジュールというコンセプトを導入し、この軸ですべての章を論じている。筋が通っていて読みやすいし、納得感も高い これらのコンセプトを通して、従来は良しとされているプラクティスの再検討も行っていて、こちらも面白く納得しながら読めた。例えばできるだけメソッドは小さくするという慣習や、Clean Cod
【NovelAI】 エロも行ける！最強プロンプト（呪文）辞典｜賢木イオ @studiomasakaki
こちらは最初に編纂された「第一版」ですこの「最強プロンプト辞典」は、NovelAIv1が登場した2022年10月に編まれた日本初の画像生成AIプロンプト辞典（個人ブログ掲載）をnoteに転載したものです。その後、第二版となる「プロンプト新辞典」を経て、2024年2月に第三版となる「プロンプト超辞典」が完成しています。第一版の内容は黎明期のものであり、AnimagineXL3、NovelAIv3に準拠し、10万字を超える情報量と生成結果の画像比較、Wildcardを完備した最新版の「超辞典」をご参照ください。 プロンプトの基本基本的にはカンマ「,」で区切って、盛り込みたい要素を箇条書きで並べていくだけでOKです。「被写体は何人でどんな構図か、どんな見た目の誰がどこで何をしているか、どんな画風か」を指定するのがコツ。正しい「呪文」でないと認識しないわけではなく、DeepL翻訳でざっくり英文化し
Gumroad has gone full retard. While we watch it sink, check out the archive password sharing. ＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝UPDATE＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝ 2023/02/06「クォリティ・構図」の逆引き辞典を公開。それに伴い、これらの項目に単語を追加し、詳細にしました。 2023/02/10UPDATE！「髪型」の逆引き辞典を公開。それに伴い、項目を大量に追加しました。 ＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝ サークル公式ブログの一番人気記事「エロもいける！最強プロンプト（呪文）辞典」に続き、本稿では7thLayer系とOrangeMix系におけるプロンプトの効果を再調査し、分類しました。 NovelAIは現行学習モデルの中で最も自由度が高い
著書11冊目『SHERLOCKで身につく英文法』重版！ 著書4冊目『リアルな英語の９割は海外ドラマで学べる！』は9刷。海外ドラマ「フレンズ」のセリフとジョークを解説。英検１級TOEIC990点満点。著書：『海外ドラマ英和辞典』『リアルな英語の９割はアカデミー賞映画で学べる！』『Avengers: Endgameで英語が話せる本 上／下』他 ブログを続ける原動力となります。どうか今日も応援クリックをよろしくお願いします。 20:27 [Scene: inside girls' apartment] シーン：女子のアパートメントの中 モニカ: Ooh... hey, honey, are you all right? （あぁ…ねぇ、大丈夫？） レイチェル: Oh... （あぁ…） フィービー: You okay? （大丈夫？） レイチェル: Medium. Hmm. Any cookies l
技術書店5にて出品したはじめての自然言語解析を全文公開します！ 1.1 自然言語解析のステップ自然言語解析を行う際は基本的な流れとして、下記3ステップを踏むことになります。 形態素解析・分かち書き→数値ベクトルへ変換→機械学習アルゴリズム適用 形態素解析とは、品詞等の情報に基づいて、意味のわかる最小単位に文章を区切ることを言います。 例えば、「今日は学校に行って、その後塾に行って、数学を勉強した。」という文章があったとします。 これを形態素解析すると下記のようになります。(MeCabというツールを使用しています。後ほど詳しくご説明します。) 分かち書きとは、文章において形態素解析に従って語の区切りに空白を挟んで記述することです。英語では単語と単語の間には空白が存在していますが、日本語にはないため、空白を付け足す必要があります。自然言語処理のアルゴリズムは基本的に英語をベースに作成されたもの
乃木坂46の結成10周年を記念して(？)、ここまでの全楽曲の歌詞を自然言語処理的なアプローチで分析してみる。 分析といっても個人的に使ってみたかった手法を適用してみる題材として歌詞のテキストデータを使おう、というところから始まっているので、その結果に対して分析的な解釈は与えられていないかもしれない。 したがって、タイトル負けというか「何を歌ってきたか」に対して解を与える内容になっていないかもしれないということは悪しからず。 歌詞のテキストデータは歌詞サイトからスクレイピングしてきた。 1つディレクトリを作成して曲ごとにtxtで保存する。 ※スクレイピングした歌詞は著作権のあるものなので私的な情報解析目的にとどめる ※スクレイピング対象サイトに過度な負荷をかけないようにアクセス間隔を数秒空ける work_dir/ ┗ nogizaka46_lyrics_text/ ┣ 13日の金曜日.txt
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
なれる!SRE - Becoming SREで学んだこと - じゃあ、おうちで学べる
(修士/博士/普通の)論文執筆の際にお願いしたいこと、その二
論文解説をGPT-4oを使って自動的に生成してみる - Qiita
ＤＵＯ３．０の読みにくい英文を解説してみる (section 17編）
はじめての自然言語処理 OSS によるテキストマイニング | オブジェクトの広場
Python: LexRankで日本語の記事を要約する - け日記
言ってはいけない！ 現代アメリカのタブーな英語 3 | 研究社 WEB マガジン Lingua リンガ
共起ネットワークの作り方と考察方法｜KH CoderとPythonでの手順を図を用いて丁寧に解説
読書メモ: A Philosophy of Software Design
"【ローカル版】 エロ特化！最強プロンプト（呪文）新辞典" by スタジオ真榊 from Pixiv Fanbox | Kemono
シットコムで笑え！ 海外ドラマ「フレンズ」英語攻略ガイド
はじめての自然言語解析(全文公開)｜Seiya Kitazume
【自然言語処理】乃木坂46は10年間何を歌ってきたのか【歌詞分析】 - 僕の頭の備考欄