この記事では、newspaper3kというライブラリを使ってPython初心者でも簡単にできるスクレイピングの方法を確認していきます。ここでは、ニュースサイトのトップページに表示されている複数の記事を順に巡回し、記事を取得する方法を紹介いたします。 newspaper3kのインストール方法や基本的な使い方については、以下の記事をご覧ください。リンク先の記事では、newspaper3kの基本的な使い方を理解する為、ニュースサイトから１つの記事をピックアップし、その記事の全文やサマリー、キーワードを取得しています。

リーガルテック領域のリーディングカンパニーである株式会社LegalForceが、「検索インフラTechTalk!」を開催しました。インフラ領域の中でも「検索インフラ」にフォーカスした今回は、検索インフラに関する具体的な事例や取り組みについて各スピーカーから発表がありました。野口真吾氏は、AWSを用いたデータレイクの基礎について紹介しました。 企業規模に関係なく起こるデータのサイロ化 野口真吾氏（以下、野口）：みなさんこんばんは。本日は「検索インフラ Tech Talk!」ということで、検索インフラから少し広げた話題にはなるんですが、「AWSを用いたデータレイクの基礎」というお話をします。よろしくお願いします。 最初に簡単に自己紹介します。アマゾンウェブサービスジャパンでスタートアップ担当のソリューションアーキテクトをしている野口真吾と申します。Twitterでは＠nogというIDを使って活

Streamlit とは 本稿では、Streamlit の使い方を説明する。 Streamlit とは、フロントエンドアプリケーションを作成できる python のフレームワークである。Pandas の DataFrame や、 plotly・altair といった描画ライブラリで作成したグラフを埋め込むことができ、工夫次第でデータ分析にも応用することができる。 環境 macOS Catalina (ver.10.15.6) インストール いくつかの方法でインストールすることできる。 1) pip でインストールする。公式HP推奨

4/26 に発売されます！ 「ユニコーン企業のひみつ」をいただいて読みました。読みやすくて面白かったー。4/26 に発売されます！チームをリードしている人や組織づくりをしている人にはもちろんおすすめだし、メンバーの一員としてチームの中で仕事をしている人も「なるほどそんな風に仕事をしてるのかー！」って感じることができて面白いと思うー。あと、アジャイルな開発とかスクラムをやってる人ももう一度自分の大切にしているものを見直すことができるんじゃないかなぁ。ぜひどうぞ。 www.oreilly.co.jp ユニコーン企業はスクラムをやっていない この本の「ユニコーン企業」とか「テック企業」って「大きくなってもスタートアップみたいな働き方をしている企業」のことで、Google・Amazon・Facebook・Spotify のような企業を指してる。そういった企業が何を大切にしているか、どんな風に開発を

いまちょうど『文章力が、最強の武器である。』という本を読み終えたところです。 これで、ついに出そろいました。 長らく追い求めていた「文章力」の理想郷。 どうやらそこには、4人（冊）の四天王がいらっしゃったようです。 これまで「文章力」「文章術」「書き方」と検索して、約20冊近く読んできました。 その中から選び抜かれた四天王をご紹介します。 入門編『文章力が、最強の武器である。』藤吉 豊 https://amzn.to/3njBbiF 最初に四天王の1人目、入門編で待ち構えているのがこの『文章力が、最強の武器である。』。 まず何と言っても、章立てがすごく魅力的なんですよね。 第1章は、文章力が劇的に上がる「3つの視点」。 おもしろい わかりやすい 読みやすい この3拍子が揃った文章こそが、「良い文章」なのだと筆者は語っています。 その後、先ほどの3拍子それぞれを伸ばしていくための考え方・型・

Appleのトレーニング施設「Apple University」のトップを務めるジョエル・ポドルニー氏が、Harvard Business Reviewにおいて、Appleが革新的であり続ける秘密はその組織構造にあるとして、大企業としてはまれな同社の構造について記しています。 全マネージャーを1日で解雇 Appleほどの大企業ともなれば、最高経営責任者（CEO）のもと複数の事業部門があり、各部門にはマネージャー（責任者）がいて、それぞれの損益（P&L）を管理する、という仕組みが一般的です。 しかし故スティーブ・ジョブズ氏がAppleのCEOとして復活した1998年、同氏は1日のうちに全事業部門のマネージャーを解雇して、会社全体をひとつの機能的な組織にしてしまいました。 そしてポドルニー氏によれば、当時の約40倍もの規模に成長した現在も、Appleは同様の形態を維持しています。つまり組織図を

DESCRIPTION Webサイトをアプリストアから配信することができます ステップ別にWebサイトをアプリ化していく方法をみていこう Webサイトをつくることができるなら、アプリも配信できます 本文 DESCRIPTIONで大上段に断言してますが、概ね事実です。アプリ化なのでコンテンツはメディアアプリといった「アプリ」でないとというのはありますが、まず入り口として、HTML/CSSとちょっとしたJavaScriptでつくられたWebサイトをアプリとして実機で動作確認する方法をみていきましょう。 アプリ化してみるWebサイトはこちらです: ミシュランガイドにも掲載されたフレンチレストランのWebサイトをリニューアルしたので、裏側から考え方、実装まで解説します。で経緯や裏側をご紹介しましたが、こちらのWebサイトを Capacitor というライブラリを利用してアプリ化して、iOS、And

The Fullstack Framework in Deno.Aleph.js gives you the best developer experience for building web applications.

2018/08/10[OHLCVデータ取得関数の実装例の一部を修正2] 以下の２点を修正しましたので本実装例を参考にされている場合、お手数ですが下記の修正をお願い致します。(文末の実装例は修正済み) ①DataFrameのto_datetime関数にてtimestamp(文字列)からdatetimeに変換していますが、タイムゾーンUTC指定が正しく行われていなかったため環境によってズレが発生する問題を修正しました。 修正前)pd.to_datetime(df_ohlcv.index, utc=True) 修正後)df_ohlcv.index = df_ohlcv.index.tz_localize("UTC") ②reverse=False, partial=Trueを指定して取得した場合にデータの並び順が正しくない場合がありましたので修正しました。 (fetch_ohlcv_df関数のr

ローカル PC にインストールした Jenkins から「java」コマンドを含むバッチファイルを実行しようとすると、以下のような例外が出て失敗する。 Error occurred during initialization of VM Could not reserve enough space for object heap 調べてみると、以下のサイトにバグとしてあげられていた。 https://issues.jenkins-ci.org/browse/JENKINS-5909 とりあえず、起票者の最後のコメントにある通り -Xmx600M を java コマンドの起動引数に追加してあげると無事に動いた。 詳細は。。。英語だから「とりあえず」諦める。

1 S postgres 5038 876 0 80 0 - 11962 sk_wai 09:57 ? 00:00:00 postgres: postgres my_app ::1(45035) idle 1 S postgres 9796 876 0 80 0 - 11964 sk_wai 11:01 ? 00:00:00 postgres: postgres my_app ::1(43084) idle I see a lot of them. We are trying to fix our connection leak. But meanwhile, we want to set a timeout for these idle connections, maybe max to 5 minute.

各言語での利用方法解説 C/C++ : company-ironyを使ってemacsでC/C++の補完 Python : company-jediを使ってemacsでpythonの補完 Javascript : company-ternを使ってemacsでjavascriptの補完 概要 emacsの補完用パッケージcompany-modeの紹介． auto-completeとの比較 emacsの補完といえばauto-completeがある． auto-completeとcompany-modeの違いは，githubのissueでまとめられている． company-modeは拡張をシンプルに書けるところが魅力らしい． るびきち氏の紹介ページによると，メンテナが数年前に引き継がれたらしい． githubを見ると今も開発が活発に行われていることが分かる． 個人的にはcompany-modeの方

こんにちは、@yoheiMuneです。 CSSのdisplayはマークアップするには絶対に必要なスタイルの1つですよね。その中でtableやtable-cellは業務でなんとなく使っていますが断片的にしか理解していなかったので、今日はそれらのまとめブログを書いてみたいと思います。 Special Thanks to https://flic.kr/p/iNeYy7 目次 display:tableとは display:tableはテーブル要素のように表示するためのCSSです。このスタイルを用いることでtableタグを使わずに、同様のスタイルを利用することができます。 <!-- tableタグを利用した例 --> <table> <tr> <td>名前</td> <td>メールアドレス</td> </tr> <tr> <td>よーへい</td> <td>aaaa@bbb.ccc</td> <