気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
leck-tech.comエントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
0
記事へのコメント0件
- 注目コメント
- 新着コメント
新着コメントはまだありません。
このエントリーにコメントしてみましょう。
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
いまの話題をアプリでチェック！
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
日本語Wikipediaデータを使ったsentencepieceを学習させる | 創造日記
環境は Ubuntu 18.04 (LTS) Python 3.7.3 Wikipediaデータの準備 以下のサイトを参考に進めていたが、若... 環境は Ubuntu 18.04 (LTS) Python 3.7.3 Wikipediaデータの準備 以下のサイトを参考に進めていたが、若干勝手が違っていたのでここでもメモっておく。 Wikipediaからコーパスを作る ダウンロード とりあえず以下のコードでダウンロードする。 $ curl https://dumps.wikimedia.org/jawiki/latest/jawiki-latest-pages-articles.xml.bz2 -o jawiki-latest-pages-articles.xml.bz2 txtファイルへの変換 Wikiextractorを使用する。 $ git clone https://github.com/attardi/wikiextractor wikiextractorフォルダ以下のWikiextractor.pyを実行すれば良い。(なぜ
leck-tech.com
leck-tech.com
leck-tech.com
leck-tech.com
bunshun.jp
note.com/beloved_tomoka
rookie.shonenjump.com
yashio.hatenablog.com
jidounten-lab.com
zenn.dev/robustonian
www.lifehacker.jp
sqlfu.dev
speakerdeck.com/mii3king
gigazine.net
aws.amazon.com
zenn.dev/ojt
www.kobonemi.com
www.tvlife.jp
dengekionline.com
studyhacker.net
onaji.me
studyhacker.net
tenshoku.mynavi.jp
