サクサク読めて、アプリ限定の機能も多数!
gzipでの様々な問題へのリンクとbz2,LZO,LZ4について。bz2はsplittableだがCPUリソースを喰う。LZO,LZ4はCPUリソース当たりの圧縮効率が良いがindex作成、専用ツールの使用などhadoop内ルールなガラパゴス要素がある。
HHR のブックマーク 2021/05/24 18:03
Best splittable compression for Hadoop input = bz2?[Hadoop][bzip2]gzipでの様々な問題へのリンクとbz2,LZO,LZ4について。bz2はsplittableだがCPUリソースを喰う。LZO,LZ4はCPUリソース当たりの圧縮効率が良いがindex作成、専用ツールの使用などhadoop内ルールなガラパゴス要素がある。2021/05/24 18:03
このブックマークにはスターがありません。 最初のスターをつけてみよう!
stackoverflow.com2013/06/18
We've realized a bit too late that archiving our files in GZip format for Hadoop processing isn't such a great idea. GZip isn't splittable, and for reference, here are the problems which I won't re...
3 人がブックマーク・2 件のコメント
\ コメントが サクサク読める アプリです /
gzipでの様々な問題へのリンクとbz2,LZO,LZ4について。bz2はsplittableだがCPUリソースを喰う。LZO,LZ4はCPUリソース当たりの圧縮効率が良いがindex作成、専用ツールの使用などhadoop内ルールなガラパゴス要素がある。
HHR のブックマーク 2021/05/24 18:03
このブックマークにはスターがありません。
最初のスターをつけてみよう!
Best splittable compression for Hadoop input = bz2?
stackoverflow.com2013/06/18
We've realized a bit too late that archiving our files in GZip format for Hadoop processing isn't such a great idea. GZip isn't splittable, and for reference, here are the problems which I won't re...
3 人がブックマーク・2 件のコメント
\ コメントが サクサク読める アプリです /