タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

serverとpythonに関するya_yoheiのブックマーク (1)

  • HiveServerを使用してPythonやPerlからHiveQLを実行する - たごもりすメモ

    HiveServerはThriftプロトコルをしゃべる*1ので、おなじくThriftで接続すると任意のクエリを発行できたりして大変便利。ということで、やったので、そのメモ。 準備 まずHiveServerだけど、hiveコマンドを叩いてクエリが実行できる状態なら以下のコマンドで起動する。*2 $ hive --service hiveserver ただしあらゆるデータ投入などをThrift経由でやるのは正直めんどくさい。hiveと叩けば起動するHive CLIでもデータ操作はしたい。なので conf/hive-default.xml にMetastoreの設定をする。今回は手元のMySQLに hive データベースを作り、それを使うようにした。このあたりが大変参考になった。 HiveのmetastoreをMySQLを使ってLocal Metastore形式で利用する - blog.kats

    HiveServerを使用してPythonやPerlからHiveQLを実行する - たごもりすメモ
  • 1