2016年10月1日 Use commons-dbutils with hive-jdbc hive-jdbcと一緒にcommons-dbutilsを使う場合。 環境 commons-dbutils 1.6 hi... カテゴリー hadoop Comments: 0
2016年10月1日 Suppress the message “Supplied authorities: …” org.apache.hive.jdbc.Utils#parseURL emits HiveServer2にJDBC経由で接続する際に、ログの設定によっては”Supplied authorities: .... カテゴリー hadoop Comments: 0
2016年8月6日 Sqoop import failed because of error “Make sure HIVE_CONF_DIR is set correctly” Sqoop Import failed after CDH upgrading Hadoop環境をCDH5.3.xから5... カテゴリー hadoop Comments: 0
2016年7月18日 Parse error can be caused due to NUL character included in records with Sqoop Sqoopを使ってRDBMとHadoop間でデータ転送を行なっている。Sqoopは、MapReduceジョブを実行し複数... カテゴリー hadoop Comments: 0
2015年12月27日 impalaでmrubyを動かす 以前impalaのudfについて調べていて、何か書いてみたいなと思っていた。最近、mysqlでmrubyを動かしている例... カテゴリー hadoop Comments: 0
2015年11月13日 Using UDF’s jar of Hive with Impala I tried to use UDF’s jar of Hive with Impala, but Clas... カテゴリー hadoop Comments: 0
2015年6月3日 Create file /tmp/impala-scratch/…. with errno=2 description=Error(2): No such file or directory impalaでクエリを実行すると,以下のようなエラーが出ることがある。 クエリはエラーになる。 Create file ... カテゴリー hadoop Comments: 0
2015年5月16日 Get corrupt file blocks returned error: Operation category READ is not supported in state standby Cloudera ManagerでNameNode HAしてから,以下のWARNメッセージがStandbyNameNod... カテゴリー hadoop Comments: 0
2015年4月22日 Hive Auto Convert Join これか!? CDHのバージョンを4.7から5.3.2に上げたときに,Hiveも0.13.1に上がり,オプションのデフォル... カテゴリー hadoop Comments: 0
2015年3月26日 Run query on HiveServer2 by thrift RBHiveクライアントを使ってHiveServer2経由でクエリを実行しようとしたところ,上手くいかずハマってしまった... カテゴリー hadoop Comments: 0
2015年3月16日 Upgrade Hue from 2.5 to 3.7 on upgrade CDH to 5 Cloudera Manager4から5へアップデートし,CDH4.7からCDH5.3.2へCMでアップデート。CMでア... カテゴリー hadoop Comments: 0
2014年7月19日 Sqoop1.x Import Process RDMBSからHDFSヘ一部のテーブルをインポートする必要があり、CLIベースのsqoop1.xを触っていたのでメモする... カテゴリー hadoop Comments: 0
2014年2月1日 Impala queries in Hue remain to be "in flight". 単純なログ検索しか行なっていないけれど,HueからImpalaクエリを実行して爆速!と喜んでいたのだが,クエリがCMのA... カテゴリー hadoop Comments: 0
2014年1月16日 Impalaのmetadataの更新 fluentdでHDFSへ書き込んだログをImpalaですぐに実行したい。 Impala1.2.Xで,Impalad,C... カテゴリー hadoop Comments: 0
2014年1月8日 Hue/Hiveにてデフォルトでクラスパスに追加されるjarを設定する Cloudera Managerを使ってHueをインストールして,SerDeありのテーブルを作成した際にMetastor... カテゴリー hadoop Comments: 0