IT | デバッグライフ

Sqoop import failed because of error “Make sure HIVE_CONF_DIR is set correctly”

Sqoop Import failed after CDH upgrading Hadoop環境をCDH5.3.xから5.7.xへアップグレードするとsqoopは1.4.5から1.4.6になったが、sqoop importを実行しようとした...

2016.08.06 2016.11.08

byebyehaikikyou 0

hadoop

Parse error can be caused due to NUL character included in records with Sqoop

Sqoopを使ってRDBMとHadoop間でデータ転送を行なっている。Sqoopは、MapReduceジョブを実行し複数のMapタスクで並列にインポートやエクスポートを行なう。また、Sqoopはコマンドラインからsqoopコマンドを実行する...

2016.07.18

byebyehaikikyou 0

hadoop

Install Cloudera Manager with Ansible

Cloudera Managerを使って本番用のHadoopクラスタ環境を構築して運用している。アップデート時など調査・検証のためテスト環境を度々繰り返し構築しなおすことがあるため、ある程度構築を自動化しておきたいと思い、今回Ansible...

2016.07.03 2016.11.28

byebyehaikikyou 0

ansible

AnsibleのplaybookをVagrantでテストする

AnsibleのplaybookをテストをするのにVagrantで構築した仮想マシンを使っている。VagrantではProvisionerとしてAnsibleが利用可能であり以下のようにすればvagrant upでAnsibleのplayb...

2016.06.23 2016.11.28

byebyehaikikyou 0

ansible

JNIメモ１

Impalaという分散クエリエンジンを使っていてImpaladが突然JVMのSIGSEGVで異常終了してしまうことがありソースを追いかけている。ソースを読んでいるとJNI経由でC++の世界とJavaの世界との連携を行なっている部分があり、J...

2016.06.16 2016.06.19

byebyehaikikyou 0

java

Mark up articles with structured data

最近Wordpressのテーマを久しぶりに書いてみたのですが、Googleウェブマスターツールで構造化データのErrorやWarningが検出されてしまいました。。構造化データについては、scheme.orgのBlogPostingというタ...

2016.06.10 2016.06.12

byebyehaikikyou 0

html

Building OpenJDK9 on Mac

Javaをデバッグ実行したくOpenJDKをmac上でビルドした時のメモ。僕の環境は以下の通り。ビルド環境 OS X EL Captain 10.11.5 XCode7.3.1 JDK1.8.0_77 OpenJDK9 ビルド OpenJ...

2016.06.06 2016.11.30

byebyehaikikyou 0

java

WordPressのテーマ(Eccentric)を書いてみました

Stingerを使わさせていただいていたのですが、色々とカスタマイズしたくなり勢い余って久しぶりにWordPressのテーマを書いてみました。 Bootstrapベースのシンプルなテーマです。このサイトで使っているテーマです。もし興味がある...

2016.06.01

byebyehaikikyou 0

wordpress

BatsでシェルスクリプトやCLIプログラムのテストをする

恥ずかしながら今まではシェルスクリプトで書いたプログラムのテストをするときは、echoやprint、-xオプションを駆使して行なっていたのですが、Batsというテストフレームワークがあることを知り早速使ってみました。 2017.9.7修正 ...

2016.05.08 2018.07.04

byebyehaikikyou 1

シェルスクリプト

MacでH8-3067マイコンのクロスコンパイラ環境を構築してLEDを点灯させる

少し前にlittleBitsのArduino Coding Kitを使ったハンズオンセミナーに参加してきたのですが、そのハンズオンでの楽しさと最近のIoTの盛り上がりに触発されたこともあって、随分前に購入して棚の奥で眠っていたH8-3067...

2016.05.06

byebyehaikikyou 0

マイコン

wordpress

stinger7でTOC+を入れた時に目次の表示制御で画面スクロールしてしまう

stinger7のテーマを利用させていただいていますが，Table of Contents Plus（TOC+）プラグインを入れて目次が表示された時，Show/Hideの制御でページがスクロールしてしまうことがありました。

2016.03.30

byebyehaikikyou 0

wordpress

Railsのルーティングを理解する

railsのルーティング周りについて、自分自身がルーティング設定をする時に迷わないようにするため、また内部でどのような処理がされているのかをイメージしながら設定を書けるようになるため、調べた内容をまとめてみる。最初は、ネストしたルーティン...

2016.03.29 2016.11.26

byebyehaikikyou 1

rails

wordpress

Stinger7のフッターを３カラムにする

Stinger7テンプレートを使っていて、フッターを３カラム表示にしたいと思い対応した時の方法をご紹介します。編集したのは以下の３ファイルです。 functions.php style.css footer.php 修正する前には、くれぐ...

2016.03.25 2016.12.15

byebyehaikikyou 0

wordpress

『IoT初心者向けハンズオン！ Milkcocoa Meetup』に参加してきた

普段はWebアプリケーション開発が中心で、あまりIoTと言われる世界で引用されるような小型デバイスに触れる機会はなかったので、とてもいい刺激になりました。

2016.03.24

byebyehaikikyou 0

IoT