Pig | うーたまっくす

CodeColorer に Pig スクリプト追加

2013年3月26日 2013年3月26日Hadoop, WordPress 0

WordPress でソースコードを記述する時にハイライト表示プラグイン使いますよね。例えば、SyntaxHighliter とか。今回は CodeColorer の Pig 対応を。 CodeColerer Plug…

2013年2月18日 2013年9月26日Hadoop 0

Oracle や PostgreSQL に入っている Row Number 関数。 Pig でも使いたいけど、UDF 書かないといけないのよね。と思っていたら、こちらのサイトにソースが落っこちていた

2013年2月17日 2013年9月26日Hadoop 0

使用した環境は CentOS 使った HBase は yum でインストールした cdh3u5 のやつそしてそれに付属する hadoop で 5 つマシン、myhost01 – myhost05 で Clu…

2012年9月11日 2013年9月26日Hadoop, Programming 0

pig で URL デコードをしたくなる場合ありますよね。最初に簡単な pig の Dynamic Invokers を使って URL デコードをしようと考えましたしかし、なぜか Shift_JIS の時だけ上手く動…

2012年8月29日 2013年9月26日Hadoop 0

Pig で関数にセミコロン使いたい時にエラーになる場合ありますよね。 REGEX_EXTRACT_ALL() や STRSPLIT() 使うときに。私も相当悩みました・・・。下記の URL が参考になります。 pig…

2012年6月15日 2013年9月26日Hadoop, Linux 0

Hadoop を業務上使う必要があるんだけど、その中でハマったこと。 Hive とかあるけど、業務で使っているのは Pig の 0.8.1。その中で SUBSTRING でハマった。いつも PHP を使っていたためか…