2011年1月10日月曜日

H2 DatabaseとHadoopでHDFS上のパスの変更日時・アクセス日時を設定する関数を作成する

H2 DatabaseとHadoopでHDFS上のパスの変更日時・アクセス日時を設定する関数を作成するには、以下のスクリプトを実行します。

create alias if not exists hdfs_set_times as $$ 
import java.io.*;
import java.util.*;
import java.sql.*;
import org.h2.tools.*;
import org.apache.hadoop.conf.*;
import org.apache.hadoop.fs.*;
import org.apache.hadoop.fs.permission.*;
import java.net.*;
@CODE
Boolean hdfs_set_times(String uri, String user,
String path, Timestamp mtime,
Timestamp atime)
throws Exception
{
if( uri == null ){
throw new Exception("uri is not specified.");
}
if( user == null ){
throw new Exception("user is not specified.");
}
if( path == null ){
throw new Exception("path is not specified.");
}
if( mtime == null ){
throw new Exception("modification time is not specified.");
}
if( atime == null ){
throw new Exception("access time is not specified.");
}

FileSystem fs = FileSystem.get(
URI.create(uri), new Configuration(), user);

fs.setTimes(new Path(path), mtime.getTime(), atime.getTime());
return new Boolean(true);
}
$$


実行例
select 
hdfs_set_times('hdfs://192.168.1.81:9000/', 'hadoop',
'/opt/hadoop-data/test.txt', current_timestamp,
current_timestamp)
;


※以下のjarをCLASSPATH環境変数に追加
hadoop-common-0.21.0.jar
hadoop-hdfs-0.21.0.jar
log4j-1.2.15.jar

動作環境
JDK6 Update22, Hadoop 0.21.0, H2 Database 1.2.147 (2010-11-21)

○関連情報
・CentOS5.5にHadoop0.21.0をインストールする
http://serverarekore.blogspot.com/2010/10/centos55hadoop0210.html
・H2 Databaseに関する他の記事はこちらを参照してください。

0 件のコメント:

コメントを投稿