Apache-pig-strsplit

提供:Dev Guides
移動先:案内検索

Apache Pig-STRSPLIT()

この関数は、特定の区切り文字で特定の文字列を分割するために使用されます。

構文

  • STRSPLIT()の構文は次のとおりです。 この関数は、分割が必要な文字列、正規表現、および制限(文字列を分割する部分文字列の数)を指定する整数値を受け入れます。 この関数は、文字列を解析し、指定された正規表現に遭遇すると、文字列を *n 個の部分文字列に分割します。 nlimit に渡される値です。
grunt> STRSPLIT(string, regex, limit)

次に示すように、 HDFS ディレクトリ /pig_data/emp.txt という名前のファイルがあると仮定します。 このファイルには、ID、名前、年齢、市などの従業員の詳細が含まれています。

*emp.txt*
001,Robin_Smith,22,newyork
002,BOB_Wilson,23,Kolkata
003,Maya_Reddy,23,Tokyo
004,Sara_Jain,25,London
005,David_Miller,23,Bhuwaneshwar
006,Maggy_Moore,22,Chennai
007,Robert_Scott,22,newyork
008,Syam_Ketavarapu,23,Kolkata
009,Mary_Carter,25,Tokyo
010,Saran_Naidu,25,London
011,Stacy_Green,25,Bhuwaneshwar
012,Kelly_Moore,22,Chennai

そして、以下に示すように、このファイルを emp_data という名前の関係でPigにロードしました。

grunt> emp_data = LOAD 'hdfs://localhost:9000/pig_data/emp.txt' USING PigStorage(',')
   as (id:int, name:chararray, age:int, city:chararray);

以下は* STRSPLIT()関数の例です。 emp.txtファイルを見ると、 *name 列に、従業員の名前と姓がdelemeter '_' で区切られていることがわかります。

この例では、* STRSPLIT()*関数を使用して従業員の名前と姓を分割しようとしています。

grunt> strsplit_data = FOREACH emp_data GENERATE (id,name), STRSPLIT (name,'_',2);

ステートメントの結果は、strsplit_dataという名前のリレーションに保存されます。 以下に示すように、ダンプ演算子を使用して、リレーション strsplit_data の内容を確認します。

grunt> Dump strsplit_data;

((1,Robin_Smith),(Robin,Smith))
((2,BOB_Wilson),(BOB,Wilson))
((3,Maya_Reddy),(Maya,Reddy))
((4,Sara_Jain),(Sara,Jain))
((5,David_Miller),(David,Miller))
((6,Maggy_Moore),(Maggy,Moore))
((7,Robert_Scott),(Robert,Scott))
((8,Syam_Ketavarapu),(Syam,Ketavarapu))
((9,Mary_Carter),(Mary,Carter))
((10,Saran_Naidu),(Saran,Naidu))
((11,Stacy_Green),(Stacy,Green))
((12,Kelly_Moore),(Kelly,Moore))