Apache-pig-strsplittobag

提供:Dev Guides
移動先:案内検索

Apache Pig-STRSPLITTOBAG()

この関数は、* STRSPLIT()*関数に似ています。 文字列を指定された区切り文字で分割し、結果をバッグに返します。

構文

  • STRSPLITTOBAG()の構文は次のとおりです。 この関数は、分割が必要な文字列、正規表現、および制限(文字列を分割する部分文字列の数)を指定する整数値を受け入れます。 この関数は文字列を解析し、指定された正規表現に遭遇すると、文字列を *n 個のサブストリングに分割します。 nlimit に渡される値です。
grunt> STRSPLITTOBAG(string, regex, limit)

次に示すように、 HDFS ディレクトリ /pig_data/emp.txt という名前のファイルがあると仮定します。 このファイルには、ID、名前、年齢、市などの従業員の詳細が含まれています。

*emp.txt*
001,Robin_Smith,22,newyork
002,BOB_Wilson,23,Kolkata
003,Maya_Reddy,23,Tokyo
004,Sara_Jain,25,London
005,David_Miller,23,Bhuwaneshwar
006,Maggy_Moore,22,Chennai
007,Robert_Scott,22,newyork
008,Syam_Ketavarapu,23,Kolkata
009,Mary_Carter,25,Tokyo
010,Saran_Naidu,25,London
011,Stacy_Green,25,Bhuwaneshwar
012,Kelly_Moore,22,Chennai

そして、以下に示すように、このファイルを emp_data という名前の関係でPigにロードしました。

grunt> emp_data = LOAD 'hdfs://localhost:9000/pig_data/emp.txt' USING PigStorage(',')
   as (id:int, name:chararray, age:int, city:chararray);

以下は* STRSPLITTOBAG()関数の例です。 emp.txtファイルを見ると、 *name 列に、従業員の名前と姓がdelemeter *“ _” *で区切られていることがわかります。

この例では、従業員の名前と姓を分割し、* STRSPLITTOBAG()*関数を使用してバッグに結果を取得しようとしています。

grunt> strsplittobag_data = FOREACH emp_data GENERATE (id,name), STRSPLITTOBAG (name,'_',2);

ステートメントの結果は、 strsplittobag_data という名前のリレーションに保存されます。 以下に示すようにDump演算子を使用して、リレーション strsplittobag_data の内容を確認します。

grunt> Dump strsplittobag_data;

((1,Robin_Smith),{(Robin),(Smith)})
((2,BOB_Wilson),{(BOB),(Wilson)})
((3,Maya_Reddy),{(Maya),(Reddy)})
((4,Sara_Jain),{(Sara),(Jain)})
((5,David_Miller),{(David),(Miller)})
((6,Maggy_Moore),{(Maggy),(Moore)})
((7,Robert_Scott),{(Robert),(Scott)})
((8,Syam_Ketavarapu),{(Syam),(Ketavarapu)})
((9,Mary_Carter),{(Mary),(Carter)})
((10,Saran_Naidu),{(Saran),(Naidu)})
((11,Stacy_Green),{(Stacy),(Green)})
((12,Kelly_Moore),{(Kelly),(Moore)})