Apache Pig CONCAT()用法及代碼示例

這個CONCAT()Pig Latin 的函數用於連接兩個或多個相同類型的表達式。

用法

grunt> CONCAT (expression, expression, [...expression])

示例

假設我們有一個名為student_details.txt在 HDFS 目錄中/pig_data/如下所示。

student_details.txt

001,Rajiv,Reddy,21,9848022337,Hyderabad,89
002,siddarth,Battacharya,22,9848022338,Kolkata,78 
003,Rajesh,Khanna,22,9848022339,Delhi,90 
004,Preethi,Agarwal,21,9848022330,Pune,93 
005,Trupthi,Mohanthy,23,9848022336,Bhuwaneshwar,75 
006,Archana,Mishra,23,9848022335,Chennai,87 
007,Komal,Nayak,24,9848022334,trivendram,83 
008,Bharathi,Nambiayar,24,9848022333,Chennai,72

我們已經將此文件加載到 Pig 中，並使用關係名稱student_details如下所示。

grunt> student_details = LOAD 'hdfs://localhost:9000/pig_data/student_details.txt' USING PigStorage(',')
   as (id:int, firstname:chararray, lastname:chararray, age:int, phone:chararray, city:chararray, gpa:int);

連接兩個字符串

我們可以使用CONCAT()連接兩個或多個表達式的函數。首先驗證一下內容student_details使用轉儲運算符的關係，如下所示。

grunt> Dump student_details;
 
( 1,Rajiv,Reddy,21,9848022337,Hyderabad,89 ) 
( 2,siddarth,Battacharya,22,9848022338,Kolkata,78 )
( 3,Rajesh,Khanna,22,9848022339,Delhi,90 ) 
( 4,Preethi,Agarwal,21,9848022330,Pune,93 )
( 5,Trupthi,Mohanthy,23,9848022336,Bhuwaneshwar,75 )
( 6,Archana,Mishra,23,9848022335,Chennai,87 )
( 7,Komal,Nayak,24,9848022334,trivendram,83 )
( 8,Bharathi,Nambiayar,24,9848022333,Chennai,72 )

並且，使用驗證模式describe操作符如下圖。

grunt> Describe student_details;
  
student_details:{id:int, firstname:chararray, lastname:chararray, age:int,
   phone:chararray, city:chararray, gpa:int}

在上麵的模式中，您可以觀察到學生的姓名是使用兩個字符數組值表示的，即firstname和lastname.讓我們使用以下方法連接這兩個值CONCAT()函數。

grunt> student_name_concat = foreach student_details Generate CONCAT (firstname, lastname);

確認

驗證關係student_name_concat使用DUMP操作符如下圖。

grunt> Dump student_name_concat;

輸出

它將產生以下輸出，顯示關係的內容student_name_concat。

(RajivReddy) 
(siddarthBattacharya) 
(RajeshKhanna) 
(PreethiAgarwal) 
(TrupthiMohanthy) 
(ArchanaMishra) 
(KomalNayak) 
(BharathiNambiayar) 

我們還可以在兩個表達式之間使用可選的分隔符，如下所示。

grunt> CONCAT(firstname, '_',lastname);

現在，讓我們將學生記錄的名字和姓氏連接起來student_details放置關係‘_’如下圖所示。

grunt> student_name_concat = foreach student_details GENERATE CONCAT(firstname, '_',lastname);

確認

驗證關係student_name_concat使用DUMP操作符如下圖。

grunt> Dump student_name_concat;

輸出

它將產生以下輸出，顯示關係的內容student_name_concat如下。

(Rajiv_Reddy) 
(siddarth_Battacharya) 
(Rajesh_Khanna) 
(Preethi_Agarwal) 
(Trupthi_Mohanthy) 
(Archana_Mishra) 
(Komal_Nayak) 
(Bharathi_Nambiayar)