字符在阿帕奇計數

Question

我有幾個文本文件，我正在計算所有這些文本文件合計在一起的字母。例如text1.txt包含「Stackoverflow非常酷」。我期待得到總字母數

Answer 1

將所有使用通配符*的文件加載到chararray類型的字段中。將該行分成單詞，然後分成字母和數字。

A = LOAD '/path/text*.txt' AS (lines:chararray); 
B = FOREACH A GENERATE FLATTEN(TOKENIZE(LOWER(lines))) AS words; 
C = FOREACH B GENERATE FLATTEN(TOKENIZE(REPLACE(words,'','|'), '|')) AS letters; 
D = GROUP C BY letters; 
E = FOREACH D GENERATE COUNT(C), group; 
DUMP E;