ブタにネストされた関係のすべての列を投影する

Question

ブタにネストされた関係のすべての列を投影する

私は、XとYの結合の結果である関係MY_RELを持っています：

MY_REL = {X::x1,X::x2,Y::y1,Y::y2}

そして私はやろうとした

Bla =       foreach MY_REL generate X;

嘔吐した豚：

ERROR 1000: Error during parsing. Scalars can be only used with projections

私はXを試しました:: *とそれをスロー：無効なエイリアスX.

醜い回避策：すべての列名を明示的に書くことに切り替えました。

Bla =       foreach MY_REL generate X::x1, X::x2;

すべてのXの列を生成する良い方法はありますか？

2

追加された 06 2月 2012 〜で 04:43 著者 ihadanny

ビュー: 3

源

ru fr es pt de ar

2 答え

JOIN を使用する代わりに、 COGROUP COGROUP は、 {X：{x1、x2}、Y：{y1、y2}} のような関係を作成します。したがって、次のことができます。

foreach MY_REL GENERATE FLATTEN(X);

それはそこにあるバッグなので、平坦化する必要があることに注意してください。

3

追加された 10 2月 2012 〜で 01:30 著者 Donald Miner

源

後で X のサイズが0より大きいところで FILTER をフィルタすると、 COGROUP に置き換えることができます。

追加された 12 2月 2012 〜で 03:34, 著者 Donald Miner, 源

創造的な考え！しかし、この関係を作成したのはLEFT結合なので、COGROUPに置き換えることはできませんね。

追加された 12 2月 2012 〜で 09:58, 著者 ihadanny, 源

魅力的に働いた。 PIGが JOIN / COGROUP を実行したときに、ファイルAからすべての行をグループ化してjoin-key =ガガ。ファイルAから2行、Bから3行、Aから0行、Bから0行があるかどうかは関係ありません。これはSQLの人々が<コード> FULL OUTER JOIN と呼ぶものです。 COGROUP を尋ねるなら、これで終わりです。 JOIN を尋ねると、PIGはファイルの1つに0行のグループをフィルタリングします。

追加された 15 2月 2012 〜で 10:07, 著者 ihadanny, 源

著者 Romain · Answer 1 · 2012-02-10T11:24Z

JOINの前の列の名前がすべて異なる場合は、後でそのまま使用できます。

Bla =       foreach MY_REL generate x1 + y1, x2 + y2;

1つの競合がある場合は、元の接頭辞関係を使用する必要があります

Bla =       foreach MY_REL generate x1, x2, y1, Y:y1 AS y2;

An with the new Pig range PIG-1693

Bla =       foreach MY_REL generate ..$2, $3 AS y2;

And there is also some talks in PIG-2511