1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
---
source: src/client/src/tests/mod.rs
expression: displayable.tree_render().to_string()
---
┌───────────────────────────┐
│ SortPreservingMergeExec │
│ -------------------- │
│ s_acctbal DESC, n_name ASC│
│ NULLS LAST, s_name ASC │
│ NULLS LAST, p_partkey │
│ ASC NULLS LAST │
└─────────────┬─────────────┘
┌─────────────┴─────────────┐
│ SortExec │
│ -------------------- │
│ s_acctbal@0 DESC, n_name@2│
│ ASC NULLS LAST, s_name@1 │
│ ASC NULLS LAST, │
│ p_partkey@3 ASC │
│ NULLS LAST │
└─────────────┬─────────────┘
┌─────────────┴─────────────┐
│ ProjectionExec │
│ -------------------- │
│ n_name: n_name │
│ p_mfgr: p_mfgr │
│ p_partkey: p_partkey │
│ s_acctbal: s_acctbal │
│ s_address: s_address │
│ s_comment: s_comment │
│ s_name: s_name │
│ s_phone: s_phone │
└─────────────┬─────────────┘
┌─────────────┴─────────────┐
│ CoalesceBatchesExec │
│ -------------------- │
│ target_batch_size: │
│ 16384 │
└─────────────┬─────────────┘
┌─────────────┴─────────────┐
│ HashJoinExec │
│ -------------------- │
│ on: │
│ (p_partkey = ps_partkey), │
│ (ps_supplycost = min ├──────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┐
│ (partsupp │ │
│ .ps_supplycost │ │
│ )) │ │
└─────────────┬─────────────┘ │
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ CoalescePartitionsExec │ │ ProjectionExec │
│ │ │ -------------------- │
│ │ │ min(partsupp.ps_supplycost│
│ │ │ ): │
│ │ │min(partsupp.ps_supplycost)│
│ │ │ │
│ │ │ ps_partkey: │
│ │ │ ps_partkey │
└─────────────┬─────────────┘ └─────────────┬─────────────┘
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ CoalesceBatchesExec │ │ AggregateExec │
│ -------------------- │ │ -------------------- │
│ target_batch_size: │ │ aggr: │
│ 16384 │ │min(partsupp.ps_supplycost)│
│ │ │ │
│ │ │ group_by: ps_partkey │
│ │ │ │
│ │ │ mode: │
│ │ │ FinalPartitioned │
└─────────────┬─────────────┘ └─────────────┬─────────────┘
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ HashJoinExec │ │ CoalesceBatchesExec │
│ -------------------- │ │ -------------------- │
│ on: ├──────────────┐ │ target_batch_size: │
│(r_regionkey = n_regionkey)│ │ │ 16384 │
└─────────────┬─────────────┘ │ └─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ LiquidCacheClientExec ││ ProjectionExec │ │ RepartitionExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ server: ││ n_name: n_name │ │ partition_count(in->out): │
│ http://localhost:50051, ││ │ │ 8 -> 8 │
│ object_stores=[] ││ n_regionkey: │ │ │
│ ││ n_regionkey │ │ partitioning_scheme: │
│ ││ │ │ Hash([ps_partkey@0], 8) │
│ ││ p_mfgr: p_mfgr │ │ │
│ ││ p_partkey: p_partkey │ │ │
│ ││ │ │ │
│ ││ ps_supplycost: │ │ │
│ ││ ps_supplycost │ │ │
│ ││ │ │ │
│ ││ s_acctbal: s_acctbal │ │ │
│ ││ s_address: s_address │ │ │
│ ││ s_comment: s_comment │ │ │
│ ││ s_name: s_name │ │ │
│ ││ s_phone: s_phone │ │ │
└─────────────┬─────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ DataSourceExec ││ CoalesceBatchesExec │ │ AggregateExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ files: 1 ││ target_batch_size: │ │ aggr: │
│ format: parquet ││ 16384 │ │min(partsupp.ps_supplycost)│
│ ││ │ │ │
│ predicate: ││ │ │ group_by: ps_partkey │
│ r_name = EUROPE ││ │ │ mode: Partial │
└───────────────────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ HashJoinExec │ │ CoalesceBatchesExec │
│ -------------------- │ │ -------------------- │
│ on: ├──────────────┐ │ target_batch_size: │
│(n_nationkey = s_nationkey)│ │ │ 16384 │
└─────────────┬─────────────┘ │ └─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ LiquidCacheClientExec ││ ProjectionExec │ │ HashJoinExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ server: ││ p_mfgr: p_mfgr │ │ on: │
│ http://localhost:50051, ││ p_partkey: p_partkey │ │(r_regionkey = n_regionkey)│
│ object_stores=[] ││ │ │ │
│ ││ ps_supplycost: │ │ │
│ ││ ps_supplycost │ │ │
│ ││ │ │ │
│ ││ s_acctbal: s_acctbal │ │ ├──────────────┐
│ ││ s_address: s_address │ │ │ │
│ ││ s_comment: s_comment │ │ │ │
│ ││ s_name: s_name │ │ │ │
│ ││ │ │ │ │
│ ││ s_nationkey: │ │ │ │
│ ││ s_nationkey │ │ │ │
│ ││ │ │ │ │
│ ││ s_phone: s_phone │ │ │ │
└─────────────┬─────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘ │
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ DataSourceExec ││ CoalesceBatchesExec │ │ LiquidCacheClientExec ││ ProjectionExec │
│ -------------------- ││ -------------------- │ │ -------------------- ││ -------------------- │
│ files: 1 ││ target_batch_size: │ │ server: ││ n_regionkey: │
│ format: parquet ││ 16384 │ │ http://localhost:50051, ││ n_regionkey │
│ predicate: true ││ │ │ object_stores=[] ││ │
│ ││ │ │ ││ ps_partkey: │
│ ││ │ │ ││ ps_partkey │
│ ││ │ │ ││ │
│ ││ │ │ ││ ps_supplycost: │
│ ││ │ │ ││ ps_supplycost │
└───────────────────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘└─────────────┬─────────────┘
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ HashJoinExec │ │ DataSourceExec ││ CoalesceBatchesExec │
│ -------------------- │ │ -------------------- ││ -------------------- │
│ on: │ │ files: 1 ││ target_batch_size: │
│ (s_suppkey = ps_suppkey) ├──────────────┐ │ format: parquet ││ 16384 │
│ │ │ │ ││ │
│ │ │ │ predicate: ││ │
│ │ │ │ r_name = EUROPE ││ │
└─────────────┬─────────────┘ │ └───────────────────────────┘└─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ LiquidCacheClientExec ││ RepartitionExec │ │ HashJoinExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ server: ││ partition_count(in->out): │ │ on: │
│ http://localhost:50051, ││ 1 -> 8 │ │(n_nationkey = s_nationkey)├──────────────┐
│ object_stores=[] ││ │ │ │ │
│ ││ partitioning_scheme: │ │ │ │
│ ││ RoundRobinBatch(8) │ │ │ │
└─────────────┬─────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘ │
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ DataSourceExec ││ CoalesceBatchesExec │ │ LiquidCacheClientExec ││ RepartitionExec │
│ -------------------- ││ -------------------- │ │ -------------------- ││ -------------------- │
│ files: 1 ││ target_batch_size: │ │ server: ││ partition_count(in->out): │
│ format: parquet ││ 16384 │ │ http://localhost:50051, ││ 1 -> 8 │
│ predicate: true ││ │ │ object_stores=[] ││ │
│ ││ │ │ ││ partitioning_scheme: │
│ ││ │ │ ││ RoundRobinBatch(8) │
└───────────────────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘└─────────────┬─────────────┘
┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ HashJoinExec │ │ DataSourceExec ││ ProjectionExec │
│ -------------------- │ │ -------------------- ││ -------------------- │
│ on: │ │ files: 1 ││ ps_partkey: │
│ (p_partkey = ps_partkey) │ │ format: parquet ││ ps_partkey │
│ │ │ predicate: true ││ │
│ ├──────────────┐ │ ││ ps_supplycost: │
│ │ │ │ ││ ps_supplycost │
│ │ │ │ ││ │
│ │ │ │ ││ s_nationkey: │
│ │ │ │ ││ s_nationkey │
└─────────────┬─────────────┘ │ └───────────────────────────┘└─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ LiquidCacheClientExec ││ LiquidCacheClientExec │ │ CoalesceBatchesExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ server: ││ server: │ │ target_batch_size: │
│ http://localhost:50051, ││ http://localhost:50051, │ │ 16384 │
│ object_stores=[] ││ object_stores=[] │ │ │
└─────────────┬─────────────┘└─────────────┬─────────────┘ └─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐ ┌─────────────┴─────────────┐
│ DataSourceExec ││ DataSourceExec │ │ HashJoinExec │
│ -------------------- ││ -------------------- │ │ -------------------- │
│ files: 1 ││ files: 1 │ │ on: │
│ format: parquet ││ format: parquet │ │ (s_suppkey = ps_suppkey) │
│ ││ │ │ ├──────────────┐
│ predicate: ││ predicate: │ │ │ │
│ p_size = 15 AND p_type ││ true AND true │ │ │ │
│ LIKE %BRASS ││ │ │ │ │
└───────────────────────────┘└───────────────────────────┘ └─────────────┬─────────────┘ │
┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ LiquidCacheClientExec ││ LiquidCacheClientExec │
│ -------------------- ││ -------------------- │
│ server: ││ server: │
│ http://localhost:50051, ││ http://localhost:50051, │
│ object_stores=[] ││ object_stores=[] │
└─────────────┬─────────────┘└─────────────┬─────────────┘
┌─────────────┴─────────────┐┌─────────────┴─────────────┐
│ DataSourceExec ││ DataSourceExec │
│ -------------------- ││ -------------------- │
│ files: 1 ││ files: 1 │
│ format: parquet ││ format: parquet │
│ predicate: true ││ predicate: true │
└───────────────────────────┘└───────────────────────────┘