lateral view 和 lateral view outer的区别

article/2025/8/25 19:29:55

lateral view 为侧视图,一般用于行转列的处理中 通常会与explode 搭配使用

1、explode 可以拆分map or array 

示例

select explode(split("1,2,3",','))

结果

1
2
3

explode 不适用于多个字段 其中一个字段需要炸开的场景,此时需要搭配lateral view

2、lateral view explode

示例:

原始数据

namegoodsorder
abook,food1,2
bcomputer,pingpong ball2,3
select  name,goods1,order1
from 
(
select 'a' name,'book,food' as goods,'1,2' as order
union all 
select 'b' name,'book,food' as goods,'1,2' as order
)a 
lateral view explode(split(goods, ',')) t_course as goods1
lateral view explode(split(order, ',')) t_hobby as order1

结果

namegoods1order1
abook1
abook2
afood1
afood2
bcomputer2
bcomputer3
bpingpong ball2
bpingpong ball3

当name = a goods = null 时结果如下:会发现name=a的都被过滤掉了,如果需要展示name=a的数据则需要 加outer来解决,具体见下一节的内容

namegoods1order1
bcomputer2
bcomputer3
bpingpong ball2
bpingpong ball3

3、lateral view outer 

假设需要炸开的字段 数组为空,此时使用lateral view 去炸开的时候 会得到结果为null,没有数据,此时需要使用outer字段 才可以正常展示数据。

原因在于:

lateral view ,原理是如果被炸开的字段为null 直接返回null 

lateral view outer 则会保留原始的数据,并将炸开的列置为null 

以上述图表为例lateral view 类似为 inner join 约为 :

由图可以看出 当goods 或者order 为空数组时 结果会为null 

 而 lateral view outer 则类似与 outer join 

 当goods 为null 时 炸开的列 会填充为null ,不会丢失原始被筛选出来的列

但实际上lateral view不会产生shuffle,实际是拼接字符串

所以当数据出现的结果 与预期不一致的时候 可以排查一下 炸开的字段里面是否有空数组,做好数据探查,明确用户真实想要的结果是什么

 


http://chatgpt.dhexx.cn/article/wuyISyBg.shtml

相关文章

left join和left outer join 有什么区别?这样解释通俗易懂

作为一名java程序员,求职面试时也会遇到mysql问题,有次我到一家软件面试,就遇到有一道笔试题是考核关于sql 的。 left join和left outer join 有什么区别? 关于left join我平时编写sql表关联时用得比较多,但对于left o…

Oracle 数据库中 FULL OUTER JOIN 的作用 ?

当需要同时显示两个表中所有记录时,FULL OUTER JOIN 就非常有用。 FULL OUTER JOIN 返回左表(Table A)和右表(Table B)的所有行,并且如果左表或右表中没有匹配的行,则使用 NULL 值填充缺失的部分…

四种连接类型:inner(内连接),left[outer](左外连接),right[outer](右外连接),full[outer](完全外连接)

在from子句中表示连接操作有四种:inner(内连接),left[outer](左外连接),right[outer](右外连接),full[outer](完全外连接)。 一、理论…

内连接(inner join)与外连接(outer join)小结

转载自 : 内连接(inner join)与外连接(outer join)小结_蝉 沐 风的博客-CSDN博客_inner join mySQL包含两种联接,分别是内连接(inner join)和外连接(out join),但我们又同时听说过左连接,交叉连接等术语,本文旨在总结这…

np.dot、np.outer、np.matmul、np.multipy、np.inner、np.outer与np.cross几个函数之间的区别

np.dot、np.outer、np.matmul、np.multipy、np.inner、np.outer与np.cross几个函数之间的区别 一、数学上关于【内积】、【外积】的定义和计算1.1 数学上关于【内积/数量积】的定义和计算1.2 数学上关于【外积/叉积】的定义和计算 二、numpy中关于np.dot、np.outer、np.matmul、…

R语言 作图 outer()函数

outer()函数: outer(x,y,func):数组x与y的outer()函数会产生一个二维数组A,它的形状是 c(dim(x),dim(y)).A中对应元素A[x.index,y.index] func(x.index,y.index) outer(x,y):默认为两向量外积,即outer(x,y,x*y) x (x1,x2,x3),y (y1,y2,y3) #绘制曲…

[SPI]SPI协议详解

1.SPI协议简介 1.1.SPI协议概括 SPI,是英语Serial Peripheral interface的缩写,顾名思义就是串行外围设备接口。是Motorola首先在其MC68HCXX系列处理器上定义的。SPI接口主要应用在 EEPROM,FLASH,实时时钟,AD转换器&a…

【FPGA】SPI协议

1.SPI简介 SPI(Serial Perripheral Interface, 串行外围设备接口)是 Motorola 公司推出的一种同步串行接口技术。SPI 总线在物理上是通过接在外围设备微控制器(PICmicro) 上面的微处理控制单元 (MCU) 上叫作同步串行端口(Synchronous Serial Port) 的模块(Module)来实现的, 它…

SPI接口协议详解

一、SPI总线简介 SPI总线是摩托罗拉公司开发的一种高速、全双工、同步的通信总线,它通常由四条线组成: CS 片选信号SCLK 时钟信号MOSI 主机输出从机输入接口MISO 主机输入从机输出接口 SPI分为主机和从机,主机提供通信所需的时钟信号。 二…

SPI通信协议

串行外设接口(SPIV3)模块描述 1.1简介 SPI组件允许MCU与外设之间进行同步串行通信。软件可以轮询SPI状态标识或可以中断驱动的SPI操作。 1.1.1特性 SPIV3包含以下特性: 主模式与从模式准模式从选择输出带有CPU中断能力的模式故障标识位双…

SPI协议解析

SPI协议解析 概述接口SPI四种通信模式示例最后 概述 SPI是串行外设接口(Serial Peripheral Interface)的缩写,是一种高速的,全双工,同步的通信总线,并且在芯片的管脚上只占用四根线,节约了芯片…

SPI协议详解(工作特点、时序图)

文章目录 一、SPI总线介绍1.1.SPI信号列表1.2.SPI工作模式1.3.SPI特点——同步、串行、全双工、主从结构 二、SPI传输时序2.1.时钟极性CPOL与时钟相位CPHA2.2.时序图2.3.SPI配置信息2.4.SPI数据交换过程 一、SPI总线介绍 SPI,是英语Serial Peripheral interface的缩…

SPI 通讯协议

Cuitbasics 汽车ECU设计 2/2 当您将微控制器连接到传感器,显示器或其他模块时,您是否考虑过这两种设备是如何相互通信的?他们到底在说什么? 事实上电子设备之间的通信就像人类之间的交流,双方都需要说相同的语言。在电…

SPI学习(三):SPI协议波形

写在前面:上一小节介绍了SPI的基本工作原理与极性相位等知识,这一小结介绍波形 由于我实际用到的IP是ARM PrimeCell SSP(PL022),所以会以这个IP为主,也会对比《SPI Block Guide V04.01》 一.PL022支持的三种帧格式介绍 一共有三种帧格式可…

SPI协议介绍

文章目录 1- SPI协议介绍2- SPI总线传输模式3- SPI总线数据交换3- SPI与I2C对比 1- SPI协议介绍 SPI(Serial Peripheral Interface)是一种高速全双工同步串行通信协议,它由一个主设备(Master)和一个或多个从设备(Slave)组成,其中…

【数字IC】深入浅出理解SPI协议

深入浅出理解SPI协议 一、什么是SPI协议二、什么是全双工通信协议三、SPI的信号线四、SPI的连接方式4.1 多NSS形式4.2 菊花链形式 五、SPI可配置变量5.1 时钟极性(CPOL)5.2 时钟相位(CPHA)5.3 CPOL和CPHA组合出四种情况5.4数据大小…

通信协议(二)——SPI协议

1、基础知识 1.1 概念 SPI(Serial Peripheral Interface,串行外围设备接口),是Motorola公司提出的一种同步串行接口技术,是一种高速、全双工、同步通信总线,在芯片中只占用四根管脚用来控制及数据传输&am…

SPI协议代码

软件模拟SPI程序代码 文章目录 SPI协议简介●SPI接口介绍●SPI数据传输方向●SPI传输模式 通过两个单片机模拟SPI来加深理解※硬件连接方式✯SPI模式✯程序思路✯主机C代码波形✯从机C代码波形 概述:    通过两个MCU(STM32F103)来模拟SPI…

SPI协议讲解与总结

1.SPI通讯协议 SPI是串行外设接口(Serial Peripheral Interface)的缩写,是一种高速的,全双工,同步的通信总线 1.1 SPI引脚与工作过程 SPI的通信原理很简单,它以主从方式工作,这种模式通常有一…

【STM32】SPI协议通信详解

目录 一.SPI协议简介二.SPI物理层三.SPI协议层 1.通讯的起始和停止信号2.数据有效性3.时钟信号的相位和极性(重点) 四.SPI 特性及架构(重点) 1.通信引脚2.时钟控制逻辑3.数据控制逻辑(非常重要)4.全双工发…