024- STM32学习笔记 - LTDC控制液晶屏
在学习如何控制液晶屏之前,先了解一下显示屏的分类,按照目前市场上存在的各种屏幕材质,主要分为CRT阴极射线管显示屏、LCD液晶显示屏、LED显示屏、OLED显示屏,在F429的开发板上,配套的是LCD液晶显示屏(分辨率800*480)。
LCD液晶显示屏,是通过给内部的液晶(一种介于液态与固态之间,但其分子排列和和固态晶体一样规则的有机化合物)施加电场,改变其分子排列,从而改变光线传播方向,配合前后两片偏振光片以及RGB滤光片,可以控制其颜色,再通过改变电压大小,控制透光率,从而改变颜色的深浅。每个RGB为一个像素点,很多个RGB通过组合后,可以组合出来很多种颜色。
LCD本身不发光,因此在LCD屏幕的背后都会有一块背光板(白光),而且因为液晶的特性,所以我们经常会看到因为存储液晶的容器一旦破裂,会出现漏液或者漏光的情况。LCD在颜色变幻时,因为液晶晶体转动需要消耗时间,因此我们会感觉到LCD屏幕的响应时间会比较慢。
剩下关于LED和OLED在这里就不做介绍了,有兴趣的可以去找一些相关资料看看。
一、显示器基本参数
这里关于显示器需要了解的点主要有以下几个:
1、像素:
像素是图像的最基本要素,也是显示器的最小显示单位(点)。
2、分辨率:
分辨率表示的是显示器上“行像素数 * 列像素数”,例如:1920*1080表示的是每行有1920个像素点,每列有1080个像素点,同样可以理解为一共有1920列,1080行,因此该显示器的总像素数就是1920 * 1080 = 2073600个像素点。
3、色彩深度:
这个参数很多人应该都没注意到,色彩深度指的是显示器的每个像素点能表示多少中颜色,比如路边商铺上常用的LED单色显示屏来说,单色屏的每个像素点只有亮或灭两种状态,因此只需要一个数据位就可以表示其所有状态,所以单色屏的色彩深度为1bit,其余我们见到的彩色显示屏的深度一般为16bit、24bit。
4、显示器尺寸:
显示器尺寸大小以寸(英寸)为单位表示,如:3.7寸、7寸、32寸等,是屏幕对角线的长度,对角线的长度结合屏幕的长宽比(例如16:9)就可以确定显示器的具体长度和宽度了。
5、点距:
点距表示的是两个相邻像素点之间的间距,在相同尺寸的屏幕下,点距越小,屏幕的分辨率越高,相应的制造工艺越复杂,成本也越高。
二、液晶控制原理
我们这里用到的显示屏,是由液晶显示面板、电容触摸面板以及PCB底板组成。触摸面板带有触摸控制芯片,与液晶面板引出的排线连接到PCB底板上,通过液晶控制器芯片与STM32进行通讯,部分STM32不自带液晶控制器,因此显示器需自带,我这里使用的F429集成了液晶控制器,因此配套的显示器并没有液晶控制器。
在液晶面板上,引出的控制信号线如下:
信号名称 | 说明 |
---|---|
R[7:0] | 红色像素控制信号 |
G[7:0] | 绿色像素控制信号 |
B[7:0] | 蓝色像素控制信号 |
CLK | 像素同步时钟信号 |
HSYNC | 水平同步信号 |
VSYNC | 垂直同步信号 |
DE | 数据使能信号 |
1、RGB信号线
RGB信号线每个通道各有8根,分别表示每个像素点的红、绿、蓝颜色的分量,因此每个像素点的每个通道色彩分量可以表示为0-255种,比如RGB565表示红绿蓝三个通道数据线分别是5、6、5根,数据位一共16,因此可表示为216种颜色,色彩深度为16bit,而我用到的液晶屏三种颜色通道数据线各有8根,因此可显示颜色为224种,色彩深度为24bit。
2、同步时钟信号CLK
液晶屏与外部适用同步通讯方式,以CLK信号作为同步时钟,每个时钟传输一个像素点的数据。
3、水平同步信号HSYNC
水平同步信号表示液晶屏一行像素数据的传输结束,每次传输完成液晶屏一行像素数据时,HSYNC都会发生一次电平跳变,比如分辨率为800x480分辨率的显示屏,传输一帧不想时HSYNC的电平会跳变480次,这里注意跳变次数与行数是对应的。
4、垂直同步信号VSYNC
垂直同步信号是指每一帧像素数据传输结束后,VSYNC会发生一次跳变,也就是说,当液晶屏上显示一次完整的图像时,VSYNC会发生跳变,玩哪些3A大作游戏的伙伴们,一般在挑选显示器时,会关注刷新率的参数,这个刷新率例如60Hz、144Hz等,表示的就是每秒刷新多少次,即触发多少次VSYNC跳变。
5、数据使能信号DE
数据使能信号表示数据的有效性,当DE信号线为高电平时,RGV信号线表示的数据有效。
三、液晶数据传输时序
向液晶屏传输数据时,我们可以将液晶屏上面的像素点按照行去展开,例如800*480分辨率的显示屏。展开后第1个像素点为第1行第1列的像素点,第481个像素点为第2行第1列的像素点,由此往下类推,这时候我们想象出来一个指针,这个指针指向下一个要显示的像素点,这个指针的扫描方向在显示屏上应该是由左到右、从上向下的一个点一个点的移动,当指向像素点时,通过DE使能信号的使能下,将RGB信号线的数据发送到指向的像素点,再在CLK时钟的驱动下移向下一个像素点,每传输一行像素数据时,水平同步信号HSYNC触发一次,当所有像素点全部传输完成后,垂直同步信号HSYNC再触发一次,之后指针再次移回到最开始的位置,即第一行第一列。
这里我们是将显示屏上的像素点拉成一条线去说明的,但是实际上显示指针在行与行、帧与帧之间切换存在一定的延迟,并且水平同步和垂直同步信号本身有一定的宽度,这些时间参数如下表:
时间参数 | 参数说明 |
---|---|
水平后沿(VBP:vertical back porch) | 表示一帧图像开始时,垂直同步信号以后的无效行数 |
水平前沿(VFP:vertical front porch) | 表示一帧图像结束后,垂直同步信号以前的无效行数 |
垂直后沿(HBP:horizontal back porch) | 表示从水平同步信号开始到有效数据开始前的CLK的个数 |
垂直前延(HFP:horizontal front porch) | 表示一行有效数据就鳄属到下一个水平同步信号开始之间的CLK的个数 |
垂直信号宽度(VSW:vertical sync width) | 表示垂直同步信号的宽度,单位为行 |
水平信号宽度(HSW:horizontal sync width) | 表示水平同步信号的宽度,单位为同步时钟CLK的个数 |
看这个表,我估计多数人会比较懵,用一张图来分析一下各个时间参数表示的含义:
因为生产制造工艺的问题,显示屏整个显示区域中,并不是所有像素点都是可用的,如上图中,实际上关于上表中的各项时间参数,可以认为是为了对非有效显示区域的限制,在这里使能控制信号,只有像素指针到了有效显示区域内,才会变为高电平,其余位置均低电平。
四、显存
这里说的显存是指屏幕中所有像素点的颜色数据缓存起来,再传给显示屏,这种存储显示数据的存储器被称为显存,显存的容量至少要能存储显示器的一帧显示数据,分辨率为800*400的液晶屏如果使用RGB888格式显示,则其一帧数据大小为(8+8+8)x 800 x 480 = 9216000bit / 8 = 1152000Byte,如果适用RGB565格式显示,则一帧图像数据大小为(5+6+5)x 800 x 480 = 6144000bit / 8 = 768000Byte。
五、LTDC液晶控制器
上面提到F429本身自带液晶控制器,可以适用SDRAM的部分空间作为显存,不需要液晶屏再增加液晶控制器芯片了。ST,32的LTDC液晶控制器最高支持800 x 600分辨率的像素,支持多种颜色格式,包括RGB888、RGB565、ARGB8888和ARGB1555(A表示透明像素);支持2层显示数据混合,可以利用这个特性制作出背景和前景分离的效果,比如背景播放视频,前景显示字幕。
如果需要适用数据混合功能,前景曾必须适用包含透明的像素格式,如ARGB8888或者ARGB1555,里面的字母和数字是对应的,比如ARGB1555表示的是透明像素层(A)只用1位表示像素透明或者不透明,后面的几位则是表示RGB通道的颜色深度,而ARGB8888里面,透明像素则可以表示透明深度。
关于液晶屏这里,需要注意的是液晶屏本、身是没有透明度的参数的,比如24位液晶屏RGB888,只有RGB颜色各对应的8根数据线,不存在表示透明度的数据线,所以实际上ARGB也只是针对于内部分层数据处理的格式,通过液晶控制器混合计算出直接颜色数据通过RGB三根数据线发送给液晶屏显示,这里就跟我们使用PS软件绘图时,通过图层混合后,最终输出的jpg的图片一样。
关于LTDC这里通过下面几个部分来进行学习:
LTDC结构:
LTDC主要包含信号线、图像处理单元、寄存器以及时钟信号,其结构如下图:
1、LTDC信号线:
LTDC信号线与液晶屏的数据线时一一对应的,包含RGB数据线、水平&垂直同步信号线、时钟信号线以及使能信号线,下表是查询《STM32F4XX规格书》整理出来的对应引脚号。
引脚号 | LTDC 信号 | 引脚号 | LTDC 信号 | 引脚号 | LTDC 信号 | 引脚号 | LTDC 信号 |
---|---|---|---|---|---|---|---|
PA3 | LCD_B5 | PE11 | LCD_G3 | PH14 | LCD_G3 | PJ4 | LCD_R5 |
PA4 | LCD_VSYNC | PE12 | LCD_B4 | PH15 | LCD_G4 | PJ5 | LCD_R6 |
PA6 | LCD_G2 | PE13 | LCD_DE | PI0 | LCD_G5 | PJ6 | LCD_R7 |
PA8 | LCD_R6 | PE14 | LCD_CLK | PI1 | LCD_G6 | PJ7 | LCD_G0 |
PA11 | LCD_R4 | PE15 | LCD_R7 | PI2 | LCD_G7 | PJ8 | LCD_G1 |
PA12 | LCD_R5 | PF10 | LCD_DE | PI4 | LCD_B4 | PJ9 | LCD_G2 |
PB8 | LCD_B6 | PG6 | LCD_R7 | PI5 | LCD_B5 | PJ10 | LCD_G3 |
PB9 | LCD_B7 | PG7 | LCD_CLK | PI6 | LCD_B6 | PJ11 | LCD_G4 |
PB10 | LCD_G4 | PG10 | LCD_B2 | PI7 | LCD_B7 | PJ12 | LCD_B0 |
PB11 | LCDG5 | PG11 | LCD_B3 | PI9 | LCD_VSYNC | PJ13 | LCD_B1 |
PC6 | LCD_HSYNC | PG12 | LCD_B1 | PI10 | LCD_HSYNC | PJ14 | LCD_B2 |
PC7 | LCD_G6 | PH2 | LCD_R0 | PI12 | LCD_HSYNC | PJ15 | LCD_B3 |
PC10 | LCD_R2 | PH3 | LCD_R1 | PI13 | LCD_VSYNC | PK0 | LCD_G5 |
PD3 | LCD_G7 | PH8 | LCD_R2 | PI14 | LCD_CLK | PK1 | LCD_G6 |
PD6 | LCD_B2 | PH9 | LCD_R3 | PI15 | LCD_R0 | PK2 | LCD_G7 |
PD10 | LCD_B3 | PH10 | LCD_R4 | PJ0 | LCD_R1 | PK3 | LCD_B4 |
PE4 | LCD_B0 | PH11 | LCD_R5 | PJ1 | LCD_R2 | PK4 | LCD_B5 |
PE5 | LCD_G0 | PH12 | LCD_R6 | PJ2 | LCD_R3 | PK5 | LCD_B6 |
PE6 | LCD_G1 | PH13 | LCD_G2 | PJ3 | LCD_R4 | PK6 | LCD_B7 |
2、图像处理单元
在上图中②表示的是图像处理单元,通过AHB接口获取显存中的数据,然后按照分层把数据发送到两个”层FIFO“缓存中,将每个FIFO可以缓存64*32位的数据,紧接着再由缓存中获取数据交给PFC(像素格式转换器),将数据从像素格式转换成字(ARGB8888)格式,通过混合单元将两层数据合并,再通过信号线将混合得到的单层数据发送到液晶屏上。
输出数据前,数据还要经过一个抖动单元,作用是当输出数据的色彩深度大于显示屏实际的色彩深度时,对像素颜色进行舍入操作,比如,当向16位显示器上输入24位色彩深度的数据时,抖动单元会把像素数据的低8位(24-16)数据与阈值比较,若大于阈值,则向第9位进1,否则直接舍掉后面的8位。
3、配置和状态寄存器
图中标4的表示的是LTDC的控制逻辑,包含了LTDC的各种配置和状态寄存器。需要配置的参数有通讯时信号线的有效电平、各种时间参数、有效数据宽度、像素格式及显存地址等等,LTDC通过这些配置控制输出,将AHB接口从显存位置搬运过来的数据输出到显示器,同时可以通过用于指示当前显示状态和位置的状态寄存器去获取LTDC的工作状态。
4、时钟信号
LTDC使用到3中时钟信号,AHB时钟、APB2时钟及像素时钟LCD_CLK,其中AHB时钟用于驱动数据从存储器存储到FIFO,APB2时钟用于驱动LTDC的驱动器,而LCD_CLK则是与显示器的通讯同步时钟,时钟树如下图:
这里可以看到LCD_CLK来源于HSE,经过M分频因子输出到PLLSAI分频器,有PLLSAI中的倍频因子N得到”LCD-TFT clock“,这里的”LCD-TFT clock“就是通讯中的同步时钟LCD_CLK,通过LCD_CLK引脚输出,即PI14引脚。
六、DMA2D图形加速器
实际使用LTDC控制液晶屏显示的时候,往配置好的显存地址中写入要显示的像素数据,LTDC会将这些数据从显存经过一系列处理后在发送到液晶屏,但是上面我们通过计算,发现每帧显示的数据量非常大,如果仅仅是单帧数据的话还好说,如果是视频类的图像,对于处理器来说工作量是相当大的,之前学习过DMA外设,STM32针对于这个需求,专门定制了用于图像数据搬运的DMA2D外设,可以快速绘制矩形、直线、分层数据混合、数据复制以及图像数据格式转换,是图像专用的DMA外设。
DMA2D的结构框图与LTDC结构中的图像处理单元很类似,主要为分层FIFO、PFC及彩色混合器。
1、FG FIFO与BG FIFO
FG FIFO与BG FIFO是两个64*32位大小的缓冲区,分别用于缓冲前景层和背景层从AHB总线获取的像素数据。AHB总线的数据源一般是SDRAM也就是说再LTDC外设中配置的前景层和背景层的数据源地址一般指向SDRAM的存储空间,使用SDRAM的部分空间作为显存。
2、FG PFC和BG PFC
FG PFC和BG PFC是两个像素格式转换器,分别用于前景层和背景层的像素格式转换,不管从FIFO的数据源格式如何,通过其转换后都为ARGB8888格式(32位)。
图中的“α”表示Alpha(透明度),经过PFC处理后,透明度会被扩展位8位格式。
图中的CLUT表示颜色查找表,是一种间接的颜色表示方式,使用一个256*32位的空间缓存256种颜色,颜色格式是ARGB8888或RGB888,实际图像只是用这256种颜色,图像的每个像素点使用8位数据表示,但是该数据不是直接的RGB颜色,而是指向颜色查找表的地址便宜,可以理解为像素点应该显示的颜色对应的是颜色查找表里面的颜色,在图像大小不变的情况下,利用颜色查找表i可以扩展颜色显示的能力,特点就是可以用8位的数据表示一个24或者32位的颜色,整个图像种的颜色种类受限于颜色查找表中的256种。DMA2D可以通过CPU自行加载或者编程手动加载。
3、混合器
FIFO中的数据通过PFC像素格式转换器后,前景层和背景层的图像都输入到混合器种运算,运算公式如下:
混合器的运算主要使用前景和背景的透明度作为因子,对像素的RGB颜色进行加权运算,通过混合器将两层数据合为一层ARGB8888格式的图像。
4、OUT PFC
OUT OFC是输出像素格式转换器,是将上面混合器种得到的图像转换成目标格式,比如ARGB8888、RGB888、RGB565、ARGB1555或ARGB4444,具体的格式根据需要再输出PFC控制今存其DMA2D_OPFCCR种选择。
F429使用通过LTDC、DMA2D以及存储器,构成一个完整的液晶控制器,LTDC不断刷新液晶屏,DMA2D搬运图像数据、混合及格式转换,RAM存储器作为显存,显存可以使用STM32内部SRAM或者外扩SDRAM/SRAM。
OK,关于液晶屏、LTDC以及DMA2D的内容就学习到这里,下一节开始实测控制显示屏显示图像。
PFC控制今存其DMA2D_OPFCCR种选择。