Vulkan Notes
- 1. 实例
- 2. 窗口
- 3. 设备
- 4. 交换链
- 5. 流水线
- 5.1. 着色器
- 5.2. 固定状态
- 5.2.1. VkPipelineVertexInputStateCreateInfo
- 5.2.2. VkPipelineInputAssemblyStateCreateInfo
- 5.2.3. VkPipelineTessellationStateCreateInfo
- 5.2.4. VkPipelineViewportStateCreateInfo
- 5.2.5. VkPipelineRasterizationStateCreateInfo
- 5.2.6. VkPipelineMultisampleStateCreateInfo
- 5.2.7. VkPipelineDepthStencilStateCreateInfo
- 5.2.8. VkPipelineColorBlendStateCreateInfo
- 5.2.9. VkPipelineDynamicStateCreateInfo
- 5.3. 流水线布局
- 5.4. 渲染流程
- 5.5. 管线
- 6. 缓存
- 7. 渲染循环
1. 实例
1.1. 实例层 & 实例扩展
| 接口 | 功能 |
|---|---|
| vkEnumerateInstanceLayerProperties() | 枚举所有VulkanRT支持的层 |
| vkEnumerateInstanceExtensionProperties() | 枚举所有VulkanRT支持的扩展 |
1.2. VkInstance
句柄VkInstance,对应结构体VkInstanceCreateInfo。VulkanRT库初始化。
结构体内要提供开启的实例层、开启的实例扩展以及结构体VkApplicationInfo。实例层以及实例扩展需要VulkanRT支持,结构体不包含重要信息。
Vulkan的合法性检查需要开启
"VK_LAYER_LUNARG_standard_validation"层
GLFW窗口需要开启glfwGetRequiredInstanceExtensions()获得的扩展
启用调试需要开启"VK_EXT_debug_utils"扩展
1.3. VkDebugUtilsMessengerEXT
句柄VkDebugUtilsMessengerEXT,对应结构体VkDebugUtilsMessengerCreateInfoEXT。开启调试回调。
该句柄的创建和销毁接口需要运行期通过接口
vkGetInstanceProcAddr()获得
结构体内要提供回调函数。启用"VK_EXT_debug_utils"扩展后Debug消息会调用回调函数,启用"VK_LAYER_LUNARG_standard_validation"层后Vulkan合法性检查相关内容也会以Debug消息的形式进行反馈。
2. 窗口
句柄GLFWwindow*,为GLFW库内容,需要开启相应的实例层。
句柄VkSurfaceKHR,无对应结构体,由GLFW库实现创建(依赖GLFWwindow*以及VkInstance)。
3. 设备
3.1. 物理设备
3.1.1. VkPhysicalDevice
句柄VkPhysicalDevice,无对应结构体,由VkInstance枚举而得。表示可用的GPU。
3.1.2. 设备属性 & 设备特性
| 接口 | 功能 |
|---|---|
| vkGetPhysicalDeviceProperties() | 获得所有物理设备的属性 |
| vkGetPhysicalDeviceFeatures() | 获得所有物理设备的特性 |
3.1.3. 设备层 & 设备扩展
| 接口 | 功能 |
|---|---|
| vkEnumerateDeviceLayerProperties() | 枚举所有物理设备支持的层 |
| vkEnumerateDeviceExtensionProperties() | 枚举所有物理设备支持的扩展 |
3.1.4. 与窗口的兼容性
| 接口 | 功能 |
|---|---|
| vkGetPhysicalDeviceSurfaceFormatsKHR() | 获得所有Surface支持的数据格式 |
| vkGetPhysicalDeviceSurfacePresentModesKHR() | 获得所有Surface支持的显示模式 |
3.1.5. 队列族
队列族代表一系列Vulkan指令的集合。
| 接口 | 功能 |
|---|---|
| vkGetPhysicalDeviceQueueFamilyProperties() | 获得物理设备的所有队列族 |
运行时任意设备获得的队列族信息是固定的,因此在需要使用队列族的地方往往用索引来访问。
3.2. 逻辑设备
3.2.1. VkDevice
句柄VkDevice,对应结构体VkDeviceCreateInfo。与Vulkan API交互的虚拟设备。
结构体内要提供开启的设备层、开启的设备扩展、开启的设备特性以及结构体VkDeviceQueueCreateInfo列表。设备层、设备扩展以及设备特性需要物理设备支持,结构体列表用于从队列族创建队列。
每个结构体VkDeviceQueueCreateInfo内要提供队列族的索引以及该队列族创建的队列数量。
如果创建成功
vkGetDeviceQueue()接口可以获得队列的句柄
3.3. 指令池
句柄VkCommandPool,对应结构体VkCommandPoolCreateInfo。每个队列族需要一个指令池用以分配指令缓存。
结构体内要提供队列族。
4. 交换链
4.1. VkSwapchainKHR
句柄VkSwapchainKHR,对应结构体VkSwapchainCreateInfoKHR。用于Vulkan图像和Surface交互。其管理了一个图像队列,并按一定规则将图像送至Surface用于显示。
结构体内要提供Surface、图像属性、显示模式等内容。
图像属性包括:
| 属性 | 意义 |
|---|---|
| minImageCount | 图像队列大小(需要在物理设备和Surface允许的范围内) |
| imageFormat | 图像每个像素的格式(需要物理设备和Surface支持) |
| imageColorSpace | 图像的颜色空间(需要物理设备和Surface支持) |
| imageExtent | 图像大小(与Surface管理的窗口大小相同) |
| imageArrayLayers | 图像层数,表示3D图像,取1则表示2D图像 |
| imageUsage | 图像用途(颜色缓存,深度缓存。。。) |
| imageSharingMode | 描述不同队列族的指令如何访问同一图像 |
显示模式(需要物理设备和Surface支持)包括:
| 属性 | 意义 |
|---|---|
| VK_PRESENT_MODE_IMMEDIATE_KHR | 图像与Surface同步 |
| VK_PRESENT_MODE_MAILBOX_KHR | 图像与Surface通过图像队列异步;如果队列已满,之的提交会被覆盖 |
| VK_PRESENT_MODE_FIFO_KHR | 图像与Surface通过图像队列异步;如果队列已满,图像会等待Surface |
| VK_PRESENT_MODE_FIFO_RELAXED_KHR | 同上,但是如果队列为空,下一次提交会直接与Surface同步 |
4.2. VkImage
句柄VkImage,对应结构体VkImageCreateInfo(若由VkSwapchainKHR管理,则不通过该结构体创建)。用于描述Vulkan中的所有图像。
接口vkGetSwapchainImagesKHR()可直接获得图像队列中每张图像的句柄。
4.2. VkImageView
句柄VkImageView,对应结构体VkImageViewCreateInfo。VkImage中的内容不能直接访问,需要通过相应的VkImageView才能进行读写。
VkImageView有自己的像素格式,需要与对应VkImage的格式兼容。类似DX11中ID3D11ShaderResourceView的格式需要与对应的ID3D11Texture2D格式兼容。
VkImageView可进行通道映射,其每个通道都可以指定VkImage的任意一个通道。
VkImageView可只访问VkImage的一部分。包括部分连续的MipMap,部分连续层。
5. 流水线
句柄VkPipeline,对应结构体VkGraphicsPipelineCreateInfo或VkComputePipelineCreateInfo。描述流水线构成,可以是图形管线,也可以是计算管线。
描述图形管线的VkPipeline包括以下部分:
| 流水线组成 | 意义 |
|---|---|
| 着色器(Shader Stage) | 可编程着色器 |
| 固定状态(Fixed State) | 不可编程但可配置的内容 |
| 流水线布局(Pipeline Layout) | 用于着色器访问外部数据 |
| 渲染流程(Render Pass) | 控制流水线的运行时行为 |
5.1. 着色器
Vulkan使用SPIR-V字节码作为SL。可以由HLSL、GLSL等直接编译而来。
5.1.1. VkShaderModule
句柄VkShaderModule,对应结构体VkShaderModuleCreateInfo。作为SPIR-V字节码的容器。
5.1.2. VkPipelineShaderStageCreateInfo
结构体VkPipelineShaderStageCreateInfo列表,描述VkPipeline中每个着色器阶段的VkShaderModule绑定信息。
5.2. 固定状态
5.2.1. VkPipelineVertexInputStateCreateInfo
结构体VkPipelineShaderStageCreateInfo,描述:
| 顶点结构体描述列表 | std::vector<VkVertexInputBindingDescription> |
| 顶点属性描述列表 | std::vector<VkVertexInputAttributeDescription> |
流水线通过绑定槽(Bind)读取顶点数据,每个Bind用一个VkVertexInputBindingDescription描述,包括槽位号、每个顶点所占的空间以及该槽是逐顶点数据还是逐实例数据。
着色器通过layout(location=xxx)访问顶点数据,每个layout用一个VkVertexInputAttributeDescription描述,包括着色器内的位置location、顶点所处的Bind、访问格式以及数据所在顶点结构体的偏移值。
5.2.2. VkPipelineInputAssemblyStateCreateInfo
结构体VkPipelineInputAssemblyStateCreateInfo,描述光栅化时如何利用顶点组成图元。
5.2.3. VkPipelineTessellationStateCreateInfo
TODO
5.2.4. VkPipelineViewportStateCreateInfo
结构体VkPipelineViewportStateCreateInfo,描述视口以及剪刀。
| 视口列表 | std::vector<VkViewport> |
| 剪刀列表 | std::vector<VkRect2D> |
视口描述如何从NDC映射到Frame Buffer,而剪刀描述了Frame Buffer的可见区域。
5.2.5. VkPipelineRasterizationStateCreateInfo
结构体VkPipelineRasterizationStateCreateInfo,描述光栅化的配置:
| depthClampEnable | 开启后,深度在远近平面以外会被截断 |
| rasterizerDiscardEnable | 开启后,流水线到此为止 |
| polygonMode | 多边形填充方案 |
| cullMode | 剔除方案 |
| frontFace | 正面规则 |
5.2.6. VkPipelineMultisampleStateCreateInfo
TODO
5.2.7. VkPipelineDepthStencilStateCreateInfo
TODO
5.2.8. VkPipelineColorBlendStateCreateInfo
TODO
5.2.9. VkPipelineDynamicStateCreateInfo
TODO
5.3. 流水线布局
句柄VkPipelineLayout,对应结构体VkPipelineLayoutCreateInfo,描述着色器资源(Shader Resource)的布局
结构体内要提供描述集布局(Descriptor Set Layout)列表以及Push Constant Range列表。每个描述集布局代表了一种着色器资源组织形式。
5.3.1. 描述集布局
句柄VkDescriptorSetLayout,对应结构体VkDescriptorSetLayoutCreateInfo。
着色器通过layout(binding=XXX)访问着色器资源,每个layout用一个VkDescriptorSetLayoutBinding描述,包括着色器内的位置binding、资源类型以及能被那几个着色器阶段访问。此外,如果资源是一个列表,还需要提供列表长度。
5.3.2. Push Constant Range
TODO
5.4. 渲染流程
句柄VkRenderPass,对应结构体VkRenderPassCreateInfo。包括:
| 图像附件描述列表 | std::vector<VkAttachmentDescription> |
| 子流程描述列表 | std::vector<VkSubpassDescription> |
| 子流程依赖列表 | std::vector<VkSubpassDependency> |
5.4.1. VkAttachmentDescription
结构体VkAttachmentDescription,描述渲染流程中用到的图像属性:
| format | 图像每个像素的格式 |
| samples | 采样数量 |
| loadOp/storeOp | 读写时的操作 |
| stencilLoadOp/stencilStoreOp | 模板读写时的操作 |
| initialLayout/finalLayout | 图像进入/完成流程时的布局 |
5.4.2. VkSubpassDescription
结构体VkSubpassDescription,描述渲染流程中的每一个子流程所使用的图像:
| InputAttachment[] | 用于着色器读入 |
| ColorAttachment[] | 用于着色器输出 |
| ResolveAttachment | 用于多采样 |
| DepthStencilAttachment | 用于深度/模板 |
| PreserveAttachment[] | 子流程不会修改这些图像里的数据 |
5.4.3. VkSubpassDependency
结构体VkSubpassDependency,描述子流程之间的依赖关系(资源内存依赖),后一子流程中指定阶段的指定访问需要等待前一子流程中指定阶段的指定访问全部完成:
| srcSubpass/dstSubpass | 前后相关的子流程 |
| srcStageMask/srcAccessMask | 需要等待的资源所在的流水线阶段以及访问操作类型 |
| dstStageMask/dstAccessMask | 需要被等待的资源所在的流水线阶段以及访问操作类型 |
5.5. 管线
graph TD
A[InputAssembler]-->B(VertexShader)
B-->C(Tesselator)
C-->D(GeometryShader)
D-->E[Rasterizer]
E-->F(PixelShader)
F-->G[OutputMerger]
style A fill:#F596AA;
style B fill:#66BAB7;
style C fill:#66BAB7;
style D fill:#66BAB7;
style E fill:#F596AA;
style F fill:#66BAB7;
style G fill:#F596AA;
| 管线阶段 | 对应VkPipeline部分 |
|---|---|
| InputAssembler | 5.2.1.解析顶点 |
| XXXShader | 5.1.着色器,5.2.1.顶点绑定,5.3.着色器资源绑定 |
| Rasterizer | 5.2.2.图元解析,5.2.4.视口绑定,5.2.5.光栅化 |
| OutputMerger | 5.2.7.深度,5.2.8.混合,5.4.FrameBuffer绑定 |
6. 缓存
6.1. VkSemaphore
句柄VkSemaphore,对应结构体VkSemaphoreCreateInfo。实现GPU-GPU同步(先获得图像句柄才能渲染,渲染完才能显示)。
6.2. VkFence
句柄VkFence,对应结构体VkFenceCreateInfo。实现CPU-GPU同步(当GPU忙碌时,禁止CPU提交指令,防止指令无限提交导致内存泄漏)。
VkFence创建时需要默认设置为触发状态,否则CPU会无限等待。
6.3. VkFramebuffer
句柄VkFramebuffer,对应结构体VkFramebufferCreateInfo。关联渲染流程中定义的图像附件描述列表以及交换链中的VkImageView。
传入的VkImageView为一个列表,其顺序与图像附件描述列表一一对应,因此流水线可以正确访问所有图像数据。
6.4. VkCommandBuffer
句柄VkCommandBuffer,对应结构体VkCommandBufferAllocateInfo。表示需要提交到队列的指令序列。
结构体内需要提供指令池。任何指令缓存都需要通过指令池来分配空间。
Vulkan指令为形如vkCmdXXX()的接口,使用时在以下两个接口之间任意调用Vulkan指令,完成指令记录:
| vkBeginCommandBuffer() |
| vkEndCommandBuffer() |
提交到队列后会按照记录的顺序逐一执行指令,由于指令是预先录制的,因此尽管只修改一条指令也需要重新录制。
6.5. VkBuffer & VkDeviceMemory
句柄VkBuffer,对应结构体VkBufferCreateInfo。可以表示任意的Vulkan缓存。
结构体内要提供缓存实际字节数、缓存用途以及在不同队列族之间的共享模式。
| 缓存实际字节数 | 数据所占的实际大小 |
| 缓存用途 | VK_BUFFER_USAGE_XXX,用于传输、或顶点、或索引、或着色器资源 |
| 共享模式 | 能否被属于不同队列族的指令共享 |
句柄VkDeviceMemory,对应结构体VkMemoryAllocateInfo。描述缓存在GPU上的显存,因为缓存本身不带任何存储空间,因此需要与VkDeviceMemory绑定。
结构体要提供存储分配字节数以及存储类型索引。
| 存储分配字节数 | 在GPU上,考虑对齐问题后为缓存分配的空间大小 |
| 存储类型索引 | 物理设备提供了可用的存储类型,通过索引指定要使用的类型 |
接口vkGetPhysicalDeviceMemoryProperties可以获得物理设备支持的存储类型。由于存储类型是一个固定的列表,因此存储类型索引代表的是存储类型在该列表中的索引。
接口vkGetBufferMemoryRequirements()可以获得缓存支持的存储类型以及存储分配字节数。存储类型以位掩码的形式给出,(1 << i) & type_bit == 1等价于缓存支持type[i]对应的存储类型。
除了存储类型需要缓存支持外,还需要存储属性支持缓存的访问形式。每种存储类型都有对应的属性,以位掩码的形式给出,每种属性对应了一个VK_MEMORY_PROPERTY_XXX枚举。
例:
如果是GPU专有存储需要VK_MEMORY_PROPERTY_DEVICE_LOCAL_BIT属性
如果需要能够被CPU访问则需要VK_MEMORY_PROPERTY_HOST_VISIBLE_BIT属性与VK_MEMORY_PROPERTY_HOST_COHERENT_BIT属性。
接口vkBindBufferMemory()可以将缓存与存储绑定。
6.6. VkDescriptorPool & VkDescriptorSet
6.6.1. VkDescriptorSet
句柄VkDescriptorSet,对应结构体VkDescriptorSetAllocateInfo。用于关联流水线布局中定义的描述集布局以及对应的VkBuffer。
每个VkDescriptorSet对应了一个VkDescriptorSetLayout,表示着色器会通过后者的布局来解析前者提供的数据。
而为了向VkDescriptorSet提供数据,需要通过结构体VkWriteDescriptorSet与接口vkUpdateDescriptorSets()来将VkBuffer内的数据打包:
| dstSet | 目标VkDescriptorSet |
| dstBinding | 缓存对应的着色器位置 |
| dstArrayElement/descriptorCount | 如果缓存是个列表,则指定首元素以及元素数量 |
| descriptorType | 缓存类型(与VkBuffer中的缓存用途对应) |
| pXXXInfo | 数据种类Image/Buffer/TexelBuffer |
6.6.2. VkDescriptorPool
句柄VkDescriptorPool,对应结构体VkDescriptorPoolCreateInfo。用于分配VkDescriptorSet。
结构体需要提供如下内容:
| 最多分配的VkDescriptorSet数量 | uint32_t |
| 每种Descriptor的可分配数量 | std::vector<VkDescriptorPoolSize> |
前者规定了VkDescriptorSet(对应VkDescriptorSetLayout)的数量上限;后者规定了每一种Descriptor(对应VkDescriptorSetLayout中binding)的数量上限。
VkDescriptorSet不能直接创建,必须通过对应的池来进行分配。
7. 渲染循环
7.1. 宿主-设备同步
通过VkFence来实现,接口vkWaitForFences()可以让当前线程等待,直到相应的VkFence被触发。当VkCommandBuffer中的指令执行完成时,会触发VkFence。因此,CPU线程会与GPU上的渲染流程同步,防止CPU提交过量指令来不及处理导致内存泄漏。
7.2. 获取图像
VkSwapchainKHR中的图像除了被流水线使用之外,还要被用于显示。因此为了正确地让流水线往图像上渲染,需要使用空闲的图像。接口vkAcquireNextImageKHR()可以取到下一张空闲图像的索引。
7.3. 提交指令
接口vkQueueSubmit(),对应结构体VkSubmitInfo。用于将VkCommandBuffer提交到对应的图形队列,供GPU执行。
7.4. 显示
接口vkQueuePresentKHR(),对应结构体VkPresentInfoKHR。用于将渲染完成的图像提交到窗口上显示。
7.5. 设备-设备同步
获取图像、提交指令以及显示必须按照顺序执行,为此,用VkSemaphore来进行同步。