本文是阅读LinkedIn公司2020年发表的论文Magnet:Push-basedShuffleServiceforLarge-scaleDataProcessing一点笔记。什么是Shuffle以上图为例，在一个DAG的执行图中，节点与节点之间的数据交换就是Shuffle的过程。虽然Shuffle的过程很简单，但是不同的引擎有不同的实现。以shuffle数据传输的介质来看有基于磁盘的shuffle，例如Map/Reduce，Spark，FlinkBatch中，上下游之前的数据都是需要落盘后来进行传输，这类通常是离线处理框架，对延迟不敏感，基于磁盘更加可靠稳定。有基于内存的pipeline模
本文是阅读LinkedIn公司2020年发表的论文Magnet:Push-basedShuffleServiceforLarge-scaleDataProcessing一点笔记。什么是Shuffle以上图为例，在一个DAG的执行图中，节点与节点之间的数据交换就是Shuffle的过程。虽然Shuffle的过程很简单，但是不同的引擎有不同的实现。以shuffle数据传输的介质来看有基于磁盘的shuffle，例如Map/Reduce，Spark，FlinkBatch中，上下游之前的数据都是需要落盘后来进行传输，这类通常是离线处理框架，对延迟不敏感，基于磁盘更加可靠稳定。有基于内存的pipeline模
目录GlobalIlluminationbasedonSurfels[SIGGRAPH2021]Surfel持久化存储surfel数据组成surfel回收机制Surfelizationscreen-basedplacementAccelerationStructuregridFinalGatheringraygeneration:MSMErayguiding:importancesamplingraytracing:indirectlightingtemporalfilteringirradiancesharingGIBS方案总结GIBS方案流程总览GIBS方案优缺点改进思路参考surfel，
目录GlobalIlluminationbasedonSurfels[SIGGRAPH2021]Surfel持久化存储surfel数据组成surfel回收机制Surfelizationscreen-basedplacementAccelerationStructuregridFinalGatheringraygeneration:MSMErayguiding:importancesamplingraytracing:indirectlightingtemporalfilteringirradiancesharingGIBS方案总结GIBS方案流程总览GIBS方案优缺点改进思路参考surfel，
目录PrecomputedProbe预放置probes四面体镶嵌（TetrahedralTessellations）IndirectLightCacheVolumetricLightMap烘焙光照信息SHlighting重建shadingpoint光照信息优缺点DDGI（orRTXGI）动态/预放置probesDDGIvolume探测动态光照信息计算radiance更新probe的irradiance重建shadingpoint光照信息优缺点ScreenSpaceProbe动态放置probesuniformplacementadaptiveplacement探测动态光照信息spatialfil
目录PrecomputedProbe预放置probes四面体镶嵌（TetrahedralTessellations）IndirectLightCacheVolumetricLightMap烘焙光照信息SHlighting重建shadingpoint光照信息优缺点DDGI（orRTXGI）动态/预放置probesDDGIvolume探测动态光照信息计算radiance更新probe的irradiance重建shadingpoint光照信息优缺点ScreenSpaceProbe动态放置probesuniformplacementadaptiveplacement探测动态光照信息spatialfil
0x00:前言Base64编码的作用：将一些特殊的字符转换成常见的字符。特殊的字符可能是不可见字符或者是大于ascii码127的，将其变成常见的字符（在base64中为a~zA~Z0~9+/）。Base64特别适合在某些网络协议下快速传输。在学习Base64隐写之前，得先熟悉Base64编码与解码的过程。 0x01:Base64的编码过程 Base64编码后的字符为”a~zA~Z0~9+/“共计64个，每个需要6个比特位进行存储。原本，ASCII编码字符每个字符占8个比特位。Base64编码则是把原来每单位8个比特位的字符序列划分成每单位6个比特位，然后按单位转换成上述中的64个字符。
0x00:前言Base64编码的作用：将一些特殊的字符转换成常见的字符。特殊的字符可能是不可见字符或者是大于ascii码127的，将其变成常见的字符（在base64中为a~zA~Z0~9+/）。Base64特别适合在某些网络协议下快速传输。在学习Base64隐写之前，得先熟悉Base64编码与解码的过程。 0x01:Base64的编码过程 Base64编码后的字符为”a~zA~Z0~9+/“共计64个，每个需要6个比特位进行存储。原本，ASCII编码字符每个字符占8个比特位。Base64编码则是把原来每单位8个比特位的字符序列划分成每单位6个比特位，然后按单位转换成上述中的64个字符。
1.简介最近有个需求，就是把图片验证码转化为base64格式，tp5框架自带的think-captcha扩展包可以实现。但是，它有个缺点，不能获取验证码的值。在做前后端分离项目的时候，验证码检测有两种方式，各有利弊。方式一：因为session不能共享，所以通过传递唯一uuid，后端用redis存储uuid对应的验证码，验证同理。方式二：直接返回验证码的同时，把验证值也返回给前端，在前端去验证验证码的有效性下面不多说，看代码。（如果你还有第三种方法，欢迎留言，共同学习）2.代码片段$width=100;$height=30;$size=4;$fontSize=10;$image=imagecre
1.简介最近有个需求，就是把图片验证码转化为base64格式，tp5框架自带的think-captcha扩展包可以实现。但是，它有个缺点，不能获取验证码的值。在做前后端分离项目的时候，验证码检测有两种方式，各有利弊。方式一：因为session不能共享，所以通过传递唯一uuid，后端用redis存储uuid对应的验证码，验证同理。方式二：直接返回验证码的同时，把验证值也返回给前端，在前端去验证验证码的有效性下面不多说，看代码。（如果你还有第三种方法，欢迎留言，共同学习）2.代码片段$width=100;$height=30;$size=4;$fontSize=10;$image=imagecre
