草庐IT

业务问答

全部标签

PostgreSQL 在视频、图片去重,图像搜索业务中的应用

 背景图像处理的业务场景比较多,例如图像搜索、视频去重、人脸识别、美图、图片去重等。比如,视频去重,一些用户上传了较多的视频,同一部电影可能有不同的版本,分辨率不一样,音轨不一样,压缩比不一样。这种情况会导致服务端重复存储大量的视频。又比如甄别黄色视频或黄色图片,鉴黄师的职业要消失了。有什么方法可以得到重复的视频呢?如何鉴别黄色视频和图片呢?本文将给你揭晓。  另一方面,图片搜索是继文字搜索后又一个比较常用的搜索引擎。市面上常见的搜索引擎有谷歌、百度、搜狗等图片搜索引擎。http://image.baidu.com/http://images.google.com.hk例如在搜索引擎提供的接口

PostgreSQL 在视频、图片去重,图像搜索业务中的应用

 背景图像处理的业务场景比较多,例如图像搜索、视频去重、人脸识别、美图、图片去重等。比如,视频去重,一些用户上传了较多的视频,同一部电影可能有不同的版本,分辨率不一样,音轨不一样,压缩比不一样。这种情况会导致服务端重复存储大量的视频。又比如甄别黄色视频或黄色图片,鉴黄师的职业要消失了。有什么方法可以得到重复的视频呢?如何鉴别黄色视频和图片呢?本文将给你揭晓。  另一方面,图片搜索是继文字搜索后又一个比较常用的搜索引擎。市面上常见的搜索引擎有谷歌、百度、搜狗等图片搜索引擎。http://image.baidu.com/http://images.google.com.hk例如在搜索引擎提供的接口

优化数仓业务视图:过滤条件传递

摘要:在业务功能实现时,经常会用到视图简化查询SQL。但有时候会因为视图降低查询效率,本文主要分析在业务需求满足的情况下,将有效的过滤条件传递到基表,减少运算过程中数据库需要处理的数据量,提升SQL执行效率。本文分享自华为云社区《GaussDB(DWS)业务视图优化-过滤条件传递》,作者:卫小毛。在业务功能实现时,经常会用到视图简化查询SQL。但有时候会因为视图降低查询效率,本文主要分析在业务需求满足的情况下,将有效的过滤条件传递到基表,减少运算过程中数据库需要处理的数据量,提升SQL执行效率。SQL举例SELECTcount(1)AShave_done_num,t1.task_def_key

优化数仓业务视图:过滤条件传递

摘要:在业务功能实现时,经常会用到视图简化查询SQL。但有时候会因为视图降低查询效率,本文主要分析在业务需求满足的情况下,将有效的过滤条件传递到基表,减少运算过程中数据库需要处理的数据量,提升SQL执行效率。本文分享自华为云社区《GaussDB(DWS)业务视图优化-过滤条件传递》,作者:卫小毛。在业务功能实现时,经常会用到视图简化查询SQL。但有时候会因为视图降低查询效率,本文主要分析在业务需求满足的情况下,将有效的过滤条件传递到基表,减少运算过程中数据库需要处理的数据量,提升SQL执行效率。SQL举例SELECTcount(1)AShave_done_num,t1.task_def_key

离线数仓建设,企业大数据的业务驱动与技术实现丨03期直播回顾

原文链接:离线数仓建设,企业大数据的业务驱动与技术实现丨03期直播回顾视频回顾:点击这里课件获取:点击这里一、离线数仓建设背景离线数据是相对实时数据而言的数据产出,不同于实时数据,离线数据一般是T+1天处理,也就是说昨天产生的数据至少要今天才能看到计算结果。离线数据一般应用于对数据时效要求不高,需要基于一段时间的历史数据计算才能得到结果的场景,我们大致可以分为离线数据分析及数据应用两类,离线数据计算具备:数据准确度高、吞吐量大、计算成本低等特点。离线数据应用的场景非常广泛,企业的数据迎来了爆发式的增长,目前企业数据规模巨大、数据类型多样、生成及处理速度极快、数据价值巨大但密度却较低,这些数据增

离线数仓建设,企业大数据的业务驱动与技术实现丨03期直播回顾

原文链接:离线数仓建设,企业大数据的业务驱动与技术实现丨03期直播回顾视频回顾:点击这里课件获取:点击这里一、离线数仓建设背景离线数据是相对实时数据而言的数据产出,不同于实时数据,离线数据一般是T+1天处理,也就是说昨天产生的数据至少要今天才能看到计算结果。离线数据一般应用于对数据时效要求不高,需要基于一段时间的历史数据计算才能得到结果的场景,我们大致可以分为离线数据分析及数据应用两类,离线数据计算具备:数据准确度高、吞吐量大、计算成本低等特点。离线数据应用的场景非常广泛,企业的数据迎来了爆发式的增长,目前企业数据规模巨大、数据类型多样、生成及处理速度极快、数据价值巨大但密度却较低,这些数据增

SAP MM 进口采购业务中供应商多送或者少送场景的处理

SAPMM进口采购业务中供应商多送或者少送场景的处理  进口采购业务实践中,会出现供应商多送或者少送的场景。比如采购订单100个,供应商送货过来105个或者97个。 那么问题来了,对于这种场景的收货,在SAP系统上该怎么做?单单从SAP技术上办法很多,比如根据实际数量修改采购订单数量,然后根据实际数量收货过账,以实现后续的三单匹配,本地(Domestic)采购常常可以这种办法解决;或者设置Overdelivery/underdelivery容差,容差范围内按实际数量直接收货。 但是进口涉及到报关环节,报关的时候需要把据采购订单上的关键信息,比如物料,数量,价格,金额等信息提交给海关,一旦完成了

SAP MM 进口采购业务中供应商多送或者少送场景的处理

SAPMM进口采购业务中供应商多送或者少送场景的处理  进口采购业务实践中,会出现供应商多送或者少送的场景。比如采购订单100个,供应商送货过来105个或者97个。 那么问题来了,对于这种场景的收货,在SAP系统上该怎么做?单单从SAP技术上办法很多,比如根据实际数量修改采购订单数量,然后根据实际数量收货过账,以实现后续的三单匹配,本地(Domestic)采购常常可以这种办法解决;或者设置Overdelivery/underdelivery容差,容差范围内按实际数量直接收货。 但是进口涉及到报关环节,报关的时候需要把据采购订单上的关键信息,比如物料,数量,价格,金额等信息提交给海关,一旦完成了

顶象首期业务安全月报来了!

导语:随着数字化的深入普及,业务愈加开放互联。企业的关键数据、用户信息、基础设施、运营过程等均处于边界模糊且日益开放的环境中,涉及利益流和高附加值的业务面临多样的安全隐患,随时可能遭遇损失,进而影响企业运营和发展。一方面,业务安全隐患形式多样,在电商、支付、信贷、账户、交互、交易等形态的业务场景中,存在着各类等欺诈行为;另一方面,欺诈行为日益专业化、产业化,且具有团伙性、复杂性、隐蔽性和传染性等特点。为了让大家更全面的了解业务安全的风险,顶象自本月起将针对每月的业务安全热点事件进行盘点总结。一、国内业务安全热点WPS被爆删除用户本地文件7月11日,“WPS被曝会删除用户本地文件”话题登上热搜,

顶象首期业务安全月报来了!

导语:随着数字化的深入普及,业务愈加开放互联。企业的关键数据、用户信息、基础设施、运营过程等均处于边界模糊且日益开放的环境中,涉及利益流和高附加值的业务面临多样的安全隐患,随时可能遭遇损失,进而影响企业运营和发展。一方面,业务安全隐患形式多样,在电商、支付、信贷、账户、交互、交易等形态的业务场景中,存在着各类等欺诈行为;另一方面,欺诈行为日益专业化、产业化,且具有团伙性、复杂性、隐蔽性和传染性等特点。为了让大家更全面的了解业务安全的风险,顶象自本月起将针对每月的业务安全热点事件进行盘点总结。一、国内业务安全热点WPS被爆删除用户本地文件7月11日,“WPS被曝会删除用户本地文件”话题登上热搜,