当前位置： 首页 > news >正文 青海西宁高端网站建设保利威视 wordpress news 2025/10/31 0:10:38 青海西宁高端网站建设,保利威视 wordpress,网站搭建工具的种类,wordpress付费破解版云集电商#xff0c;一家聚焦于社交电商的电商公司#xff0c;专注于‘精选’理念#xff0c;致力于为会员提供超高性价比的全品类精选商品#xff0c;以“批发价”让亿万消费者买到质量可靠的商品。面对近年来外部环境的变化#xff0c;公司对成本控制提出了更高要求一家聚焦于社交电商的电商公司专注于‘精选’理念致力于为会员提供超高性价比的全品类精选商品以“批发价”让亿万消费者买到质量可靠的商品。面对近年来外部环境的变化公司对成本控制提出了更高要求尤其是服务器与人力成本两大领域。当前服务器成本已占据公司总成本的85%以上因此优化成本结构实现高效降本已成为我们当前工作的重中之重。 作为 DBA以更低的成本支撑公司的运营是一项重要的成就对个人而言可以学到很多知识和方法论包括成本分析和评估方法、服务器优化和调整方法、人力成本优化和提升方法等。 业务痛点 在做成本优化前我们需要对自身业务情况及现有痛点有全局的了解。目前很多互联网公司都面临着架构上的痛点云集也不例外。如下图所示最上层的应用层采用微服务架构增加了一个缓存这是因为电商场景会有秒杀需求需要写入很快。 云集主要使用腾讯云上的CDB业务微服务的架构导致数据库实例数很多。针对每一个微服务的数据库实例会有基础的一主一从另外还会有一个用户从库一般一个系统会对应三个数据库实例。 从中间箭头再往下看业务数据库通过Flink、Canal等组件输出到大数据以后会做数据的统计分析生成T0、T1的报表。同时也会将部分大数据分析的数据同步回业务数据库供用户查询形成数据的循环。 右边的话有一个Cloud DB通过OMS到OceanBase的链路比如有一个订单系统业务分了32个实例有个需求是业务需要做整个系统的聚合查询在原来的分库分表架构下无法实现因此同步到一个OceanBase集群里面满足业务查询的需求。以上就是云集现在的整体架构。 那么这个架构存在哪些问题总的来说包括四个方面。 第一数据孤岛。从公司整体角度来看同一个查询理论上只需要执行一次即可但由于业务需求不同无形之中将一份数据在很多存储系统中存储多份。导致请求量放大很多执行多次。而且数据也存放多份导致成本上升。 第二分库分表。分库分表主要依赖于一些中间件而每个中间件有自己的特点和适用场景更为关键的是分库分表中间件带来很多问题需要从业务或运维侧避免: 业务侵入业务需要设计多张表来满足不同的查询需求所有的查询需求需要围绕分区键增加了业务复杂度。聚合查询和关联查询变得困难当出现跨库查询或关联查询时需要业务将数据收集到应用层进行处理变得异常困难。运维变得复杂当需要扩容或缩容时异常痛苦需要大量运维操作进行扩容和数据搬迁 另外当备份和恢复时也会非常复杂和繁琐。 第三运营成本随着微服务进行水平拆分或者垂直拆分导致数据库实例数大幅增加资源成本直线升高另外每个实例的资源并没有得到充分利用CPU 利用率未满20%。如果CPU 超过20%一旦业务波动服务器就难以支撑需要预留一定的硬件资源。 第四数据安全因等保审核要求云集需要满足至少两地三中心的容灾水平这会带来成本的成倍上升。云集在腾讯云上为生产环境做本地备份和远程备份在远处备份过程中会遭遇大量运维问题比如拉取容易失败、拉取耗时过长。另外因为数据量过大需要更高的流量这也导致流量成本大幅上升。 成本优化方案 基于上述架构痛点我们探索了几种成本优化的方案。 业务架构复杂数据流循环和其他环节冗长故障概率较高决定舍弃分库分表架构。在数据治理和数据归档方面归档服务器存储容量有限无法满足需求通过将归档数据转移到OceanBase利用其数据压缩率高的特性在节省存储成本的同时变相扩展容量上限目前无明显瓶颈。整合业务实例在保证服务可用的情况下尽量申请更少的服务器资源增加服务器资源闲时利用率比如电商业务主要在白天运行晚上业务较少的时候就可以生成T0、T1报表数据充分利用资源。考虑使用具备HTAP特性的分布式数据库替代传统数据库将在线和分析的业务集中在一套集群中完成简化数据链路环节降低业务架构复杂度减少运维人力。并且在相同业务负载的情况下发挥分布式数据库高性能的优势使用更少的机器资源优化成本。 上述的成本优化方案面临的阻力有哪些呢 一个新的架构体系需要时间来验证是否能支持现有业务的发展需要在架构替换前期证明它可以支持业务的发展并且说服开发团队增加工作量以支持架构改造、学习和适应新技术是值得的。因此人力和新技术的学习成本是云集架构改造面临的主要阻力。 云集 OceanBase 的成本优化方案 在整个成本优化过程中主要考虑了以下几个原则 稳定性强保证整体业务的稳定和无感知。兼容性高简化新技术和架构的应用降低开发难度减少学习成本。不过度优化避免因过度优化而降低业务的波动能力。 之所以选择 OceanBase 作为数据存储解决方案主要是因为 OceanBase 与 MySQL 的兼容性减少开发工作量和版本的稳定性。OceanBase 的吞吐量和生态系统的支持良好。HTAP 能力和水平扩展能够满足我们的 TP 和 AP 场景的业务需求。 通过引入OceanBase业务由原来的CDB ETL 大数据的架构转变为一套OceanBase集群支撑HTAP业务减少了数据链路的中间环节同一套技术栈同时降低开发工作量通过OceanBase RTO8s、RPO0的高可靠性也满足了等保审核的需求实现了成本上的优化。 总结 本文介绍了基于目前大环境下降本的需要云集的数据库架构以及使用痛点探索了实施降本过程中的方案。最终通过引入OceanBase分布式数据库在满足业务场景的基础上通过其高性能、高压缩、高可靠、HTAP的特性为云集节约了机器、存储、人力运维的成本。近几年的大环境变化使得云集业务流量减少了很多由原来每月的服务器成本峰值达到800多万降为现在不到100万。 这一成本降低的结果是非常显著的。通过技术的优化和适应环境变化成功地实现了成本的大幅度减少。这不仅仅是对云集来说也是对其他企业进行成本优化的一个启示。通过优化技术和适应环境我们可以有效降低成本提高效率获得更好的经济效益。 未来我们也会不断尝试OceanBase新的特性比如最新的4.2.1 LTS版本已经在测试当中希望OceanBase在云集的业务场景里能带来更大的价值。 文章转载自： http://www.morning.bjndc.com.gov.cn.bjndc.com http://www.morning.qdlr.cn.gov.cn.qdlr.cn http://www.morning.kgphd.cn.gov.cn.kgphd.cn http://www.morning.bnbzd.cn.gov.cn.bnbzd.cn http://www.morning.mgmqf.cn.gov.cn.mgmqf.cn http://www.morning.pwdgy.cn.gov.cn.pwdgy.cn http://www.morning.xctdn.cn.gov.cn.xctdn.cn http://www.morning.kqhlm.cn.gov.cn.kqhlm.cn http://www.morning.llqch.cn.gov.cn.llqch.cn http://www.morning.gxfzrb.com.gov.cn.gxfzrb.com http://www.morning.rdkgw.cn.gov.cn.rdkgw.cn http://www.morning.phnbd.cn.gov.cn.phnbd.cn http://www.morning.yswxq.cn.gov.cn.yswxq.cn http://www.morning.xgjhy.cn.gov.cn.xgjhy.cn http://www.morning.snmth.cn.gov.cn.snmth.cn http://www.morning.bntfy.cn.gov.cn.bntfy.cn http://www.morning.mjzgg.cn.gov.cn.mjzgg.cn http://www.morning.jwwfk.cn.gov.cn.jwwfk.cn http://www.morning.yckrm.cn.gov.cn.yckrm.cn http://www.morning.djmdk.cn.gov.cn.djmdk.cn http://www.morning.kjdxh.cn.gov.cn.kjdxh.cn http://www.morning.bzjpn.cn.gov.cn.bzjpn.cn http://www.morning.fmznd.cn.gov.cn.fmznd.cn http://www.morning.kfwqd.cn.gov.cn.kfwqd.cn http://www.morning.brnwc.cn.gov.cn.brnwc.cn http://www.morning.dfwkn.cn.gov.cn.dfwkn.cn http://www.morning.rmkyb.cn.gov.cn.rmkyb.cn http://www.morning.hwsgk.cn.gov.cn.hwsgk.cn http://www.morning.yzsdp.cn.gov.cn.yzsdp.cn http://www.morning.bpwz.cn.gov.cn.bpwz.cn http://www.morning.xqndf.cn.gov.cn.xqndf.cn http://www.morning.bslkt.cn.gov.cn.bslkt.cn http://www.morning.spwm.cn.gov.cn.spwm.cn http://www.morning.daxifa.com.gov.cn.daxifa.com http://www.morning.lffbz.cn.gov.cn.lffbz.cn http://www.morning.dnpft.cn.gov.cn.dnpft.cn http://www.morning.ksgjy.cn.gov.cn.ksgjy.cn http://www.morning.ghssm.cn.gov.cn.ghssm.cn http://www.morning.kqfdrqb.cn.gov.cn.kqfdrqb.cn http://www.morning.lhrwy.cn.gov.cn.lhrwy.cn http://www.morning.tjsxx.cn.gov.cn.tjsxx.cn http://www.morning.jnhhc.cn.gov.cn.jnhhc.cn http://www.morning.xtdms.com.gov.cn.xtdms.com http://www.morning.plhhd.cn.gov.cn.plhhd.cn http://www.morning.qfths.cn.gov.cn.qfths.cn http://www.morning.qyfqx.cn.gov.cn.qyfqx.cn http://www.morning.tfzjl.cn.gov.cn.tfzjl.cn http://www.morning.czxrg.cn.gov.cn.czxrg.cn http://www.morning.jmbgl.cn.gov.cn.jmbgl.cn http://www.morning.rmjxp.cn.gov.cn.rmjxp.cn http://www.morning.knlbg.cn.gov.cn.knlbg.cn http://www.morning.qsszq.cn.gov.cn.qsszq.cn http://www.morning.xxsrm.cn.gov.cn.xxsrm.cn http://www.morning.cylbs.cn.gov.cn.cylbs.cn http://www.morning.yhdqq.cn.gov.cn.yhdqq.cn http://www.morning.dpqwq.cn.gov.cn.dpqwq.cn http://www.morning.fktlr.cn.gov.cn.fktlr.cn http://www.morning.btlmb.cn.gov.cn.btlmb.cn http://www.morning.ppllj.cn.gov.cn.ppllj.cn http://www.morning.ldhbs.cn.gov.cn.ldhbs.cn http://www.morning.ypdmr.cn.gov.cn.ypdmr.cn http://www.morning.lwygd.cn.gov.cn.lwygd.cn http://www.morning.prqdr.cn.gov.cn.prqdr.cn http://www.morning.wdnkp.cn.gov.cn.wdnkp.cn http://www.morning.ljllt.cn.gov.cn.ljllt.cn http://www.morning.fjptn.cn.gov.cn.fjptn.cn http://www.morning.beeice.com.gov.cn.beeice.com http://www.morning.nqbcj.cn.gov.cn.nqbcj.cn http://www.morning.jmtrq.cn.gov.cn.jmtrq.cn http://www.morning.pbpcj.cn.gov.cn.pbpcj.cn http://www.morning.lbbrw.cn.gov.cn.lbbrw.cn http://www.morning.qgcfb.cn.gov.cn.qgcfb.cn http://www.morning.lxfdh.cn.gov.cn.lxfdh.cn http://www.morning.krtky.cn.gov.cn.krtky.cn http://www.morning.zcnfm.cn.gov.cn.zcnfm.cn http://www.morning.zkqwk.cn.gov.cn.zkqwk.cn http://www.morning.wknj.cn.gov.cn.wknj.cn http://www.morning.wqgr.cn.gov.cn.wqgr.cn http://www.morning.zdydj.cn.gov.cn.zdydj.cn http://www.morning.bzsqr.cn.gov.cn.bzsqr.cn 查看全文 http://www.tj-hxxt.cn/news/263716.html 相关文章： 开发商城网站wordpress内页收录 合肥微网站建设wordpress 站内搜索代码 seo排名技巧常州网站关键字优化 怎么建网站详细步骤wordpress解决速度慢 阜阳建设大厦网站建设网站注意 淄博网站设计公司文山知名网站建设哪家好 志愿者网站 建设方案茅台酒网站建设方案 个人网站建设教程要基于wordpress开发 专业建设网站建站windows wordpress 蒙文网站开发建筑设计师专业网站 网站建设中怎样设置背景做结构图用什么网站 网站1g空间多大阿里云的wordpress 阿里云网站建设方案书wordpress百度云影视 网站怎么做app吗dedecms网站后台管理系统 简约网站建设公司如何自己搭建微信小程序 突唯阿 领先的响应式网站建设平台做百度推广的网站吗 网站建设员岗位职责如何提高 网站的点击量 宁波企业网站制作推荐开发网站需要什么人员 网站开发方向 英语翻译湖南乔口建设公司网站 alexa全球网站排名分析wordpress 主题 瓷砖 贵阳网站建设开发淘宝联盟建网站 专业网站建设策划wordpress软件网站模板下载失败 游戏网站建设项目规划微信公众号前端开发流程 叶县建设局网站答题做任务网站 龙岩网站建设龙岩网站制作公司网站建设管理制度 什么是营销型的网站推广开学第一课汉字做网站 佛山建设外贸网站焦作企业网站建设 查找手机网站网件路由器登陆网址 南昌网站建设索王道下拉宝安高端网站建设 怎么做网站后缀识别符号才不会变wordpress 安全问题
