当前位置:资讯 > 正文

JFrog帮助制造业企业管理超大制品包实现全球分发

2021-10-20 11:09:07  来源:全球财经网
图片 2.JPG

随着车企、手机厂商、家电等制造企业业务的快速发展,软件应用开发规模也随之不断扩大。不同类型的交付制品的管理也成为DevOps落地的一大难题。制品分散管理,存储随意,下载困难,分发缓慢等现象长期受到产线用户挑战,急需快速解决。经过业务场景分析及用户调研后,总结为以下通用问题:

痛点

1,制品存量大

制品达到PB级别,分散存储到S3及EMC存储上,管理分散,浪费存储,并且数据量在成倍增长。

没有合理的制品清理机制,导致过多无效存储

2,制品质量缺失

制品无质量标签,筛选版本复杂,增加迭代时间,测试人员经常下错版本,浪费时间

制品无版本概念,经常出现制品覆盖现象,最终导致发布失败

3,制品分发复杂

由于存量过大,国内多地研发中心、海外研发中心同步制品不可行,多地传输浪费带宽

制品无统一管理,分散到不同团队,不同集群上,不便于数据资产梳理

制品往往需要分发到不同的工厂、合作伙伴、售后站及IoT终端,场景复杂

4,制品下载缓慢

单文件最大达到100G+,下载时经常出现丢包、中断等现象,用户体验极差,浪费时间

解决方案

1,解决能瓶颈

在下述部署条件下进行能测试,得到了一份超级满意的测试报告,在极端数据读写的压力下,6节点Artifactory的每小时吞吐量达到了10TB级别,目前基本可以承载国内所有软件研发企业制品的吞吐量,具体测试报告可以联系JFrog的工程蛙们了解测试细节。

图片 5.JPG

2,解决制品大批量下载问题

JFrog提供高能下载工具jfrog cli,可实现分片、多线程、断点续传等下载方式,基本可以打满网络带宽

JFrog在服务端提供cache技术,可实现有ssd磁盘缓存热文件策略,如缓存空间大,可缓存所有热文件,提升下载速度

由于服务端网络端口依然存在瓶颈,可使用p2p技术进行分流,提升下载速度3-4倍

图片 6.JPG

3,异地分发能力

私有化部署+Saas服务,实现制品库多云多数据中心混合架构,通过仓库联邦及高速分发两种策略,链接世界所有节点,实现制品分发

图片 7.JPG

用户案例

某手机厂商案例

1,某手机厂商,使用JFrog Artifactory 6个节点,架构设计如下:

图片 1.JPG

承载业务量:

接管整机构建daily及Release项目50个,每月420T整机制品包,目前共存储4PB+数据

接管组件构建项目11000个,每周组件个数231000,150T组件包,目前共存储1PB+数据

每小时上传流量接3TB,下载流量接2TB

峰值上传流量15G/S,下载流量5G/S

制品库存储总量达到了6PB

2,解决质量缺失

通过JFrog Artifactory的元数据及AQL功能,确保每个制品均具备10条以上的质量数据标签,实现开发与测试之间零沟通,使版本具备自动化筛选能力,避免下错版本,浪费时间。

具体实现为,开发团队构建制品版本,并将过程数据、需求数据、测试数据、匹配机型数据等自动补全在制品的元数据属中,如未携带此数据,则无法成功上传。测试人员在使用制品进行烧机测试时,则通过自动化脚本,自动筛选符合自己机型并具备一定质量属的制品,自动测试,整个版本筛选过程无需人与人的沟通,一切自动化完成,提高效率,避免出错。

图片 3.JPG

通过此项改进,获取了如下收益

打造制品可信台,确保所有交付组件包携带质量元数据,便于快速定位版本

制品清理机制,定期实现制品清理

3,解决制品分发

在此方案架构下,为了统一管理集团所有产线制品,后期将制品分布在5个Artifactory集群中管理,其中app应用使用一个物理集群,不同产线整机版本各使用一个集群,私服及Docker镜像使用一个集群。由前段CI工具统一控制制品写入位置及读取位置。另外在成都、重庆、上海分中心建立只读集群、实现制品快速分发,多地可读。同时在印度、印尼、孟加拉、阿尔及利亚等地工厂建立只读集群,按需分发制品到工厂。

为了优化下载速度,该方案中使用了JFrog Artifactory的p2p下载功能,在不同地域的分厂中没有设置只读节点,而是使用p2p的peer节点,节约成本,加速下载。整体制品库架构如下:

图片 4.JPG

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

关键词: 实现 全球 分发

推荐阅读

运动型轿车是什么 运动型轿车与普通车有何区别?

运动型轿车凭借着外观酷炫,动力性能强的特点,深受国内众多消费者的喜爱。特别是在年轻消费者心目中,运动型轿车基本上是购车的首选。但是 【详细】

汽油清洗剂是什么 汽油清洗剂加在汽油里是干嘛的?

最近有很多车主反映加油的时候总是建议用汽油清洁剂。但是,大部分人还是不太了解,还有就是一部分人纳闷汽油清洗剂加在汽油里是干嘛的?汽 【详细】

中国最便宜的汽车是哪个 最便宜的汽车汇总

现在汽车已经成为了大家最常见的交通代步工具了。但是,依然还是有很多的家庭非常的需要代步工具,却买不起特别贵的汽车。所以今天,我们就 【详细】

伊莱克斯冰箱质量怎么样 伊莱克斯冰箱质量好不好?

伊莱克斯冰箱质量怎么样:在2018年全球500强企业中,伊莱克斯排名第162位,在2020年全球2000强企业中,伊莱克斯排名第1965位,可见伊莱克斯 【详细】

劳动保护用品是什么 劳动保护用品有哪些?

劳动保护用品有哪些?劳动防护用品分为特殊劳动防护用品和一般劳动防护用品,一般劳动防护用品是指未列入目录的一般劳动防护用品。以下产品 【详细】

相关新闻

实现高并发秒杀的七种方式

引言商品秒杀-超卖解决商品超卖方式一(改进版加锁)方式二(AOP版加锁)方式三(悲观锁一)方式四(悲观锁二)方式五(乐观锁)方式六(阻塞 【详细】

全球看热讯:3D渲染引擎 HOOPS Visualize 2023全新发布-增加对顶点着色器支持

HOOPSVisualize是一款工业级3D渲染引擎,可以用于打造移动端和PC端工程应用程序,其灵活、分层的场景管理引擎,支持处理各种3D模型 【详细】

世界看热讯:「升级」Hubstudio多账号安全管理浏览器之扩展中心上线啦!

Hubstudio多账号安全管理系统,到目前为止已经安全管理600w以上的环境账号,而且小编发现大家在环境中最常用的就是插件哦,所以为了给大家在 【详细】

汽车早报 - 消息称蔚来布局百万元级别电动车 广汽称将继续为讴歌中国客户提供售后服务

吉利称2022年新能源销量较上年翻三番1月9日,吉利控股集团官微发布消息称,2022年12月,吉利汽车集团旗下新能源(含吉利、几何、领克、极氪、 【详细】

今头条!车轮上的2022∣新能源与汽车出口带动:全国乘用车零售量同比增长1.9%

21世纪经济报道记者杜巧梅北京报道“‘新十条’改变了车市的封控状态,市场明显回升,部分有购买力的消费者希望尽快提车;同时部分政策到期加 【详细】

谷歌文档新功能:看到非打印字符

谷歌周一在一篇博文中宣布,该公司正在为GoogleDocs增加一项功能,让你看到非打印字符,如空格、制表符和各种类型的断句。该选项将在视图菜单 【详细】

世界新消息丨一加新机质感高级,更有多项黑科技加持,3999的价格入手值吗?

最后一加11出来的时候确实也是惊艳了所有人,产品力相当不俗,而且外观设计什么的也很好看,下面就跟着笔者一起来了解一下吧。 【详细】

焦点信息:中国手机品牌在2022年拿下俄罗斯市场份额65% 但高价机一个没有

2万~4万卢布最受喜欢的手机型号是:RedmiNote10Pro、Honor50Lite、三星GalaxyA52、三星G 【详细】

2022年这5款熟悉的产品向我们告别

在过去的一年里,有很多新产品发布,当然也有很多产品与我们就此别过。这些产品曾陪伴我们的生活,给我们带来欢乐,帮助我们成长。 【详细】

即时:陈副区长事件,引出一个老生常谈的问题,腾讯是否会保留聊天记录

陈副区长事件出来以后,我觉得,她,以及那男的,第一时间,都会删除手机上的聊天记录。如此,再要查那个男人是谁,就难度很大了。 【详细】

我国首个具备独立运行能力的新能源储能项目在内蒙古并网通电

日前,内蒙古自治区阿拉善盟额济纳旗“源网荷储”微电网示范项目完成建设,并初步实现并网供电,下一步将进入联调联试阶段。 【详细】

上海奉贤区初中转学条件2023

上海奉贤区初中转学条件2023寒假,上海奉贤区初中转学对象、不予转学情况如下:一、转学对象1、本市户籍学生;2、随父母到本区居住的非本市户籍 【详细】

新冠病毒变异逻辑的猜测

新冠病毒经历了多代变异。我有个大胆的猜测这个病毒变异的逻辑,是这样的:在遇到前面已经感染的毒株已经无法继续传播了,于是逼着毒株进行了变 【详细】

世界讯息:充1次用10天!史上续航最强的国产手机,太猛了

骁龙8Gen2继续支棱起来,性能释放猛功耗也不错,不需要再担心这方面问题。而iQOO、Redmi和realme持续发力,快充已经 【详细】

全球视点!10个暗藏惊喜的微信小程序,个个好用不要钱,还请低调使用

微信上的小程序非常便捷,无需安装就能使用。下面给大家推荐10个暗藏惊喜的微信小程序,个个好用不要钱,还大家请低调使用。 【详细】

世界热头条丨刘强东告别他的时代?回笼640亿携孕妻现身英国,祖宅半夜被泼漆

但有网友透露出发现刘强东和怀孕的章泽天出现在伦敦街头,有人推测刘强东回笼了640亿资金要移居海外,他老家祖宅半夜还曾被人泼上了油漆。 【详细】

更便捷!威海市立医院互联网医院上线“新冠感染门诊”

为保障群众就医安全、便利,威海市立医院充分发挥互联网医院线上复诊、续方开药等优势,及时开设发热线上咨询、心理线上咨询等互联网医疗服务 【详细】

七大常用的AR开发工具,总有一款适合你!

8thWall的现实引擎于2021年推出,使基于Web的增强现实体验能够立即在大量iOS和Android设备、计算机、平板电 【详细】

天天简讯:Telia为NCC提供面向北欧数字基础设施的全方位服务的ICT解决方案

该解决方案包括用于NCC数字基础设施关键部分的通信服务和数据网络。这些是可扩展、经济高效且灵活的解决方案,可以轻松地用于连接整个公司的新 【详细】

【全球播资讯】小米13Ultra最快2月底见面?或告别万年USB 2.0

声音|小白小米13、小米13Pro发布后大家也一直期待着小米13Ultra,早前消息预计是今年三四月发布,现据91mobiles独家报道 【详细】

关于我们  |  联系方式  |  免责条款  |  招聘信息  |  广告服务  |  帮助中心

联系我们:85 572 98@qq.com备案号:粤ICP备18023326号-40

科技资讯网 版权所有