大数据时代 金山云容器引擎实践为用户创造更多价值( 二 )
大数据业务对计算的需求是动态的 , 并且波动较大 , 金山云容器引擎支持Cluster AutoScaler实现集群工作节点的弹性伸缩 , 节省开支 。 目前 , 金山云容器引擎本身免费对外提供使用 , 同时提供免费的企业级容器镜像仓库服务 , 用户仅需支付所使用资源的费用 , 工作节点支持预付费包年包月、按日配置付费、按小时配置计费等灵活的计费策略选择 。
----大数据时代 金山云容器引擎实践为用户创造更多价值//----
整体框架图
大数据云平台利用容器引擎集群、云物理机集群、云服务器集群构建大数据控制平台和共享服务资源池 , 为用户提供租户隔离、安全可靠的大数据托管服务 。
----大数据时代 金山云容器引擎实践为用户创造更多价值//----
大数据平台在容器引擎的部署方案如上图所示:
1、在endpoint容器引擎集群中部署微服务架构 , 如:数据管理(元数据管理、数据权限、数据质量、数据地图等)、数据服务、数据采集 , 共享的组件mysql ,redis等基础服务 。
2、在online/offline容器引擎集群中部署的大数据组hive、spark、flink、hbase、kafka、zookeeper、ElasticSearch等 , 目前hive、hbase等用的是HDFS存储 , 而zookeeper、ElasticSearch、kafka用的是NFS、KS3存储 。
目前 , 金山云大数据平台已使用容器引擎平台部署在线和离线的业务 , 支持海量数据处理 , 在整个过程双方团队积累了丰富的大数据使用经验 , 持续在spark on kubernetes的动态资源、kube-scheduler调度策略等方面进行优化 , 升级产品功能 , 并赋能更广泛的大数据相关用户 , 为用户创造更多价值 。
作为CNCF基金会黄金会员之一 , 金山云致力于推动基于容器技术的云原生产品方案落地实践 。 目前 , 金山云已通过CNCF Kubernetes服务提供商认证 , 容器引擎已通过CNCF Kubernetes一致性认证以及可信云容器解决方案认证和可信云Kubernetes认证 。 此外 , 金山云拥有CNCF CKA、CKAD认证的高级技术专家团队 , 为用户提供专业的产品和服务支持 。
大数据时代 金山云容器引擎实践为用户创造更多价值。
----大数据时代 金山云容器引擎实践为用户创造更多价值//----
大数据时代 金山云容器引擎实践为用户创造更多价值。 欲了解更多详细 , 欢迎点击(金山云容器引擎:https://www.ksyun.com/post/product/KCE.html)
推荐阅读
- 『IT时代网』世纪华通领衔游企再迎爆发式增长,5G新基建提速云游戏商业化进程
- 「百度」百度发布直播搜索大数据:疫情下电商及知识类直播增速明显
- 「科技小数据」消费信贷的客户呈现出年轻化的趋势,新消费崛起
- 「产业气象站」5G时代大有可为?2020为何会出现5G无用论?
- 「咕叽说历史」战国时代:齐魏大战·围魏救赵
- 『我的第一部5G手机』百度产品笔试题:5G时代会产生哪些应用生活场景?(上)
- 【IT时代网】世纪华通领衔游企再迎爆发式增长,5G新基建提速云游戏商业化进程
- 中国新闻网■中国LAMOST发布最新巡天数据集 光谱总数达1448万条
- #山川文社#为什么时代越发展,中国男人的胡子越短?,男人该不该留胡子
- 原呵呵@Pro预见摄影时代的未来,带来了摄影新视野,华为P40
