容器技术与微服务架构在跨境电商领域的集成实践培训课件.pptx

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,容器技术与微服务架构,在跨境电商领域集成实践,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第1页,纲领,一、跨境电商业务特征及技术特点,二、微服务架构及面临困境,三、基于Docker私有容器云平台设计,四、Docker实践中碰到问题及处理方案,五、总结,容器技术与微服务架构在跨境电商领域集成实践,陈天影,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第2页,一、跨境电商业务特征及技术特点,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第3页,海外市场拓展,服务,跨境支付,DHpay,综合物流服务,DHlink,互联网金融服务,DHfinet,社交商务,Socialshops,其它,增值服务,跨境电商业务特征,8个,多语言,平台,国际合作搭档,物流,&,支付,约,120,万家,国内供给商；,1000,万,买家,遍布全球,230,个,国家和地域,4000,万,在线产品,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第4页,业务多,品,类,多,覆盖广,流,量,大,跨境电商技术特点,可扩展,高并发,海外布署,多机房,可管理,可监控,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第5页,二、微服务架构及面临困境,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第6页,微服务框架,多语言,监控,治理,微服务架构要处理问题：服务通信、路由寻址、服务监控、服务治理、多语言,业务代码,服务消费者,Client,Agent,服务提供者,业务代码,Server,Agent,服务提供者,业务代码,Server,Agent,异构语言,业务代码,服务消费者,通信和路由,服务注册中心,-zookeeper,集群,apsaras,服务治理,实时数据监控,历史信息,统计,报警,服务依赖,关系分析,服务流量,控制,调用链路,追踪,性能瓶颈,分析,SLA,分析,暂停,恢复,下线,服务监控,异构,集群,语言,Proxy,Http,Kafka,Storm,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第7页,解耦（模块化），易扩展,效率（开发、测试、布署）,高可用（多实例）,弹性伸缩，灵活应对峰值流量（分布式、独立运行）,多机房布署,服务拆分之后（静态依赖关系）,优势：,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第8页,困境,微服务独立性使得系统具备弹性伸缩能力，但仍需人为介入,开发效率提升、交付速度有所提升，新业务上线仍受限于资源申请流程,微服务架构造成模块数量快速增加，服务粒度与资源粒度矛盾,一台服务器布署多个微服务，产生资源竞争,运行环境差异性引发错误,布署海外机房周期太长（每个应用一一分配资源、配置、布署）,降低物力资源成本需求,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第9页,Docker,标准化：集装箱式交付方式，快速布署，并防止运行环境差异化,轻量：资源占用小、开启速度快，在一个服务器上能够布署很多容器,便捷：直接布署应用、无需申请资源,隔离：一定资源隔离性,灵活：能够快速回滚和更新变更,开源：生态系统发展快速,成本：搭建成本低、学习成本低,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第10页,三、基于Docker私有容器云平台设计,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第11页,设计标准,兼容已经有软件架构,混合布署，历史资产无缝迁移,降低对已经有业务开发流程影响,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第12页,整体架构,服务集群,Infrastructure,AWS,*,云,物理机,虚拟机,apsaras,统一监控,服务监控,Docker,主机,Docker,服务,Docker,主机,Docker,服务,apsaras,容器统一配置中心,(Etcd),Docker,Registry(Harbor),虚机,服务,Service,物理机,服务,Service,容器监控,(shell,+,influxdb),(zk+,日志分析,),主机监控,zabbix,监控代理,Swarm,Agent,Docker,Daemon,监控代理,Swarm,Agent,Docker,Daemon,容器管理平台,自定义调度策略,Swarm,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第13页,开发运维流程改变,DEV：代码提交、构建、,申请机器资源,、,发版,OPS：集群、主机维护（一键初始化），,镜像维护,，线上监控,DhDocker,Controller,Jenkins,Git,Registry,Cluster1,Commit,Build,管理平台,Pull,Docker pull,Monitor,DEV,OPS,镜像 维护,主机 维护,公布,DockerDaemon,Container,Container,DockerDaemon,Container,Container,Cluster2,DockerDaemon,Container,Container,DockerDaemon,Container,Container,Elastic computing,docker,run,Monitor,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第14页,四、Docker实践中,碰到问题及处理方案,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第15页,碰到问题,监控,排障,镜像,浮动,IP,混合布署,混合网段,容器状态,不一致,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第16页,Problem1-,镜像制作和维护,VS,优点：,防止mount，应用和镜像一体,缺点：,频繁构建,镜像数量猛增,改造工作量大,不一样环境配置文件不一样,优点：,镜像不用重新构建,缺点：,全部宿主机维护应用副本,违反了Docker集装箱标准,BaseImage,APP/BIN,BaseImage,+,APP/BIN,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第17页,开发时，镜像和应用分离，,OPS维护,Dockerfile，,DEV维护代码,布署时，镜像和应用合体,多环境不一样配置，,分布式配置管理中心+配置文件中心,Container,APP/BIN,Container,APP/BIN,Docker,Daemon,Registry,Conf,Repository,Deploy,OPS,Solution1-基础镜像+应用下载,Build,Repository,DEV,Container,APP/BIN,DEV,Dockerfile,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第18页,Problem2-混合布署网段互通,网络连通要求：,同一宿主机内容,器互通,不一样宿主机之间,容器互通,容器与其它虚机、,物理机互通-,混合部,署必要条件,Legacy,资产,Vmware,集群,物理机,其它,DockerDaemon,Container,Container,Container,Container,DockerDaemon,Docker,集群,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第19页,Docker网络方案,bridge模式：与外界通讯用端口映射，NAT增加通讯复杂性,container模式：单机多个容器之间共享网络,host模式：共享主机网络，端口无法重用，轻易冲突,自定义,Bridge,network,is,useful,in,cases,where,you,want,to,run,a,relatively,small,network,on,a,single,host.,Overlay,network,multi-host,connection，,need,swarm,or,a,key,store.,MACVLAN,network,multi-host,connection,Customized,network,plugin,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第20页,Solution2-桥接网络,打通容器与局域网网络,Docker,集群,DockerDaemon,Container,Eth0,Container,Eth0,Br0,Eth0,DockerDaemon,Container,Eth0,Container,Eth0,Br0,Eth0,物理交换机,Vmware,集群,物理机,其它,Legacy,资产,docker,network,create,-driver=bridge,-o,work.bridge.name,=br0,-gateway,=192.168.2.14,-aux-address,DefaultGatewayIPv4=,192.168.2.254,-subnet,=192.168.2.0/24,dockernet,docker,run,-d,-net,=dockernet,tomcat:7.0,Docker,Deamon,-iptables=false,-ip-forward=false,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第21页,优点：,性能很好；能够在一台物理机上布署多个不一样网段容器,限制：,Docker,1.11,版本MacVlan依然是experimental;,在1.12版本已,标注为：,MacVlan,driver,is,out,of,experimental,#23524,MacVlan,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第22页,Problem3-混合网段容器布署,Problem：,网段过大造成广播风暴，混合网段怎样,权衡资源调度和IP分配,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第23页,-label,subnet=192.168.,3,.0/24,DockerDaemon,Container,Container,Solution3-自定义IP资源调度策略,DhDocker,Controller,Swarm,+,自定义调度策略,-label=,？,Cluster,-label,subnet=192.168.,4,.0/24,DockerDaemon,Container,Container,-label,subnet=192.168.,2,.0/24,DockerDaemon,Container,Container,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第24页,Problem4-浮动ip,Problem：,浮动ip,重启一下docker,daemon/容器，ip就变了,Ip混乱，不利于定位问题,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第25页,Solution4-使用固定ip,使用固定ip,docker,run,d,-ip,=192.168.11.23,-net=dockernet,tomcat,引入IPAM模块，负责IP池创建和维护，IP资源占用和,释放,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第26页,Problem5-排障,持久化日志,将日志mount到主机，主机上运行轻量级Agent进行日志采集，,集中分析,实时查看：检验日志，调整配置，重启应用，查看资源,使用率,装一个SSH,Server,vs,Docker,Exec,别把容器当虚机使！,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第27页,Solution5-Docker,Web,Shell,Docker,Web,Shell实现从Web浏览器以类似SSH方式登录并操作Docker容器,DhDocker,Controller,Web,Browser,Web Socket,Docker Exec,Container,Web,浏览器,负责界面展现。运行,JS,脚本，经过,Web,Socket,与,Docker,Controller,建立通信链路。,DhDocker,Controller,是,Docker,容器应用控制中心，作为桥梁，负责消息,转发。经过,Docker,HTTP,API,与,Docker,Daemon,建立通信链路，利用,Exec,Start,返回数据流承载,Docker,Controller,和,Docker,Daemon,之间交互数据。,Docker,Daemon,提供,HTTP,API,接口给外部系统调用以访问容器内部。,这里用,到,API,包含：,Exec,Create,、,Exec,Start,、,Exec,Resize,Docker,Daemon,Container,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第28页,Docker,Web,Shell,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第29页,Problem6-监控方案选择,docker,stats，,docker原生,memory计算争议,性能较差,cAdvisor，Google开发，容器和主机级别监控,一定学习成本,与已经有监控报警系统集成有难度,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第30页,Solution6-自研Shell实现,容器级别数据搜集,应用级别数据统计,主机级别-容器总数及状态（性能由zabbix监控）,Shellon,Docker,Host,数据采集,InfluxDB,汇总分析,报警系统,策略和报警,Shellon,Docker,Host,数据采集,Shellon,Docker,Host,数据采集,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第31页,DB,Problem7-容器状态同时,异常退出,命令行创建,Cluster,DockerDaemon,Container,Container,Container,DhDocker,Controller,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第32页,Docker事件机制,deleted,untagged,tagged,untag,import,pull,docker delete,docker import,docker,pull,delete,tag,push,docker tag,docker push,镜像事件,容器事件,容器技术与微服务架构在跨境电商领域的集成实践培训课件,第33页,Solution7-监听容器事件,import,(,os,dockerApi,