炼数成金 大数据架构
订阅

架构

基础设施助力双11(一):X86 CPU的定制和演进
基础设施助力双11(一):X86 CPU的定制和演进
双11的最终成功是一个从上层业务应用到底层服务器集群的庞大系统协同的结果,其中作为计算力输出主角的定制X86 CPU功不可没 。双11只是阿里业务对计算需求的高速持续增长的一个缩影。而与之形成鲜明对比的是,支撑半 ...
聊聊HTTPS环境DNS优化:美图App请求耗时节约近半案例
聊聊HTTPS环境DNS优化:美图App请求耗时节约近半案例
DNS 服务作用于网络连接之前,将域名解析为 IP 地址供后续流程进行连接。DNS 查询时,会先在本地缓存中尝试查找,如果不存在或是记录过期,就继续向 DNS 服务器发起递归查询,这里的 DNS 服务器一般就是运营商的 DNS ...
聊聊高并发长连接架构:百万在线的美拍直播弹幕系统如何实现
聊聊高并发长连接架构:百万在线的美拍直播弹幕系统如何实现
直播弹幕指直播间的用户,礼物,评论,点赞等消息,是直播间交互的重要手段。美拍直播弹幕系统从 2015 年 11 月到现在,经过了三个阶段的演进,目前能支撑百万用户同时在线。比较好地诠释了根据项目的发展阶段,进行 ...
企业并购后的IT整合策略
企业并购后的IT整合策略
在中国企业做强做大愿望的驱动下,企业间的并购活动变得越来越频繁。在信息化已经广泛成为企业业务运作工具的今天,IT系统整合成为企业并购以后不可避免的问题。有人认为,明基并购西门子的失败,很大的原因就是因为 ...
APP分层架构设计随想
APP分层架构设计随想
互联网分层架构的本质,是数据的移动。互联网分层架构演进的核心原则:让上游更高效的获取与处理数据(复用),让下游能屏蔽数据的获取细节(封装)。不管数据怎么移动,最终都会汇聚到客户端。服务端的分层架构设计 ...
美团点评数据库高可用架构的演进与设想
美团点评数据库高可用架构的演进与设想
在2015年之前,美团点评(点评侧)长期使用MMM(Master-Master replication manager for MySQL)做数据库高可用,积累了比较多的经验,也踩了不少坑,可以说MMM在公司数据库高速发展过程中起到了很大的作用。整个MyS ...
中小型研发团队架构实践之集中式日志ELK
中小型研发团队架构实践之集中式日志ELK
日志可分为系统日志、应用日志以及业务日志,系统日志给运维人员使用,应用日志给研发人员使用,业务日志给业务操作人员使用。我们这里主要讲解应用日志,通过应用日志来了解应用的信息和状态,以及分析应用错误发生 ...
京东618大促网关承载十亿调用量背后的架构实践
京东618大促网关承载十亿调用量背后的架构实践
网关系统需要扛几十亿的流量调用,接口的平稳运行、每一个接口在后端服务之后的性能耗损都非常重要。比如我们使用了一个Redis集群,然后构建了两个机房,每一个机房都搭建了一个Redis集群,这样的话就能够很好地保证 ...
如何打造应对超大流量的高性能负载均衡?
如何打造应对超大流量的高性能负载均衡?
什么是负载均衡呢?用户输入的流量通过负载均衡器按照某种负载均衡算法把流量均匀地分散到后端的多个服务器上,接收到请求的服务器可以独立的响应请求,达到负载分担的目的。从应用场景上来说,常见的负载均衡模型有 ...
摩拜物联网架构演进之路:数据与架构齐驱,看摩拜创造奇迹
摩拜物联网架构演进之路:数据与架构齐驱,看摩拜创造奇迹
在Wikipedia上对架构的定义为The process and the product of planning,designing,and constructing structures.也就是规划、设计及构建的过程和产物。架构有很多种,包括研发架构,团队架构各种,今天分享的主题主 ...
几种常见的微服务架构方案—ZeroC IceGrid、Spring Cloud ...
几种常见的微服务架构方案—ZeroC IceGrid、Spring Cloud ...
微服务架构是当前很热门的一个概念,它不是凭空产生的,是技术发展的必然结果。虽然微服务架构没有公认的技术标准和规范草案,但业界已经有一些很有影响力的开源微服务架构平台,架构师可以根据公司的技术实力并结合 ...
中小型研发团队架构实践三要点
中小型研发团队架构实践三要点
中小型研发团队很多,而社区在中小型研发团队架构实践方面的探讨却很少。中小型研发团队特别是 50 至 200 人的研发团队,在早期的业务探索阶段,更多关注业务逻辑,快速迭代以验证商业模式,很少去关注技术架构。这 ...
体系化认识RPC
体系化认识RPC
RPC(Remote Procedure Call),即远程过程调用,是一个分布式系统间通信的必备技术,本文体系性地介绍了 RPC 包含的核心概念和技术,希望读者读完文章,一提到 RPC,脑中不是零碎的知识,而是具体的一个脑图般的体 ...
深度解密京东登月平台基础架构
深度解密京东登月平台基础架构
登月平台的基础架构以Docker+Kubernetes为中心,底层基础设施包括CPU、GPU、FPGA计算资源,IB、OPA高速互联网络以及多样化的文件系统,之上是机器学习框架和算法库,最上层是业务应用。管理中心包括权限管理、任务管 ...
链家大数据多维分析引擎实践
链家大数据多维分析引擎实践
OLAP 翻译成中文叫联机分析处理,OLTP 叫联机事务处理。OLTP 它的核心是事务,实际上就是我们常见的数据库。我们业务数据库就是面向于事务。它的并发量会比较高,但是操作的数据量会比较小。它是实时更新的。数据库 ...

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

社区热帖

     

    GMT+8, 2018-12-19 21:57 , Processed in 0.114523 second(s), 16 queries .