炼数成金 大数据架构
订阅

架构

深入浅出 Kubernetes 架构
深入浅出 Kubernetes 架构
作者介绍王渊命,团队协作IM服务Grouk联合创始人及CTO,技术极客,曾任新浪微博架构师、微米技术总监。2015年作为联合创始人创立团队协作IM服务Grouk,长期关注团队协作基础工具和研发环境建设,Docker深度实践者。 ...
Lambda架构与推荐在电商网站实践
Lambda架构与推荐在电商网站实践
高可用架构分享及传播在架构领域具有典型意义的文章,本文根据王富平分享记录。转载请注明高可用架构公众号ArchNotes。王富平现为1号店搜索与精准化部门架构师,之前在百度从事数据挖掘相关工作,对实时处理有着深刻 ...
人生何处不架构:Tieto、SONY架构实践
人生何处不架构:Tieto、SONY架构实践
9月初的某一天,一位朋友的几个问题一下子把正吭哧吭哧敲键盘而处于自High状态的我拉入了一段冥思之旅。是啊,什么是架构师?架构师一天到晚到底在做什么工作? IT领域中有架构师,其他行业有没有?这是一个甚为庞大 ...
论架构师的自我修养
论架构师的自我修养
架构师,当然是脑力劳动者,但是,同样是脑力劳动也存在重大的差别。有一类脑力劳动的成果,是比较容易被评价的。或者能够判断其对错:比如考试的分数;或者能够比较其高下:比如两个人下棋分出输赢;或者能够交由市 ...
Apache Mesos与Google Kubernetes的不同之处在哪里?
Apache Mesos与Google Kubernetes的不同之处在哪里?
假如你刚入门集群计算,那么Kubernetes将会是很好的出发点;它快捷、易用、轻量的方式来处理集群导向开发的集成和体验。它提供了非常高瞻远瞩式的可移植性,让它得以支持多家提供商(微软、IBM、红帽、CoreOS、Mesos ...
在云端进行可扩展架构的大数据与数据科学
在云端进行可扩展架构的大数据与数据科学
如今,数据科学变得越来越复杂。这种复杂性由下面三个因素导致:增长的数据生产能力 —— 环视四周,数的出多少个能产生数据的设备呢?如果你用笔记本电脑来浏览本文的话算一个,如果身边有智能手机(以及安装的APPs ...
Apache Mesos和Mesosphere DCOS:历史、架构、发展和应用
Apache Mesos和Mesosphere DCOS:历史、架构、发展和应用
Mesos 是一个很年轻的开源项目,它的理念是怎样的? 它的整体架构以及服务对象又是什么? 基于此的 Mesosphere DCOS 又是如何定位的? 本文作者就这些话题展开了探讨。Mesos 发展史Mesos 是一个早在2009年由 Benjamin H ...
深入 HBase 架构解析(2)
深入 HBase 架构解析(2)
前言这是《深入HBase架构解析(1)》的续,不多废话,继续。。。。HBase读的实现通过前文的描述,我们知道在HBase写时,相同Cell(RowKey/ColumnFamily/Column相同)并不保证在一起,甚至删除一个Cell也只是写入一个新 ...
深入 HBase 架构解析(1)
深入 HBase 架构解析(1)
前记公司内部使用的是MapR版本的Hadoop生态系统,因而从MapR的官网看到了这篇文文章:An In-Depth Look at the HBase Architecture,原本想翻译全文,然而如果翻译就需要各种咬文嚼字,太麻烦,因而本文大部分使用了 ...
PostgresSQL HA高可用架构实战
PostgresSQL HA高可用架构实战
本文由萧少聪在高可用架构群所做的分享整理而来,转载请注明高可用架构公众号:ArchNotes。萧少聪(花名:铁庵),广东中山人,阿里云RDS for PostgreSQL/PPAS云数据库产品经理。自2006年以来,长期从事RedHat及SuSE ...
流式大数据处理的三种框架:Storm,Spark和Samza
流式大数据处理的三种框架:Storm,Spark和Samza
许多分布式计算系统都可以实时或接近实时地处理大数据流。本文将对三种Apache框架分别进行简单介绍,然后尝试快速、高度概述其异同。Apache Storm在Storm中,先要设计一个用于实时计算的图状结构,我们称之为拓扑(t ...
架构师必知的各种开源实时流处理系统
架构师必知的各种开源实时流处理系统
这里对目前业界开源的一些实时流处理系统做一次小结,作为日后进行技术调研的参考资料。S4S4(Simple Scalable Streaming System)是Yahoo最新发布的一个开源流计算平台,它是一个通用的、分布式的、可扩展性良好、具 ...
服务发现:Zookeeper vs etcd vs Consul
服务发现:Zookeeper vs etcd vs Consul
如果使用预定义的端口,服务越多,发生冲突的可能性越大,毕竟,不可能有两个服务监听同一个端口。管理一个拥挤的比方说被几百个服务所使用的所有端口的列表,本身就是一个挑战,添加到该列表后,这些服务需要的数据 ...
5大架构:细数数据平台的组成与扩展
5大架构:细数数据平台的组成与扩展
One size does not fit all! 数据处理平台已不集中于传统关系型数据库,各种其他平台层出不穷,也各有其适用范围。从哪些角度去理解各种数据处理平台的设计思想及发展演进呢?下面我们从几个角度讨论一下:
浅显易懂的RPC平台框架(下篇)
浅显易懂的RPC平台框架(下篇)
四、Motan实战1、Motan RPC基本使用方式Motan RPC是按接口提供和调用服务,以java服务为例,一般由服务提供方声明服务的接口类,并同时提供一个默认的RPC Client调用配置,然后将接口类与默认的Client配置xml文件一 ...

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

社区热帖

     

    GMT+8, 2018-7-20 15:01 , Processed in 0.079935 second(s), 16 queries .