SACC2013-手记

SACC简介

SACC咋一看这几个字母貌似没啥感觉,但是他的全称“中国系统架构师大会”(System Architect Conference China)听起来倒是很牛逼。

有幸参加了今年的SACC,本次会议是由IT168 ITPUB ChinaUnix这三家“国内著名企业主办”,时间2013年9月4日-2013年9月6日,地点北京福朋喜来登酒店。

* APP微信先行

提前会议主办方提供了手机客户端还有微信公共账号,除了可以了解到会议相关的信息外还可以跟嘉宾微薄互动,这点还是比较不错的与时俱进,建议下次ADC可以参考。

* 住宿情况

主办方安排的酒店是雅乐轩,就在会场边上路途上减少了很多时间,环境还算干净500元一个房间不知道在北京是不是算贵。

这个桌子上某人连续3天加班到凌晨,其实我是想说的是左边的接口比较全HDIM,USB,DIV接口一应俱全。

* 吃饭情况

SACC的A票包含午餐,但是由于成本考虑最后还是选择了不带午餐的B票。但是悲催的是中午下雨冒着大雨出去吃饭真是不爽,更悲催的是记错了出差补助以为是一天70元/天(实际是150元/天),结果为了不超标就吃酱油炒饭,加州牛肉面了。

会议内容

大会的主要议题无碍乎就是那么几个目前流行的关键词(“云”,“大数据”)和以往的技术会议一样SACC也少不了广告,个人感觉本次SACC的广告还真比较少而且会议的内容干货也比较少。

本次我也主要参加了以下几个Topic :

EMC下一代软件定义存储架构

EMC本次会议的铂金赞助商之一,分享的主要内容还是自家的产品属于硬件方面。范围主要是以下图

核心思想就是想告诉用户,EMC在云计算(Pivotal),虚拟化(Vmware),高端存储(EMC2)都是比较牛逼的,他们的产品是可以提供统一的解决方案,并且可以根据用户需求重新定义,有点类似于一旦拥有别无所求的意思。

大型数据中心演进历程

LSI也是本次大会的铂金赞助商之一,提供大数据场景下以下几个问题以及对应他们解决方案的产品。

  • 数据采集(DataBolt 比SATA磁盘带宽提高30%-60%)
  • 数据存储 (Syncro 容量、灵活性、功耗、对象存储)
  • 数据分析 (NytroTM MegaRAID卡助力Hadoop 任务完成时间减少25%)

目前淘宝有10W+台服务器上的SSD都使用着LSI的芯片,有5K+台服务器使用这个LSI的PCIE卡。所以LSI也是淘宝合作伙伴之一,而会后有幸和子柳一起跟Robert Ober做了一下交流,苦逼的是我和校长的口语都不咋样,所以还是请会议主办方给我们配了个翻译。
至于交流内容因为涉及到公司一些信息不方便这里说。

腾讯开放云平台技术架构介绍

企鹅的云平台除了自己内部在使用同时也对外部人员开放,整个云的体系的技术讲的还是比较细节,个人整理了以下

京东云平台战略和技术特点

个人感觉内容与标题不符,比较流水账的介绍了一些技术架构,总结也就是以下几点。

  • 服务中心化

  • 消息异步化

  • 配置动态化

  • 缓存分布化

  • 存储统一化

以上这些是否似曾相识,没错任何一个公司到达一定规模后也一定会根据以上的几点优化改造来适应日益增长的业务。

基于AWS的大数据架构/方案设计

亚马逊算是比较早的云服务提供商,他们的AWS还是比较成熟,目前AWS每天可以支撑52亿的业务,S3对象存储系统有2万亿的对象并且在101W的请求下保证安全性99.99999…%(14个9)

主要体系结构:

目前有很多国外的中型网站运行在AWS上,而并行计算应用也很广。比如:基因匹配计算可以在AWS租用一个5W核心CPU的集群进行运算,原来需要100个小时现在只需要1个小时。

搜狐私有云项目实战

做私有云的起因感觉有点类似于被逼的,主要有以下几个原因

  • 应用繁多依赖复杂
  • 机器利用率低,资源浪费
  • 机器下线和迁移成本高
  • 运维复杂

起步是以GAE和SAE作为参考开发大概2年半左右的时间,实现路由(利用Nginx事先HTTP的HA),APP管理(资源分配,实例控制,健康检查,弹性调度,故障迁移),隔离(VM隔离,内核隔离)

Atlas技术实践 - 构建高性能与高可用的MySQL中间层之路

Atlas是360的MySQL中间是在MYSQL官方的LUA语言的Proxy上用C语言改造的。主要背景就是解决数据库配置多,读写分离,容灾以及连接复用.
结构图:

其实这个玩意跟我们3年前的dbProxy基本是一摸一样的,但是由于prxoy必须要多走一次网络在大流量低延迟的系统上尤为不合适,另外还有就是额外引入的Proxy Server反而成为了另外一个炸弹。
所以这也就是为什么当初我们抛弃了Server方式的dbProxy而使用了客户端方式的TDDL。

之前还准备了很多分库分表引发的一些问题但是听到Atlas还没支持分库分表,所以也放弃提问了。总结下Atlas其实就是3年前我们玩过的东西,另外还有人用提问的机会以双写的CASE“砸场子”向大家推广Percona XtraDB Cluste。

数据库优化精髓暨数据架构最佳实践

嘉宾是创始人创始人ORACLE ACE,本次主要是ORACLE方面的优化,毕竟是专业做培训卖课程的嘴上功夫不一般,提出“供需关系”调优实质(其实按照我理解就是对症下药,找到问题的本质来解决问题)。

提出的相关优化手段 :

  • 数据库设计优化(OLTP/OLTP)
  • 数据安全性和可用性优化(Oracle RAC/Data Guard)
  • 内存使用率优化(OLTP/OLTP)
  • 数据访问优化(表空间/块大小)
  • 物理存储优化(SAME/ASM)
  • 网络流量优化调整(物化视图减少跨网络)

基于MySQL的DRDS技术分享

阿里云的RDS算是数据库专场里介绍的比较牛的产品了,主要是针对外部用户内部还是以TDDL/Corba为主。

特点如下:

  • 透明的分库分表(Hash,List,Range)
  • 自动化扩容缩容(透明自动迁移)
  • 小表广播(跨库查询转变成本地查询)
  • 高效解析器(MYSQL 5.5全支持)
  • 异步化线程与连接管理

可以看到DRDS是集阿里大家之所长的一个产品,拆分(TDDL 的规则),自动化迁移(愚公) 小表复制(精卫),解析器(Corba)等等。

淘宝技术这十年

相对一些技术性特别强的主题,校长子柳的这个演讲更轻松整个过程类似于讲故事,主要介绍了淘宝技术架构这十年来大体的变化(校长是坏银很多技术细节都不说,最可气的是根本没提到过俺)
校长的口才就是好还不停的穿插一些笑话,比如“通过淘宝数据可以得知 新疆女人的罩杯最大,江浙女人的罩杯最小”。顺便给校长做个广告,对于淘宝技术八卦感兴趣的建议去买他的《淘宝技术这十年》
这个本书
<a href=”//pan.baidu.com/share/link?shareid=2300011936&uk=1577465586” target=“_blank”>点击看电子版样张

基于自然语言处理的下一代移动搜索引擎

几乎全部是推荐微信上一个叫出门问问的公众账号,提供语音的生活服务。对于自然语言处理没深入去讲,PPT准备的算法公式什么的挺多,但是演讲的时候以算法复杂需要讲好几天也不一定能讲明白为由略过了。
感兴趣的自己看下他的PPT吧。

portableDFS-可便携的分布式文件系统

定位与中小集群是牺牲强一致性获得超高可用性和可靠性的磁盘级可便携的分布式文件系统

  • 它具有极高的可用性
  • 它具有极高的可靠性
  • 它不保证强一致性
  • 最轻量的分布式文件系统
  • 兼容SCP

这个议题听的人比较多根本没有空位于是乎只能坐在地上听,然后某个可怜兄弟就地而坐处理起线上问题了。

附上 SACC的PPT下载地址 :

<a href=”//www.it168.com/redian/sacc2013/#mao1" target=“_blank”>官方

<a href=”//pan.baidu.com/share/link?shareid=2428208197&uk=1577465586” target=“_blank”>百度云-打包下载

其他

北京烤鸭

穿着短裤冒着大雨坐了17站得地铁跑到三里屯去吃便宜坊的烤鸭,感谢长源两口子的热情款待哈。

差点读错了字,给读成(大便的便)四声了

一桌子菜好丰盛啊

这个我的最爱鸭子脆皮,香香的,软软的,脆脆的。

稻香村

到了北京咋说也要带点东西回去,在世纪金源逛了半天发现也就只能带稻香村了,毕竟是百年老字号。

所有点心都是现称的,正好还赶上稻香村打9折

装好了口水流一地啊

冰糖葫芦

这个纠结了我好久了,临来北京前老婆交代一定要冰糖葫芦,结果在世纪金源里找了半天没找到,本以为要放弃了最后因为飞机晚点在飞机场闲逛的时候发现了它。

48元一盒真贵啊,为了承诺买了吧。