多IDC部署的电商网站的缓存管理1.多IDC部署的一般性问题2.基于失效的缓存的多活方案3.登录状态的同步复制一号店IDC建设的现状和将来在多个IDC中部署电商应用有两个基本动机容灾扩容一号店的现状在上海有2个自有的IDC（数千台物理机；IDC间带宽10G，延时小于1ms）2014年双11促销时向XXX云服务提供商临时租用资源一号店的规划以上海为中心，在周边180公里范围内建设若干自有的IDC，其中部署核心应用，应对日常运营之需。促销时和云服务商合作，应对临时资源需求。

介绍实时数据平台背景实时数据平台解决方案关键环节详解关于平台产品化京东大数据平台定位支撑全集团数据业务全集团数据集中自助式服务平台模式京东大数据平台发展历程---技术选型2011年之前2011~20122012~至今京东大数据平台发展历程---技术选型传统商业数据仓库解决方案弊端高复杂度计算任务并发性差海量数据处理能力不足存储能力有限扩展性差成本高后期遇到的问题越来越多的ETL任务需要12点后才能完成任务排队现象严重基于流量等大数据量的批量计算和复杂推荐类算法基本无法应付存储达到上限，需不断转移历史数据京东大数据平台发展历程

关系型数据库支持事务！可是我必须用NoSQL的怎么办？选择一个支持事务的NoSQL？还是自己实现一套事务机制？Whydoesitmatter?神马是事务？保障数据可靠地原子性操作一个事务中多个操作要么同时成功，要么同时失败工厂之间的货物转移是一个典型的事务操作。

JMS即Java消息服务，是由Java官方提供的API，需要第三方Provider提供实现。类似于JDBC，它也是Java官方提供的API，需要其他数据库厂商提供实现。 JMS是面向消息的中间件(Message-Oriented Middleware)，它提供了标准的产生、发送、接收消息的接口，简化企业应用的开发。

　　MySQL数据库双机热备份如何实现?　　本文详细讲述了怎样实现MySQL数据库双机热备份。　1、MySQL数据库没有增量备份的机制，当数据量太大的时候备份是一个很大的问题。还好MySQL数据库提供了一种主从备份的机制，其实就是把主数据库的所有的数据同时写到备份数据库中。实现MySQL数据库的热备份。

有时候，MySQL出问题的时候自己无法解决了，找百度也只是稍微改了下配置就好了。这是为什么呢？而这篇文章的目的在于给你一份非常重要的配置项清单。以后出什么问题自己先排查下　　即使是经验老道的人也会犯错，会引起很多麻烦。

希羽大纲典型的业务场景及问题MySQL层的现象问题的本质原因曾经的尝试方法问题的难点瞬间热点更新检测模型瞬间热点更新线程调度优化效果典型的业务场景及问题MySQL的性能瞬间急剧下降，TPS1W-->200MySQL层的现象绝大部分线程在更新商品库存量updatetset库存量-1where...正常的查询和更新的RT也剧增祈求业务降级以让DB抗过去问题的本质原因InnoDB层行锁机制每行更新请求都会创建一个记录锁对象成功加锁则执行，失败则被挂起相同的记录锁被HASH到同一桶中

可扩展大数据（>100TB）增加/减少服务器持续可用易用SQL，ACID高性能TPS(>100k),QPS(>1M)低成本我们需要怎样的存储方案？数据总量很大，但每天更新量相对较小Alibaba2012双十一交易笔数1.1亿笔，假设对于某个业务，1笔交易操作10次数据库：写事务数：1.1亿*10=11亿修改增量：11亿*100B=110GB数据库业务的背后设计理念数据＝基线数据＋修改增量查询修改系统架构

DBFree阿里数据库自动化运维平台陈旭@Alibaba2013-07个人简介2009年加入淘宝负责淘宝广告、CRM、商品、社区等业务线经历阿里去IOE，推动广告、商品等业务从O到M的转变目前关注数据库自动化运维微博：@Orz_dba目录背景现状扩容流程如何实现自动化平台架构平台功能背景Oracle->MySQL运维方式的转变软硬件成本降低机器实例数目增加，带来复杂的运维成本现状MySQL服务器：线上2500+，线下500+常见的实例运维业务新项目新环境初始化主机硬件问题。

iDB是什么为什么要开发iDBiDB功能及架构讨论iDB是什么阿里集团数据库服务平台专注于解决数据库项目研发效率、数据安全、数据质量问题提供数据查询、订正、导出、同步，项目表结构设计、发布、SQL审核等与数据库有关的功能iDB的面向集团内部所有员工，主要是技术同学，包括研发、QA、DBA、PD等工作效率与数据安全开发人员有数据库权限？只有DBA有数据库权限？敏感数据？表结构设计规范命名规范数据类型规范索引规范存储引擎规范字符集规范主键、外键、约束规范备注规范

Druid数据库连接池的特点稳定高效率可扩展可监控可动态配置防SQL注入稳定阿里巴巴大规模部署应用超过500个部署实例超过3000最大集群超过60台我们大规模使用中，开源连接池只有两个是稳定的：Druid DataSource JbossDataSource（历史原因还在使用）稳定的特性-ExceptionSorter当连接产生不可恢复的异常时，需要及时从连接池中清除，否则会产生大量错误。

内容大纲CAP的历史沿革CAP原理介绍CAP，PickTwo？CAP权衡中的经济考量CAP与ACID的关系分区只是另一段CodePath CAP在实践中的应用参考资料CAP原理的历史1997年，Fox＆Brewer提出BASE概念

PostgreSQLforredhat源码安装文档。环境说明：最近在学习postgresql，直接下载执行安装比较简单，但是安装目录不灵活，不符合生产的设计要求，故下载源码包手动安装，并记录如下。

海量数据处理的架构与实践王延炯企业级数据领域数据治理(元数据、数据标准、数据质量)实时数据整合(流处理)非实时数据整合(批处理)数据发布数据可视化数据源数据治理企业数据的规模、采集和存储规模100+业务系统10,000+数据库表100,000+字段存储

01有需求02有挑战03有经验企业SOA服务治理和服务开放的背景服务治理和服务开放平台架构与关键技术介绍服务治理和服务开放案例介绍趋势：开放、融合、创新的时代引进来走出去企业级IT系统在互联网时代面临挑战外部系统内部系统开放的内涵与目标接口服务(企业IT系统核心能力)数据服务(元数据、数据治理等)能力开放(配额计量、监控服务、OpenAPI、安全管理、开放平台门户)云应用运营(支撑开发、部署运行、管控一体化云应用平台)内部创新(内部业务支撑系统进行拆分与创新研发)外部创新(互联网环境下第三方开发者团队/个人基于平台进行创新)目标内涵应对策略.

Redis简介Redis是什么功能与特点内部实现（单机）整体数据框架基本数据结构优化机制索引优化内存优化持久化主从备份集群Key-value数据库设计与其他数据库对比Redis不足应用场景国际上最大的redis用户是谁？在众多的NOSQL数据库与传统的关系数据库中为什么会出现redis？传统的key-value数据库（文档，string类型）有什么不足？----数据结构需求传统的关系型数据库IO操作性能问题？----性能需求传统的内存数据库有什么不足？

本章通过演示如何使用mysql客户程序创造和使用一个简单的数据库，提供一个MySQL的入门教程。mysql（有时称为“终端监视器”或只是“监视”）是一个交互式程序，允许你连接一个MySQL服务器，运行查询并察看结果。mysql可以用于批模式：你预先把查询放在一个文件中，然后告诉mysql执行文件的内容。本章将介绍使用mysql的两个方法。

基于Spark/hbase的数据分析平台及SparkSQl使用经验分享

OceanBase简介-原理OceanBase简介-架构修改增量(增删改)置于内存：无随机磁盘写、性能高单点写入：数据一致性好，性能&内存容量有瓶颈修改增量与基线数据跨服务器修改增量应用接口基线数据总控中心OceanBase架构-三集群数据多副本跨数据中心，事务同步到多数库金融业务简介屌丝的理解：与经济活动相关的业务卡类服务保险类业务理财类业务金融数据库的挑战高可用&IDC容灾数据强一致ACID/复杂事务高性能可扩展金融数据库需要具备什么？

 在控制台输出mdx被解析出来的对应的sql语句步骤