开始！大家好~~~~~我是这次的分享者赖志鹏，主要分享内容是BI大数据BI商业智能把商业智能看成一种解决方案应该比较恰当。商业智能的关键是从许多来自不同的企业运作系统的数据中提取出有用的数据并进行清理，以保证数据的正确性，然后经过抽取（Extraction）、转换（Transformation）和装载（Load），即ETL过程，合并到一个企业级的数据仓库里，从而得到企业数据的一个全局视图，在此基础上利用合适的查询和分析工具、数据挖掘工具、OLAP工具等对其进行分析和处理（这时信息变为辅助决策的知识），最后将知识呈现给管理者，为管理者的决策过程提供数据支持。数据仓库模型设计与业务的关系分析需求，与客户沟通需求。建模确定输入寻找数据源预处理（不一定存在）数据挖掘（不一定存在）输出结果算法手机号码中

RDS最佳实践阿里巴巴数据库技术-玄惭*我们的团队.我们来自阿里集团数据库技术团队，负责维护RDS所有线上的数据库实例，.团队成员里有去IOE的直接操刀人，也有丰富双11经验的工程师.涵盖了：Oracle，MySQL，SQLSERVER，Postgresql*目录最佳实践-优化路线图最佳实践-定位瓶颈最佳实践-设计优化最佳实践-SQL优化最佳实践-RDS弹性升级*我们使用RDS中遇到了什么？为什么我的RDS慢了？为什么我的RDScpu，iops，连接数100%？为什么我的RDS空间满了？*最佳实践-路线图定位瓶颈设计优化

设计模式详解何谓设计模式在面向对象程序设计（OOP）过程中，我们经常会遇到很多重复出现的问题，总结解决这些问题的成功经验和最佳实践便形成了设计模式（DesignPattern）。其核心思想是将可重用的解决方案总结出来，并分门别类。从而指导设计，减少代码重复和优化体系结构。采用设计模式的益处重用，避免代码重复冗余优化体系结构提升系统的可维护性和弹性代码更加容易测试，利于测试驱动为性能优化提供便利使软件质量更加有保证增强代码可读性，便于团队交流有助于整体提升团队水平设计模式、重构和Antiparttern设计模式是成功经验和最佳实践的总结，指导设计人员采用正确精良的设计。

搜索离线生产集群中的流计算莫问个人背景简介花名：莫问真名：王峰2006年毕业后加入公司雅虎中国（垂直搜索引擎团队）阿里云（云计算服务团队）淘宝/一淘（网页抓取团队）技术方向：搜索离线系统*提纲搜索离线系统技术体系Hadoop-2.0YARN介绍StreamService计算模型StreamService服务调度StreamService运维操作*搜索离线系统技术体系*HDFSYARNHBaseMapReduceStreamServiceHQueue搜索离线业务网页抓取数据处理数据统计PigHive数据挖掘…….Hadoop-1.0VSHadoop-2.0*ApplicationsonYARN*StreamService计算模型基本概念拓扑结构消息管理进度管理编程接口*基本概念StreamService：完成一套业务功能的流计算服务StreamRole：1个Role表示1组具备相同计算功能的计算单元StreamWorker：StreamRole中的计算单元StreamSource：StreamWorker的数据输入源StreamSink

第七章缓存及注解第三单元第页/共25页本章相关学习资源《使用缓存提高查询性能》专题《使用注解简化映射配置》专题《升级新闻管理系统》相关专题《使用Hibernate升级新闻管理系统》第7章《缓存及注解》第页/共25页学习平台“Hibernate实现数据持久化”课程学生用书预习检查简述缓存的作用简述Hibernate的缓存分类列举完成实体类常用配置的注解第页/共25页本章任务任务1：使用一级缓存查询特定房屋信息任务2：使用二级缓存和查询缓存任务3：使用注解配置项目任务

第六章Criteria查询及命名查询第三单元第页/共29页本章相关学习资源《使用Criteria查询数据》专题《使用命名查询与本地SQL》专题《使用Hibernate升级新闻管理系统》第6章《Criteria查询及命名查询》第页/共29页学习平台“Hibernate实现数据持久化”课程学生用书预习检查简述如下代码的作用如何使用Criteria实现分页简述实现命名HQL查询的步骤

SQL当一个新表被创建之时，系统将在磁盘中分配一段以8K为单位的连续空间，当字段的值从内存写入磁盘时，就在这一既定空间随机保存，当一个8K用完的时候，SQLS指针会自动分配一个8K的空间。这里，每个8K空间被称为一个数据页（Page），又名页面或数据页面，并分配从0-7的页号,每个文件的第0页记录引导信息，叫文件头（Fileheader）；每8个数据页（64Ｋ）的组合形成扩展区（Extent），称为扩展。全部数据页的组合形成堆（Heap）。

MySQL学习笔记数据库比较数据库需求1)可伸缩性（Scalability），当服务的负载增长时，系统能被扩展来满足需求，且不降低服务质量。2)高可用性（Availability），尽管部分硬件和软件会发生故障，整个系统的服务必须是每天24小时每星期7天可用的。3)可管理性（Manageability），整个系统可能在物理上很大，但应该容易管理。4)价格有效性（Cost-effectiveness），整个系统实现是经济的、易支付的。MySQL数据库系统的优缺点优点1.源码公开，免费2.跨平台3.为多种开发语言和包提供了API4.支持多线程5.小巧、灵活、速度较快6.支持各种字符集7.提供各种连接、优化的工具包缺点1.不完善，很多数据库特性不支持

百度Elasticsearch大数据分析实践百度大数据部高攀2015年10月17日大纲背景介绍典型应用场景遇到的问题及经验分享对ES的优化与改进后期计划ES是啥有谁在用面向搜索（forfulltextsearch） 结构化数据分析文本数据分析ES在百度现状2013年10月开始使用目前覆盖百度内部20多个业务线包括casio、云分析、网盟、预测、文库、直达号、钱包、风控等单集群每天导入30TB+数据，总共每天60TB+单集群最大100台机器，200个ES节点共使用近300台机器

第一章SQL*PLUS本章介绍关系数据库的SQL语言及其在ORACLE中的应用技巧。1．1简介SQL*PLUS是ORACLE的交互查询工具，它允许用户使用SQL命令交互式地访问数据库，也允许用户使用SQL*PLUS命令与系统发生联系。1．1．1结构查询语言SQLSQL语言是一种使用方便灵活的语言，因为它是一种非过程化程度相当高的语言，使用这种语言编程，用户只需在程序中指出要干什么，至于如何干，用户不必在程序中指出，而由系统来决定完成。SQL语言可以通过两种方式使用，一种是命令方式，另一种是程序方式。采用命令方式时，用户通过交互来执行该命令。SQL语言还可以嵌入C，COBOL和FORTRAN等高级语言中，组成一个完整的程序。用户可以根据不同需要选择不同的使用方式，以满足不同的要求。SQL语言还提供了事务控制，以保证数据共享以及并发使用时不产生干扰，也便于对数据库的恢复。

GEO搜索研发组主讲人汪培珊2015年10月大纲LBS地理位置服务Geohash算法原理Mongodb基础入门Mongodb增删查改Mongodb高级操作Mongodb索引操作Mongodb主从复制Mongodb分片技术Mongodb运维技术Mongodb驱动实践LBS地理位置服务什么是LBS？地理位置服务，简称位基服务（Location-BasedService，LBS）又称适地性服务、移动定位服务、位置服务、置于位置的服务，它是通过移动运营商的无线电通讯网络（如GSM网、CDMA网）或外部定位方式（如GPS）获取移动终端用户的位置信息（地理座标）。在GIS平台的支持下，为用户提供相应服务的一种增值业务。LBS地理位置服务地理位置服务有哪些场景？比如：大众点评搜索距离我最近电影LBS地理位置服务地理位置服务有哪些场景？比如：uber打车LBS地理位置服务地理位置服务有哪些场景？比如：airbnb找我附近的民宿LBS地理位置服务如何查找附近点？说出你所知道的任意方法？它们之间的区别，各自的优缺点

MySQLdb使用指南Python的数据库操作我们可以用来一个叫MySQLdb的库和MySQL数据库进行交互.可以从下面的地址获得这个库：http://sourceforge.net/PageRankojects/mysql-python如果你不确定你的python环境里有没有这个库,那就打开pythonshell,输入importMySQLdb,如果返回错误讯息,那就表达你的机器上没有,赶紧去共享一个。在介绍具体的操作前,先花点时间来说说一个程序怎么和数据库进行交互1.和数据库建立链接2.执行sql语句,接收返回值 入数据.这真是一个很酷的方法!n=cursor.executemany(sql,param)需

第10章Java数据库连接本章主要内容：10.1　JDBC概述10.2　SQL语句简介10.3JDBCAPI10.3.1JDBCAPI简介10.3.2JDBC驱动程序及URL一般方法10.4JDBC编程实例10.4.1数据库编程的一般步骤10.4.2数据表操作10.4.3数据库应用10.1　JDBC概述JDBC即Java数据库连接（JavaDatabaseConnectivity）。

SQL*Plus基础本章概述本章要点教学过程本章概述SQL*Plus可以作为编写SQL和PL/SQL脚本的接口。使用SQL*Plus可以执行各种SQL语句和PL/SQL语句。具体地说，SQL*Plus可以描述表的结构；可以编辑输入的各种SQL和PL/SQL语句；可以执行输入的SQL和PL/SQL语句；可以执行各种SQL*Plus命令；可以格式化SQL和PL/SQL语句的输出结果等。但是，SQL*Plus不能直接操纵数据库中的数据。本章将全面介绍SQL*Plus的基础知识。本章要点启动SQL*Plus并设置其运行环境格式化输出结果执行各种SQL*Plus命令使用help命令使用SQL*Plus缓冲区执行脚本教学过程5.1启动和设置SQL*Plus5.2格式化查询结果

Hibernate不同数据库的连接及SQL方言本文讲述Hibernate不同数据库的连接及SQL方言。Hibernate不同数据库的连接可能会出现错误，有一种情况是由于HibernateSQL方言设置不正确而导致的。

定位亮点系统架构方法论功能架构开发现状背景内部需求行业需求大市场需求模型设计及开发经验丰富，但缺乏有效载体，经验沉淀不足；模型复制难度大，项目实施费时费力；项目实施往往加班加点，人力资源复用率较低，工作效率不高通信行业BI系统进入瓶颈期，指标杂乱，管理无序，效率低下，亟需对数据仓库进行重构；目前多省已表达出重构需求，工程量随时可能放大亚信战略转型，放眼金融业、电商、政企等大市场。需求一旦纷至沓来，我们是否做好了准备？我们的“装备”是否先进？借助本次模型重构的契机，依据模型设计的全流程，推出大数据模型构建平台（BigDataModelingPlatform，简称BDMP），旨在利用IT化的手段，沉淀建模经验，提升工作效率，让模型构架更加专业、规范，后期管控及维护更加方便快捷。

养成一个SQL好习惯我们做软件开发的，大部分人都离不开跟数据库打交道，特别是erp开发的，跟数据库打交道更是频繁，存储过程动不动就是上千行，如果数据量大，人员流动大，那么我么还能保证下一段时间系统还能流畅的运行吗?那么还能保证下一个人能看懂我么的存储过程吗?那么我结合公司平时的培训和平时个人工作经验和大家分享一下，希望对大家有帮助。要知道sql语句，我想我们有必要知道sqlserver查询分析器怎么执行我么sql语句的，我么很多人会看执行计划，或者用profile来监视和调优查询语句或者存储过程慢的原因，但是如果我们知道查询分析器的执行逻辑顺序，下手的时候就胸有成竹，那么下手是不是有把握点呢

SQL语言入门教程简介SQL是英文StructuredQueryLanguage的缩写，意思为结构化查询语言。 SQL语言的主要功能就是同各种数据库建立联系，进行沟通。按照ANSI（美国国家标准协会）的规定，SQL被作为关系型数据库管理系统的标准。SQL语句可以用来执行各种各样的操作，例如更新数据库中的数据，从数据库中提取数据等。 目前，绝大多数流行的关系型数据库管理系统，如Oracle,Sybase,Microsoft SQL Server,Access等都采用了SQL语言标准。虽然很多数据库都对SQL语句进行了再开发和扩展，但是包括Select,Insert,Update,Delete,Create,以及Drop在内的标准的SQL命令仍然可以被用来完成几乎所有的数据库操作。

You know the rudiments of the SQL query language, yet you feel you aren't taking full advantage of SQL's expressive power. You'd like to learn how to do more work with SQL inside the database before pushing data across the network to your applications. You'd like to take your SQL skills to the next level.<br> Let's face it, SQL is a deceptively simple language to learn, and many database developers never go far beyond the simple statement: SELECT FROM WHERE . But there is so much more you can do with the language. In the SQL Cookbook, experienced SQL developer Anthony Molinaro shares his favorite SQL techniques and features.

自动化运维平台慢查询系统备份系统统计分析报表Percona使用经验自动化运维平台自助DDL授权申请慢查询系统DBA Weekly Report CPU IO慢查询监控历史Processlist查询历史InnodbStatus查询元信息DBManager工具报表开发报表废弃表废弃索引冗余索引容量管理自助DDL任务类型直接执行备份