【IT168 专稿】本文根据侯松老师在2018年5月12日【第九届中国数据库技术大会】现场演讲内容整理而成。 讲师简介:  侯松,上汽集团资深大数据架构师、Oracle ACE、PMP、北美寿险管理师,《高并发Oracle数据库系统的架构与设计》作者,ACOUG社区、PG社区核心成员。现就职于上海汽车集团股份有限公司,负责大数据中心数据服务、智能引擎、实时计算平台的研发,产品化及推广。所负责的上汽 […]

, , ,

已经是第三次参加DTCC大会的演讲了,每次都有不一样的认识和感悟,源于新朋,源于老友,源于所见所闻所聊。 “上汽集团数据湖——实时工业大数据产品实践”,这是我今年的主题,当跟满满当当的听众们互动的时候,大家一致反馈最感兴趣的关键字是“数据湖(Data Lake)”。这也是出乎我意料之外的,本以为大家更多会关心“上汽”、“工业大数据”。互动之后,我选择放弃前一天晚上准备的演讲稿,开启即兴模式,给大家 […]

, ,

Spark on Yarn within Docker Containers The open source project “spark-on-yarn” GitHub: https://github.com/madaibaba/spark-on-yarn Docker Hub: https://hub.docker.com/r/madaibaba/spark-on-ya […]

, , ,

在一年前差不多的时间,写过一篇文章《跨界初期的思考》,以一个制造业大数据局外人的视角,总结了一些所见所闻和所感。一年之后,重新阅读一遍,似乎多了一点无奈。 一年的时间,从架构师到项目经理,再到产品经理,目标不算太鲜明,但打造出了一款还算看得过去的大数据产品。以汽车制造服务行业为背景,从世界知名的品牌企业,到初创混乱的服务型企业,这款大数据产品都略有用武之地。艰难起步,窃感欣慰,个中滋味自不必多言。 […]

,

十年的金融行业经历,无数次摒弃了互联网行业高薪的诱惑,本以为会持续做到退休了,却有些意外地回到了制造行业。制造业对我来说并不陌生,十年前参与了建造世界最先进之一的流水线和制造ERP系统。曾记得玩出的一个PLC到Oracle的数据流控制模块,连骄傲的日本同事也厚着脸皮要去了源代码,其酸爽至今回味。 十年对制造行业来说,变化不算太大,即便是工业4.0和中国制造2025概念盛行的今天,大数据技术与应用, […]

大数据时代,Oracle应时应景地推出In-Memory Option功能组件,高效地解决OLAP应用问题。今天我将从多个维度对Oracle 12c的IMO功能进行深度解析,尝试为大家揭开IMO特性的神秘面纱。 视频分享如下:

, , , , ,

6.1.3    TimesTen技术架构 接下来,我们就从应用形式、内部架构、连接方式、高可用形式四个方面来进行一个TimesTen技术架构的概述。 1.  应用形式 前面说到,TimesTen可以单独使用,也可以作为Oracle的缓存来使用,这里我们就先来介绍一下TimesTen内存数据库的使用形式,具体如下: q  TimesTen内存数据库(TimesTen In-Memory Datab […]

6.1.2 TimesTen应用场景 在谈论TimesTen内存数据库应用场景之前,我们先来介绍一下什么是内存数据库,及其工作原理吧。内存数据库,顾名思义就是将数据存放在内存中,并通过内存操作直接完成数据库相关操作。与磁盘相比,数据在内存中的读写速度要高出几个数量级,能够极大地提高应用程序的性能。同时,内存数据库抛弃了磁盘数据管理的传统方式,基于全部数据都在内存中,重新设计了体系结构,并且在数据缓 […]

6.1.1 TimesTen历史与定位 罗马不是一天建成的,TimesTen内存数据库虽然比不上Oracle数据库那样历史悠久,但也是经年地沉淀和积累造就的。 先来看一下TimesTen的发展历史的几个重大事件吧: q  1992年,TimesTen在HP美国总部第一个内存数据库的实验室诞生, 主要研究内存数据库技术在电信网络中的应用; q  1996年,TimesTen从HP实验室分离出来,成立 […]

 星型聚合并发场景测试: 前面提到在星型聚合的场景测试中,IMO的SIMD查询方式较传统Bitmap星型转换查询方式的性能提升3~4倍; 当面对高并发查询的时候,SIMD的性能优势并没有减弱; 然而,并发压力较大的时候,Bitmap星型转换会需要使用较多PGA空间。   短事务并发场景测试: OLTP应用的短事务处理,概念中IMO为是列式存储,将会较大的性能劣势,然而事实并非如此。 In-Mem较 […]

切换到手机版