版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
2017在线峰会-2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–开源生态需求–数据类型与内建函数–UDF二进制兼容–外部文件存储与不同格式支持–标准语言功能–外表支持,多数据格式支持特色功能–MaxComputeStudio等易用性改进2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办•目的–2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办•目的–提高用户开发效率低服务负载•现状–compiler错误恢复强大•未来–更强大与精准的–代码重构MaxComputeSQL–编译器用户友好功能文相关的智能提示文相关的智能提示2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办–•本2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办–•本Tableau,Hive–进展–•ve和常–未来–•cimalMaxComputeSQL–基本数据类型是是是是是否是否否是是否是是否是否描述8位有符号整形,范围-128到127。常量例如1Y16位有符号整形,范围-32768到32767。常量例如2S32位有符号整形,范围-232到232-1。常量例如364位有符号整形,范围-264+1到264-1。常量例如4L32位二进制浮点型64位二进制浮点型。常量例如5.510进制精确数字类型,整形部分范围-1036+1到1036-1,小数部分精确到10-18部分。常量例如100.5BD定长字符类型,n为长度,取值范围1到255,不足长度的补空格变长字符类型,n为长度,取值范围1到65535字符串类型,目前长度限制为8M。常量例如“abc”“xyz”二进制数据类型,目前长度限制为8M时区无关的日期类型,范围从0001年1月1日到9999年12月31日,精确到天。常量例如DATE‘2017-11-11’日期时间类型,范围从0000年1月1日到9999年12月31日,精确到毫秒。常量例如DATE‘2017-11-1100:00:00’时间戳类型,范围从0001年1月1日到9999年12月31日23.59:59.999999999,精确到纳秒。如TIMESTAMP‘2017-11-1100:00:00.123456789’boolean类型,取值TRUE或FALSE。类型TINYINTSMALLINTINTBIGINTFLOATDOUBLEDECIMALCHAR(n)VARCHARSTRINGBINARYDATEDATETIMETIMESTAMPBOOLEAN2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办定义构造索引文相关的智能提示据暨大数据技术峰会2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办定义构造索引文相关的智能提示MaxComputeSQL–复杂类型目的–减少迁移成本 景常–方面UDF开发•进展–支持除–所有Hive配•未来–UDT支持2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办多级嵌套subquery->正序表别名2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–VALUES•进展–完全兼容Hive–特色Valuestableolumnlist2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–SEMIJION等其他改进•SEMIJOIN–兼容Hive,兼容ImpalaANTIJOINommytableaidLEFTSEMIJOINmytablebonaaidbidommytableaidLEFTANTIJOINmytablebonaaidbidblewhereidINselectidfrommytablewherevaluemytablevaleommytableEXISTSselectidfrommytablewherevaluemytablevalue–未来–减少限制,更好的优化•ImplicitJoinSELECTSELECT*frommytable1a,mytable2bWHEREa.id=b.id;•UNION[DISTINCT]SELECTSELECT*frommytable1UNIONDISTINCTSELECT*mytable2;2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办定义目的–减少迁移成本 2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办定义目的–减少迁移成本 景常–方面UDF开发•进展–支持除–所有Hive配索引文相关的智能提示MaxComputeSQL–复杂类型构构造•未来–UDT支持2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–查询过程与参数化视图••––易用性,性能–方面–方面UDF••––完整实现•未来–IF/LOOP2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办参数定义据暨大数据技术峰会2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办参数定义MaxComputeSQL–参数化视图返返回值2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办tleftshiftrightshiftrightunsignedtctimestampcurrentdate•未来–支持全部HiveBuilt-in函数(包括Window函数)与其他DBMS典型函数2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–UDF/UDAF/UDTF•目的–降低用户迁移成本–兼容生态工具–扩大MaxCompute自身能力,例如HPL•进展pute•未来–安全支持虚拟化,第三方库可用–注册方式兼容(不一定需要,与Session支持统一考虑)–UDT(UserDefinedType)–与Java的无缝集成•未来–支持STOREDBY“StorageHandler”•未来–支持STOREDBY“StorageHandler”支持与OTS,Hbase类的DBMS的互通2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办n••–数据上云,兼容ve–力,例如HPL–二进制兼容Hive格erDe–TEXTFILE,ile–文件按存储在问RowFormatmat2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–UDF/UDAF/UDTF•目的–降低用户迁移成本–兼容生态工具–扩大MaxCompute自身能力,例如HPL•进展pute•未来–安全支持虚拟化,第三方库可用–注册方式兼容(不一定需要,与Session支持统一考虑)–UDT(UserDefinedType)–与Java的无缝集成2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–即将完成与推进中的功能–CREATETABLE…[RANGE]CLUSTEREDBY(col1,…)SORTEDBY(col1,…)INTO<n>Buckets...–hashcluster与hive兼容,提高性能与兼容性–rangecluster,MaxCompute特色,支持海量排序与交互式查询MemoryTableSparkRDD的功能–S27试用–内存中cache热表,提高性能LPROPERTIEScachetruet–与tablevariable结合,缓存热点查询,提高性能@a:=CACHEONSELECT…;--@a的结果缓存在内存中@b:=SELECT*from@aajoin@abon…;--多次访问@a,从内存中直接读取,无需重新计算•SQL方面的其他计划中的改进–UDJ(UserDefinedJoin)–GROUPINGSET,TRANSFORM,session等,根据客户需要有选择的支持2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办2017在线峰会-票选最美云上大数据暨大数据技术峰会阿里云云栖社区主办MaxComputeSQL–即将完成与推进中的功能–CREATETABLE…[RANGE]CLUSTEREDBY(col1,…)SORTEDBY(col1,…)INTO<n>Buckets...–hashcluster与hive兼容,提高性能与兼容性–rangecluster,MaxCompute特色,支持海量排序与交互式查询MemoryTableSparkRDD的功能–S27试用–内存中cache热表,提高性能LPROPERTIEScachetruet–与tablevariable结合,缓存热点查询,提高性能@a:=CACH
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 急诊护士的工作体会
- 美容美发行业化妆师培训心得
- 玩具行业助理工作总结
- 医务室护士的工作感悟
- 咨询行业行政后勤工作总结
- 服务员的服务技巧与服务态度
- 生物知识综合讲解计划
- 完善酒店营销策略
- 咨询行业美工工作总结
- 税务筹划实践感悟
- 申论公务员考试试题与参考答案
- 《激光原理及应用》全套课件
- 2024中国绿发投资集团限公司招聘300人高频难、易错点练习500题附带答案详解
- 消化系统护理常规
- 2024年航空职业技能鉴定考试-航空乘务员危险品考试近5年真题附答案
- 小流域水土保持综合治理工程施工方案
- 佳能-6D-相机说明书
- 商业道德和反腐败制度
- 2025届新高考英语热点冲刺复习语法填空
- 乐器维修保养行业三年发展洞察报告
- 中储粮社招考试题库
评论
0/150
提交评论