idp专项测试卷含答案

idp专项测试卷含答案1.以下哪些权限可以在权限中心申请交互查询权限(正确答案)库表读写权限(正确答案)创建临时函数权限(正确答案)超20w下载权限任务主题(正确答案)任务类型(正确答案)资源分类(正确答案)导数申请(正确答案)2.下面数据库表申请说法错误的是a、任何数据库表都可以申请读写(正确答案)b、一次性申请几百个库表，不管用不用先申请再说(正确答案)c、建表权限任何人都可以申请(正确答案)d、临时函数每次都要申请(正确答案)e、hll_库表任何人都可以修改读写(正确答案)3.如果数据库申请没有想要的数据内容，下面的流程正确的是a.先了解对应业务目前数据的来源和存放地方(正确答案)b.直接找数据仓库提供数据c.了解业务数据类型，在导数申请模块中，按照对应的数据类型提供数据库表(正确答案)d.请教数仓同事了解数据更新时间节点(正确答案)4.线上申请审批中，下面说法正确的是a、工作需要用的系统功能，提前申请，准备(正确答案)b、发起了一项申请，马上就找审批人处理c、提前沟通了解对应系统的功能用途，有针对的申请使用(正确答案)d、遇到没有权限的情况下，先群里找个人沟通开通5.下面哪个是大数据系统权限申请入口c、b、a、(正确答案)d、6.新建任务时，资源分类该如何选择A.随意选择，不讲究B.选择与自己的业务需求对应的资源分类(正确答案)C.选择资源最充足的7.新建任务时，什么是自依赖A.自依赖时，任务会按实例数据时间依次运行(正确答案)B.自依赖时，任务会在设置的并发度范围内同时运行8.以下字段，哪些不能作为hive建表字段A:date、day、order、sort(正确答案)B:like、drop、data(正确答案)C:user、use、create(正确答案)D:what、why、how9.如果需要使用hive中的保留字段建表，该如何操作A:可以替换非保留字段建表(正确答案)B:直接使用建表C:加上下划线前缀或后缀D:使用`字段名`建表(正确答案)10.在BigQuery中能够运行的任务，在BQTask中就会报错或数据不对的原因可能是A:可能存在特殊字符，没有使用转义符号(正确答案)B:select的字段只能是：中英文字符、非数字开头、符号只支持下划线(正确答案)C:直接找平台或值班同学解决问题D:可能是平台资源不足或运气不好，一会儿再试试11.BQTask的SQL脚本，下面哪些命名字段不会导致任务失败A.数字开头的B.中英文字符(正确答案)C.非数字开头的(正确答案)D.包含下划线的(正确答案)E.包含特殊字符的12.如何在BigQuery中高效的下载数据A:直接运行select语句后，点击下载更多按钮B:先勾选预下载按钮，再运行select语句后，点击下载按钮(正确答案)C:如果只是对数据进行简单验证，可以选择下载“当前”500条数据(正确答案)D:点击下载更多的“开始下载”按钮后，可以并闭页面，稍候再回来下载13.多条sql一起运行，勾选预下载后，如何生效A:全选所有sql，点击运行B:选择最后一条sql，点击运行C:随便怎么执行，都是可以的，没这么多讲究D:先选择运行前面几行sql，勾选预下载后，再运行最后的select语句(正确答案)14.天任务冻结超过1个月以上，需要重新运行最近1天任务，该如何处理？A.直接解冻，会补录很多个实例，依次运行，占用大量资源B.复制一个任务，补录最近1天的实例运行(正确答案)15.创建天任务时搜索不到指定依赖任务可能的原因：任务不存在(正确答案)没有该任务主题权限(正确答案)搜索的任务为周任务或月任务(正确答案)16.任务一直处于就绪状态直接在答疑群寻求帮助点击诊断按钮(正确答案)17.关于日志以下说法正确的是业务日志是实例运行的详细日志，可以看出实例的运行细节(正确答案)系统日志可以看到实例的运行时间，运行次数，所在服务器，以及简化的报错/成功描述信息(正确答案)Yarn资源日志可以看到通过Yarn调度的任务实例在Yarn上运行的Application记录(正确答案)一般在业务日志中debug实例失败的原因(正确答案)18.查询某个字段是否包含{符号，在BigQuery中语法是rlike'\\{'，在HiveTask中下面语法正确的是rlike'\\{'rlike'\\\\{'rlike'\\\\\\{'(正确答案)rlike'\\\\\\\\{'19.BigQuery查询遇到报错，效率最高的解决办法是？A.马上到答疑群里发问等闲着没事想答疑的同事来解答B.把报错那一行截图到群里@当天值班同学来康康C.查看帮助文档是否有对应报错的解决办法，如果没有，发送具体的SQL/任务ID及报错详细堆栈到群里询问值班同学(正确答案)D.可能运气不好，等下再试试20.关于IDP/BigQuery，以下说法错误的是：A.BQ的执行历史不会存结果，只会存最近40条查询SQLB.只要我的代码没改，前几天运行正常的任务今天也肯定会正常(正确答案)C.IDP/BQ应当使用自己所在部门的队列D.不再需要使用的任务应当及时冻结21.下面哪种想法是错误的：A.同事的优化参数把跑数时间减少了90%，我也Copy来用(正确答案)B.我把这个hll_开头的表drop了再重建应该没问题(正确答案)C.周五早上跑不出来数先去群里反馈一波(正确答案)D.selectcount(*)from埋点表wheredt<'2020-10-01'(正确答案)22.在BigQuery查询时，报以下错误时该如何处理？

Queriesagainstpartitionedtableswithoutapartitionfilteraredisabledforsafetyreasons.Ifyouknowwhatyouaredoing,pleasesethive.strict.checks.no.partition.filtertofalseandmakesurethathive.mapred.modeisnotsetto'strict'toproceed....sethive.strict.checks.no.partition.filter=falsesethive.mapred.mode=nonstrictshowpartitions查看分区后，在原有sql上增加分区条件(正确答案)23.数据倾斜、内存溢出时（日志中出现OutOfMemoryError:Javaheapspace），以下做法正确是：百度各种设置参数set一下把任务进行拆分，使用createtemporarytablexxxxas+select建立临时表，分步运行(正确答案)分清join和leftjoin的区别，如非必要，使用join进行关联(正确答案)去掉代码中Unionall和withas建表语句，使用createtemporarytable(正确答案)程序中on、group、row_number的key有大量重复值，可以先进行过滤脏数据或单独处理（对key进行groupby计数并排序，找到大量重复值），再进行on、group、row_number操作(正确答案)24.Hive表为什么要分区？A.合理存储空间(正确答案)B.减少扫描文件数(正确答案)C.优化查询计划(正确答案)D.支撑各种数仓模型25.以下Hivesql语法正确的是select*fromajoinbona.id<>b.idselectsum(a.amt)astotalfromawherea.total>20select*fromajoinbona.id=b.id(正确答案)26.关于Hive建表基本操作描述正确的是？创建外部表时需要指定external关键字(正确答案)一旦表创建好，不可再修改表名一旦表创建好，不可再修改列名一旦表创建好，不可再增加新列27.有关Hive中ORDERBY和SORTBY用法正确的是SORTBY用于分组汇总SORTBY用于局部排序，ORDERBY用于全局排序(正确答案)使用完全一致其他说法都不对28.Hive中concat函数的作用是是将传入的参数连接成为一个字符串，则concat('a',null,'b')的结果是ababNULL(正确答案)29.以下关于Hive基本操作描述正确的是创建外部表使用external关键字，创建普通表需要指定internal关键字创建外部表必须要指定location信息(正确答案)加载数据到Hive时源数据必须是HDFS的一个路径分区可以在创建表时指定也可在创建表后通过Alter命令添加分区30.下面关于IDP小工具EXCEL上传说法正确的是文件必须为.xlsx格式(正确答案)文件可以有多个Sheet文件大小不得大于300MB。(正确答案)Excel文件中可以使用特殊的函数和存在链接样式等其它宏用法。31.Hive中sql运算出现倾斜的情况，主要的原因有哪些?（）没加索引业务数据本身的特性(正确答案)key分布不均匀(正确答案)某些sql本身就有数据倾斜(正确答案)32.在IDP中以下时间戳转换函数使用方式正确的是from_unixtime(1601365665-8*60*60,'yyyy-MM-ddHH:mm:ss')from_unixtime(1601365665+8*