甲骨文大数据实训实践度调查报告

甲骨文大数据实训实践度调查报告成果名称：甲骨文大数据实训甲骨文大数据实训一、实践目的通过实训，学习有关软件开发的相关专业知识，了解到更多有关软件开发的知识完善自己的知识结构。锻炼学生的动手能力，将学习的理论知识运用于实践，达到锻炼和提高能力的目的。掌握软件开发的基本技术，了解软件开发的思考角度和主要流程，为本专业的学习以及软件设计打下良好的基础。通过程序设计实训，提高编程兴趣以及编程思路，掌握利用编语言进行程序设计的能力。加深对操作系统与计算机语言支持系统相互关系的了解。通过上机练习，提高学生对于项目分析、设计、编写、调试和测试的能力，培养良好的合作能力。二、实践内容在本次实训过程中，我们学习了计算机编程。在老师的讲解下了解了Java程序相关的技术内容，掌握Java语言的基本语法和Java语言的基本结构。学习使用Java程序设计语言进行代码的编写，利用Java程序编写一些编程，例如简单的计算机运算和解决一些数学计算。然后学习了如何使用JDBC操作数据库，使数据库和Java程序连接起来，快捷简便的创建数据库，其中老师以学生信息表为例为我们进行了相关操作的讲解。除此之外，我们HIA了解Python相关的知识以及运用。学习了使用Python技术进行网络文字、图片的爬取。三、实践过程在参加实训的这十几天内，我们通过不断的学习，学习了很多很多编程方面的知识。每天都通过不同的练习加深对于编程的理解，不仅了解了编程相关的知识、概念等一些常识性的东西，还通过不同项目的编码撰写练习编程语言、掌握编程语言的结构。逐步掌握Java语言程序设计的规律技巧。首先，老师给我们讲了一些有关于电脑记事本的基本运用。例如在记事本中使用CMD命令方便快捷的调用电脑中的文件。CMD命令是指可以在命令提示符里输入中文调用电脑文件。老师具体向我们演示了CMD的具体操作方式：开始－>运行－>键入cmd或command（在命令行里可以看到系统版本、文件系统版本）。还给我们演示了一些命令的操作例如：1.cmd.exe：CMD命令提示符2.自动关机的命令；Shutdown-s-t600：表示600秒后自动关机；shutdown-a：可取消定时关机；Shutdown-r-t600：表示600秒后自动重启；rundll32user32.dll,LockWorkStation：表示锁定计算机；3.Notepad打开记事本老师还为我们讲了“什么是程序”，程序通常是指完成某些事情的一种既定方式和过程，可以将程序看成对一系列动作的执行过程的描述。计算机程序则是指为了让计算机执行某些操作或解决某个问题而编写的一系列的有序指令的集合。Java是多种计算机语言中的一种。老师还说了有关Java编程的八大数据类型，分别指Byte字节型;short比较小的整数;int整数型;long比较长的整数;float浮点数;double精确度比较高的小数;char字符类型只能包含一个字符;Boolean布尔类型。然后我们学习了编写Java程序的基本步骤：第一步是编写源程序，第二步是编译源程序，最后则是在Java运行平台中运行Java程序。老师以以下代码为例给我们讲了Java程序的基本结构：publicclassHelloWorld{publicstaticvoidmain(String[]args){System.out.println("HelloWorld!!!");}}其中publicclassHelloWorld{}是Java程序的外部框架；publicstaticvoidmain(String[]args){}是Java的入口程序框架；System.out.println("HelloWorld!!!")；是编写的代码，从控制台输出信息。老师还为我们着重强调了编写Java程序应该注意的部分，类名和文件名应该完全一样，否则在编译过程中就会出现编译错误；“{”和“}”应当一一对应，缺一不可；main()方法是Java程序的入口点，其中main()方法的四要素是：1.public，声明主函数为public就是告诉其他的类可以访问这个函数。2.static，告知编译器main函数是一个静态函数，就是说main函数中代码是存储在静态储存区的，即当定义了类以后这段代码就已经存在了。3.void，表明main（）的返回值是无类型。4.参数String[]args。在编写Java程序的过程中，我们学习了两种在控制台中输出信息的语句，第一个是System.out.println();这条语句是指打印输出信息后会自动换行。第二条是System.out.print();这条语句是指在打印输出信息后不会自动换行。因为两条语句输出方式的不同，所以我们学习了如何使用转义符使两个语句达到同样的效果。其中，转义符包括\n和\t，\n可将光标移动到下一行的第一格，\t可将光标移动到下一个水平制表位置。老师为我们讲解了Java程序的注释，其中包括有单行注释：是以//开始；多行注释：则是以“/*”开始，以“*/”结尾，多行注释的每一行开头可写一个或多个*；文档注释：以“/**”开始，以“**/”结尾，用来描述文档的作用。还有在编写Java编码时应当注意的编码规范：类名需使用public修饰，一行只能写一条语句，要注意代码的大小写，{}的使用以及位置“{”一般放在某一行的最末，还有代码的缩进，不同层次的代码没有缩进。只有按照基本规则，专业化的写出代码，才能保证代码在编译过程中不会出现错误，才能使代码成功的编译出来。在了解了Java程序的相关基本知识之后，我们就开始学习编写Java程序的具体操作，首先了解到Java程序可以有两种开发方式，第一种就是利用记事本进行Java程序的开发，操作过程是：第一步，使用记事本编译源程序，以.java为后缀名保存；第二步，使用javac命令编译.java文件，生成.class文件；最后一步则是使用java命令运行.class文件，输出程序结果。另外一种开发Java程序的方式则是使用MyEclipse开发Java程序。首先老师教我们安装了一个集成开发环境（IDE），其中包括程序开发环境（JDK）和程序调试环境（MyEclipse）,，MyEclipse是一个开发源代码的、基于Java的可扩展开发平台，通过插件组件可以构建一个完整的开发环境。在构建好开发环境之后，我们开始学习如何在MyEclipse开发Java程序，第一步是创建一个Java项目，然后手动创建Java源程序，然后对Java源程序进行编译，最终运行Java程序。在学习了开发Java程序的基本步骤之后，老师开始带着我们一起利用Java做一些简单的项目。最开始我们利用Java编写了一个简易计算器，使它能够进行简单的加减乘除运算，在这个计算器编程里，我们使用的数据类型为int（整数型），首先是写出Java程序的整体框架，外部框架publicclassMain{}，入口程序框架publicstaticvoidmain(String[]args){}，然后就开始编写计算机的具体代码System.out.println("我是一个计算器,请输入第一个数");Scannerscanner=newScanner(System.in);是指用来接收使用者输入的第一个数，下一步需要把接受到的数赋予给一个变量，则有intshu1=scanner.nextInt();指把接收到的数送给变量shu1，同样的一步，提示输入另一个数，并且将第二个数赋予给另一个变量，则有System.out.println("请输入第二个数");//提示使用者输入第二个数，intshu2=scanner.nextInt();//接收用户输入的第二个加数。然后就要将两个变量之间进行运算，inthe=shu1+shu2;//指计算两个数的和，将得到的结果输出，则有System.out.println("你输入的两个数的和为："+he);若是计算差，则将运算符号“+”变为“-”，相似的则可以计算出两个变量之间的积和商。因为使用整数型数据类型进行的运算时，所以输入的数字必须为整数，且得出结果为整数，这就使得在进行除法运算时，得出结果也为整数，所得结果不精确。所以老师又教了我们另一种计算器的编程，使用的数据类型为double（小数型），可得出精确度更大的运算结果，并且运用了if{}elseif{}条件判断语句，可选择运算方式，更加的方便。因为使用if{}条件判断语句，则在编写代码的过程中首先写选择运算方式，Stringyunsufu=input.next();接收一会要进行的运算符，再根据所输入的运算方式选择需要进行的运算，然后输入需要计算的数字，进行运算，得出相应结果。则有Stringyunsufu=input.next();//接收一会要进行的运算符if(yunsufu.equals("+")||yunsufu.equals("加法")){System.out.println("输入第一个加数");doublejiashu1=input.nextDouble();System.out.println("输入第二个加数");doublejiashu2=input.nextDouble();doublehe=jiashu1+jiashu2;System.out.println("你要的和为："+he);}elseif(yunsufu.equals("-")||yunsufu.equals("减法")){}。以上这个简便计算器的程序可以选择运算方式，但是只能进行单次运算，不可循环。所以我们学习使用switchcase语句还有运用do{}while(true)循环语句使得程序可以重复进行。其中switchcase语句是判断case后面的表达式和switch后面的表达式是否匹配，一旦匹配就会顺序执行后面的程序代码，直到遇见break。Switch语句是用来判断所选择的运算符，进行相应case后的运算。而利用do{}while(true)循环语句进行循环运算。使得计算器可以选择并且可循环操作。在学习了计算器程序之后，我明白了，一个程序可以有多种编程撰写的方式，所以需要不断尝试，找出最方便快捷的一种。除了可以用Java编写计算器程序之外，Java还可以用来解决一些数学问题，老师给我们讲了如何运用Java程序“计算1—200之间的奇数和”。首先是找寻1—200中所有的奇数inti=1;i<200;i+=2，设i为奇数。将奇数相加则有奇数和为sum=sum+i，则有1-200求和的结果为：+sum。老师还为我们讲了如何运用Java程序计算经典数学题“鸡兔同笼”，其中设i为鸡的数量，for(inti=1;i<13;i++)，j为兔子的数量，for(intj=1;j<40/4;j++)，找寻两者的运算关系，则有if(i+j==13&&2*i+4*j==40);进行相应运算，则可得出结果，鸡的数量为：+i，兔子的数量为：+j不仅可以进行数学运算，还可以用来做信息统计。老师以如何录入学生成绩信息做了示范，为我们进行了讲解。首先是创建一个六十int的数组（用于储存多个相同类型数据的集合）int[]classFour=newint[60];然后输入学生成绩for(inti=0;i<60;i++){classFour[i]=(int)(60+Math.random()*40);}录入所有成绩之后，对成绩进行排名，则有排序的方法为Arrays.sort(classFour)除了排序老师还教了我们如何寻找最值intmaxScore=classFour[0];for(inti=0;i<60;i++){if(maxScore<classFour[i]){maxScore=classFour[i];假设第一个为最高分，若是下一个比第一个高则下一个为最高分，以此类推比较出最高分。在实训周讲完Java编程之后，老师又为我们讲了数据库，数据库的建立和数据表的建立。老师以学生信息表为例，首先确定了学生个人信息表的结构：学号的字段类型为int型，姓名的字段类型为String型，年龄的字段类型为int型，性别的字段类型为char型，分数的字段类型为int型。则有输出为：return"yezixu{"+"id="+id+",name='"+name+'\''+",age="+age+",sex="+sex+",score="+score+'}';接着就开始录入学生信息，一开始老师是先教了如何录入单人信息，先是输入各项信息，然后在输出的时候运用转义符\t使数据分别位于表中不同列："姓名："+yi.getName()+"\t成绩："+yi.getScore()+"\t年龄："+yi.getAge()+"\t性别："+yi.getSex()。然后教我们如何简单快捷的录入多人信息，创建一个数组，然后接着输出所有学生信息。为了方便快捷的创建出数据库，可以将数据库与Java程序联系起来，使得可以在Java程序中对数据库进行操作，首先是建立驱动管理获取驱动，建立与数据库的连接，接下来是准备一条SOL语句，并且创建一个可执行的状态小车，将SOL语句交给状态小车，处理结果并最终显示出来。除此之外，在建立数据库的过程中还要注意数据表的增减删除，增加表所用的语句为CREATETABLE`studentinfor1`(表的结构)；插入一条数据的语句为INSERTINTOstudentinfor(id,name,sex,age,score)，VALUES(3,'小四四','女',19,88);删除刚才的数据的语句为DELETEFROMstudentinfor;删除某一条数据的语句为DELETEFROMstudentinforWHERENAME='小四四';删除表的语句为DROPTABLEstudentinfor1;修改表中信息的语句UPDATEstudentinforSET='李四'，WHEREid=3;查询表中所有数据的语句为SELECT*FROMstudentinfor;在实训短学期期间，老师不仅给我们讲了课程安排以内的Java程序和数据库应用，还专门抽出周末为我们讲了有关大数据行业的发展前景和一些大数据相关知识。大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合；其主要特点为大量化、多样化、速度快、以及价值密度低。大数据行业当前的发展增长迅速，人才需求在岗位供需不均衡。并且告诉我们大数据人才必备的技能，这使我们对本专业的学习更加有兴趣，想要更好的学习大数据方面相关知识，为以后的工作发展提供更多的空间。最后，老师为我们简单介绍了Python爬虫的构架组成，主要有URL管理器、网页下载器、网页解析器。其中URL管理器是用来管理待爬取的url集合和已爬取的url集合，传送待爬取的ulr给网页下载器。网页下载器是用来爬取url对应的网页，存储成字段符，传送给网页解析器。而网页解析器是用于解析出有价值的数据，存储下来，同时补充url到URL管理器。并且为我们以爬取网络动漫为例，讲解了利用网络爬虫获取网络图片的具体步骤：首先倒入浏览器模拟器、导入时间管理对象、导入操作系统包、导入互联网请求框架，然后设置移动端浏览器模拟器参数，先要获取google浏览器参数对象然后将google浏览器默认设置为移动端模式打开网址，获取浏览器对象、使用浏览器打开斗罗大陆首页；在首页中获取当前漫画的总回数（字符串格式）并且将文本中的数字提取出来，同时设置保存图片的路径。使用浏览器打开斗罗大陆首页，请求页面后将当前页面休眠五秒钟。然后获取当前图片的总数量为数字格式。接着获取当前章节图片的模板，并且将图片的链接地址模板进行拆分成数组。获取当前章节标题作为图片当前文件夹，且判断图片文件夹是否存在，创建文件夹；然后拼接真实的图片链接地址，其中