农业大数据笔记

农业大数据笔记1227大数据分技术型定义和非技术性技术型定义；大数据是来源多样、类型多样、大而复杂、具有潜在价值，但难以在期望时间内处理和分析的数据集。非技术性定义：大数据是数学化生存时代的新型战略资源，是驱动创新的重要因素，正在改变人类的生产和生活方式。4V定义：价值（Value），数据价值巨大但价值密度低；二是时效（Velocity），数据处理分析要在希望的时间内完成；三是多样（Variety），数据来源和形式都是多样的。四是大量（Volume）新，数据量要达到PB级别以上。狭义农业：种植业、林业、畜牧业、水产业。广义农业：四大产业的上下游产业农业数据：生产数据、价格数据、统计数据、进出口数据、气象数据。农业大数据的五个开发方向：1、 水、土地、生物及生产资料等农业资源的管理。摸清家底、优化配置、合理开发、节能增效。2、 土壤、大气、水质、气象、污染、灾害等农业生态环境管理方面，农业全面检测和精准管理，提高生产效率。3、 设施种植业、养殖业及精准农业等涉农生产过程管理方面，提高生产过程中的智能决策、精准检测及科学化管理。4、 农业设施健康、远程诊断、服务调度等农业装备及设施监控方面，为农业环境资源、生产过程、产品安全、市场监测、预测，提供技术支撑。5、 产地环境、产业链管理、产前产中产后、储藏加工、市场流通领域、物流、供应链等农产品和视频安全管理，为农产品安全提高保障。精准农业：综合利用农业工程技术、信息技术和人工智能等高新技术，以获得高产、优质、搞笑的现代农业生产模式和技术体系。3S：GPS（全球定位系统）实时定位；精准定位水、土、废了等农作物的生长环境及空间分布；精确地定位农作物长势和病虫草害的空间分布；精确绘制作物产量分布图；自动导航田间作业机械；实施变量施肥、灌溉、喷药等作业；利用物联网技术，通过在田间的各种变量信息采集仪器，就能够不间断地获取土壤含水量、养分、耕作层深度和作物病虫草害以及苗情等各类属性信息，与此同时还可以记录与这些变量的空间位置信息，生产CIS图层，可为农业专家系统提供基础数据。GIS（地理信息系统）空间分析和综合处理；它不仅能够管理各类属性的海量数据，更主要的是能够实现对空间数据深入处理分析。农田地里信息系统能通过GPS和传感器采集的空间数据进行可视化分析，从而形成田间状态图，如土壤养分分布图、土壤水分分布图、作物产量分布图等，为农产品生产者提供资源投入决策的依据。还能利用CIS路径分析功能，确定各种农业基础设施的最佳空间布局以及播种、施肥、除草、灌溉、收获等农产品的最佳作业路线以及分类管理计划和措施。RS（遥感系统）数据采集更新。在精准农业中可以实现，一、对农作物的长势监测和产量估算。二是水分亏缺的监测。三是养分监测。四是农作物病虫害监测。农业信息化是指在农业生产、加工、刘涛、消费等各个环节，运用现代信息技术和智能工具，实现农业生产经营、农产品营销、农产品消费的科学化和智能化的过程。农业的痛点；标准化、规模化。农业大数据中心的主要任务：收集农业各个学科和各个领域的相关资源数据，按照统一的标准对数据进行加工和预处理，对数据进行相应的存储和集成，进行有效的数据质量管理和控制，保证数据的可用性和完整性；提供数据检索和分发服务，具备数据查询和服务的相应系统接口；研究制定农业大数据共享标准和政策；开展农业大数据的深加工，进行农业大数据的挖掘、分析及可视化，为农业生产和科技创新提高数据支持等。农产品生产具有区域性、季节性、分散性、不确定性以及生命周期较短的特点；而消费者对农产品的消费需求却有普遍性、多样性和变化性等特征，农产品价格过度波动特诊比较明显。大数据分析方式三步走；数据收集、数据清洗和整理、数据分析、模型的选择。期货市场通过价格发现和套期保值两个功能服务于农业经济。林业数据类型与特点1、 林业资源数据2、 林业环境数据3、 林业自然灾害发生及防治林业数据的获取方法1、 传统的野外调查2、 遥感方法3、 物联网方法4、 基于高科技设备的现场记录方法林业数据面临的问题1、 尺度问题2、 精度问题3、 结构问题4、 人工造林问题畜牧业数据类型与特点1、 畜牧业产品品种数据2、 畜牧业生态环境监测及预警数据3、 畜牧业产品生产经营数据4、 畜牧业相关产品质量安全监管数据5、 畜牧业相关科技数据6、 畜牧业相关市场信息渔业养殖数据类型与特点1、 养殖品种数据2、 养殖环境数据3、 捕捞分布数据4、 捕捞对象数据5、 捕捞渔船数据农业水利资源数据1、 农业水利资源数据管理与决策支持系统2、 农业水质监测数据和信息评价系统3、 水土保持数据监测及管理信息系统农产品加工数据类型及特点1、 农产品加工类型数据2、 农产品加工质量安全监管数据3、 农产品加工业服务数据农产品加工数据的获取1、 调查法数据采集2、 基于RFID技术的数据采集3、 基于计算机智能控制技术的数据采集4、 网络查询发数据采集农业气象数据及其应用气象数据包括光照、温度、湿度、风、气压、降水、蒸发、运地理数据及获取自然地理数据和社会经济数据，地貌、水洗、交通、地表类型、境界、地名。地理空间数据的获取野外观测数据（数据格式转换）、地图数据（首付跟着数字化和扫描矢量化）、遥感数据（遥感解释）、统计资料（键盘录入）、文字报告（键盘录入）、系统数据（数据转换）。农业生产资料数据植物的种子、动物种苗、疫苗、温室、日光大棚、农药、兽药、养殖设施、肥料、浇灌和施肥设施（水肥一体化）、农机具。农业大数据的来源以及采集方法技术1、 大数据的采集渠道政府部门、公开刊物、互联网渠道、市场调查渠道、仪器设备自动采集、监控监视设备、卫星遥感、电子商务。2、 大数据采集技术分布式高速、高可靠数据爬取、高速数据全映像农业大数据的预处理方法技术1、