《大数据存储技术与应用》 课件 项目五-任务一 走进半结构化数据存储

《大数据存储技术与应用》大数据存储技术与应用项目五深入半结构化存储任务一走进半结构化存储技术什么是结构化数据？什么是MPP？结构化数据存储的技术路线？Hadoop？回顾任务引入-云数据库TencentDBforRedis腾讯云数据库Redis（TencentDBforRedis）是腾讯云打造的兼容Redis协议的缓存和存储服务。丰富的数据结构能帮助您完成不同类型的业务场景开发。支持主从热备，提供自动容灾切换、数据备份、故障迁移、实例监控、在线扩容、数据回档等全套的数据库服务。任务描述:本节从半结构化数据入手，阐述了半结构化数据存储技术和NoSQL技术，最后对NoSQL的典型代表Redis和MongoDB数据库进行了简单的描述。任务教学目标：了解NoSQL数据存储。掌握Redis内存数据库技术。掌握Elasticsearch存储技术。任务概要教学内容半结构化数据概述半结构化数据存储技术一二NoSQL概述NoSQL代表三四半结构化数据概述知识点一半结构化数据存储概述半结构化数据具有一定的结构，但不如结构化数据那样完整、规则和固定。半结构化数据具备如下特点：一是隐含的模式信息；二是不规则的结构；三是没有严格的类型约束。半结构化数据存储概述大数据半结构化数据存储对数据存储技术提出了新的需求：一是存储容量的可扩展性和易扩展性；二是存储技术应用场景的多样性；三是存储数据的快速访问能力；四是存储技术处理半结构化数据的能力。半结构化数据存储技术知识点二

安装依赖（53&54）本项目从半结构化数据存储技术的特征和需求出发，概括性地阐述了半结构化数据存储技术，然后详细介绍了典型的半结构化大数据存储技术，即NoSQL存储技术和ElasticSearch存储技术，着重讲解了存储技术的概念、特点、安装部署与基本操作，并通过应用实例诠释了大数据半结构化数据存储技术的应用实践。通过本项目的学习，帮助读者掌握大数据半结构化数据存储技术及其应用的技能。半结构化数据存储技术NoSQL概述知识点三

安装依赖（53&54）NoSQL是一种不同于关系数据库的数据库管理系统设计方式，是对非关系型数据库的统称，它所采用的数据模型并非传统关系数据库的关系模型，而是类似键/值、列族、文档等非关系模型。NoSQL数据库没有固定的表结构，通常也不存在连接操作，也没有严格遵守ACID约束。（一）NoSQL概述

安装依赖（53&54）（二）NoSQL的四大类型

安装依赖（53&54）（三）NoSQL的三个基石

安装依赖（53&54）（四）数据库产品演变

安装依赖（53&54）（五）数据库产品分类NoSQL代表知识点四

安装依赖（53&54）NoSQL代表任务小结本任务介绍了NoSQL数据库的相关知识。NoSQL数据库较好地满足了大数据时代的各种非结构化数据的存储需求，开始得到越来越广泛的应用。但是，传统的关系数据库和NoSQL数据库各有所长，彼此都有各自的市场空间，不存在一方完全取代另一方的问题，在很长的一段时期内，二者都会共同存在，满足不同应用的差异化需求。NoSQL数据库主要包括键值数据库、列族数据库、文档数据库和图数据库4种类型，不同产品都有各自的应用场合。CAP、BASE和最终一致性是NoSQL数据库的三大理论基石，是理解NoSQL数据库的基础。扩展训练Redis独立学习Redis是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。它支持多种类型的数据结构，如：字符串（strings），散列（hashes），列表（lists），集合（sets），有序集合（sortedsets）与范围查询，bitmaps，hyperloglogs和地理空间（geospatial）索引半径查询。Redis内置了复制（replication），LUA脚本（Luascripting），LRU驱动事件（LRUeviction），事务（transactions）和不同级别的磁盘持久化（persistence），并通过Redis哨兵（Sentinel）