大数据概论 课件 第2章 大数据思维

第二章.大数据思维第二章大数据思维2.1总体思维：关注全部而非部分2.1总体思维：关注全部而非部分大数据的总体思维

“关注全部”，就是指在处理大数据时，需要关注数据的全局特征，而不是只关注其中的一部分。这是因为大数据中的每个数据点都可能携带着重要的信息，而忽略了其中的任何一个数据点都可能导致信息的丢失。“关注部分”，则是一种局部性的思维方式，它可能会导致信息的偏颇和失真。在处理大数据时，由于数据的数量巨大，单纯地关注其中的一个子集往往是不够充分和准确的。全部部分第二章大数据思维2.1总体思维：关注全部而非部分福贡县成功脱贫

截止至2019年，通过对福贡县经济发展的全方位数据采集，分析得出福贡县贫困特点为：1、农村人口占比大，多以养殖业和种植业为主，家庭收入单一，受气候影响较大。2、地处边缘山区，交通不便，教育和文化氛围相对薄弱，普遍受教育程度低。3、基础设施建设滞后，电力、通讯等基础设施建设水平需要加强。第二章大数据思维2.1总体思维：关注全部而非部分福贡县成功脱贫福贡县要想实现全面脱贫，可以采取以下措施。

一是大力发展特色产业；

二是实施“旅游扶贫”计划；

三是改善基础设施建设。第二章大数据思维2.1总体思维：关注全部而非部分福贡县成功脱贫第二章大数据思维

福贡县富岩镇阿娘村，根据对当地村民的手工艺技能进行了调查和评估，设立了手工艺品展示中心，提供展销平台，阿娘村的手工艺品展示中心已成为当地的特色文化产业，不仅带动了当地村民的收入增长，还吸引了大量游客前来参观和购买，为村民创业提供了更多的机会，成功脱贫。2.1总体思维：关注全部而非部分总结第二章大数据思维辅助脱贫决策经济发展数据人口数据地理环境数据优势产业数据大数据全量采集与分析

第二章大数据思维2.2容错思维：关注效率而非精准2.2容错思维：关注效率而非精准大数据的容错思维在过去，数据量相对较小且不太复杂，精准性是最重要的考虑因素。然而，随着社会的发展和科技的进步，我们现在处理的数据已经变得极其庞大、复杂和多样化。在这种情况下，传统的精准思维方式已经不能满足我们对数据的需求。而这时，关注效率而非精准的大数据思维便应运而生。第二章大数据思维效率精准2.2容错思维：关注效率而非精准美团外卖的送达时间预测

美团外卖利用大数据技术来提高送餐效率和准确性，它通过大数据分析骑手位置、路况、订单量等多种因素，预测送餐时间并实时更新，以提高送餐效率和用户体验。

2021年9月10日，美团公布了“预估配送时间”算法。为了降低骑手的送餐压力，同时缓解顾客的等餐焦虑，预估配送时间应该尽可能保证两者的利益，降低商家、顾客、骑手之间的冲突。第二章大数据思维2.2容错思维：关注效率而非精准美团外卖的送达时间预测首先是模型估算时间算法，它基于历史订单详情和区域供需等信息，通过机器学习得出的预估到达时间。其次是城市特性保护时间算法，根据不同的城市地理及通行特性设定的保护时间。因为不同的城市有不同的道路、交通规则和交通工具，因此配送时间也会有所不同。第二章大数据思维2.2容错思维：关注效率而非精准美团外卖的送达时间预测第三种是分段保护时间算法，根据配送过程分段的保护时间。最后是分距离保护时间算法，根据不同的配送距离设定的保护时间。第二章大数据思维2.2容错思维：关注效率而非精准总结第二章大数据思维

在骑手接到订单时，会按照上述四种计算结果给出最长的预测时间，相比于精准的计算外卖送达时间，一方面对数据的精准度要求更高，对交通情况、天气情况、路线选择等等各方各面都需要考虑，计算成本高且慢。通过四种预估模型，可以大大简化数据来源，单一计算，尽可能的追求效率，以最长预测时间作为保护时间，保障骑手的安全、利益的同时，尽可能满足用户对送餐的效率要求。效率准确质量关注点第二章大数据思维2.3相关思维：关注相关而非因果2.3相关思维：关注相关而非因果大数据的相关思维

相关，指的是两个或多个变量之间的相关性，即它们之间存在某种程度上的联系或者影响关系。

因果关系，则指的是一种因果联系，即一个事件的发生是由于另一个事件的影响所导致的。第二章大数据思维鸡鸣日出相关性因果性2.3相关思维：关注相关而非因果淘宝的个性化推荐算法第二章大数据思维2.3相关思维：关注相关而非因果淘宝的个性化推荐算法第二章大数据思维2.3相关思维：关注相关而非因果淘宝的个性化推荐算法

淘宝上有几亿的产品，如何从中挑选最适合的数十条产品展现给淘宝用户呢？这就是淘宝个性化推荐算法的价值。推荐系统主要分为两个阶段：召回阶段和排序阶段。第二章大数据思维2.3相关思维：关注相关而非因果总结第二章大数据思维

在学习大数据思维时，我们需