Day1+hw03322641+晴天·莫冰落

华为云ID：hw03322641

华为云ID：hw03322641数据处理的方式的角度流式（Streaming）数据处理批量(batch)数据处理数据处理延迟的长短实时数据处理：毫秒级别离线数据处理：小时 or 天级别SparkStreaming 准实时（秒，分钟），微批次（时间）的数据处理框架Spark Streaming的特点易用容错易整合到Spark体系背压机制（即Spark Streaming Backpressure）：根据JobScheduler反馈作业的执行信息来动态调整Receiver数据接收率。Discretized Stream是Spark Streaming的基础抽象，代表持续性的数据流和经过各种Spark原语操作后的结果数据流。在内部实现上，DStream是一系列连续的RDD来表示。每个RDD含有一段时间间隔内的数据。

华为云ID：hw03322641 SparkStreaming数据处理的方式的角度流式（Streaming）数据处理批量(batch)数据处理数据处理延迟的长短实时数据处理：毫秒级别离线数据处理：小时 or 天级别SparkStreaming 准实时（秒，分钟），微批次（时间）的数据处理框架Spark Streaming的特点易用容错易整合到Spark体系背压机制（即Spark Streaming Backpressure）：根据JobScheduler反馈作业的执行信息来动态调整Receiver数据接收率。Discretized Stream是Spark Streaming的基础抽象，代表持续性的数据流和经过各种Spark原语操作后的结果数据流。在内部实现上，DStream是一系列连续的RDD来表示。每个RDD含有一段时间间隔内的数据。

华为云ID：hw03322641第三章测试

华为云ID：hw03322641第二章测试

华为云ID：hw03322641第一章 

大数据：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。主要解决：海量数据的存储和海量数据的分析计算问题。    按顺序给出数据存储单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB1P=1024T特点：大量（数据）、（增长）高速、（数据）多样性、（数据）低价值密度:如何快速对有价值数据“提纯”，成为目前大数据背景下待解决的难题。