大数据在存储和管理时用到的关键技术主要包括分布式存储技术如Hadoop的HDFS，能够将数据分散地存储在多个节点上，从而实现对海量数据的处理分布式计算框架如Hadoop的MapReduce，能够在大量计算机集群上并行地处理大数据，实现大数据的快速分析数据挖掘和机器学习算法大数据的挖掘和分析需要依赖于高效的。

1 分布式存储技术例如Hadoop的HDFS，它通过将数据分散存储在多个节点上，有效地处理了海量数据的存储问题2 分布式计算框架例如Hadoop的MapReduce，它能够在庞大的计算机集群上并行处理大数据，从而实现快速的数据分析3 数据挖掘和机器学习算法为了高效地挖掘和分析大数据，常用的工具包括Scikitlear。