我们为什么需要大数据库，大数据平台是什么什么时候需要大数据平台

谢邀我们为什么需要大数据库！

最近我和我的团队一直在做一些大数据相关的工作，我来回答一下这个问题。

首先是第一个问题，大数据平台是什么？当我们说到一个平台的时候，我们的意识里面往往就知道，这里面肯定不止一样东西，它是很多东西的一个集合，大数据平台也是一样，首先如果用几个字来描述它的话就是“它是一个数据解决方案”，进一步解析就是：大数据平台它是一个以分布式存储为基础，集成了数据获取，数据清洗，数据流转，数据分析，数据输出等工具集的一个数据解决方案。它的核心使命是提供数据存储和数据分析服务给目标客户。

那么它的核心组成部分是什么呢？实现的方法有多种，我就举一个最典型的大数据平台结构作为说明。

目前无论是国内或者国外，应用最广泛也是最典型的大数据平台是以Hadoop为核心进行功能延伸的生态系统，业内把它叫做Hadoop生态，它开源并且免费使用，它长什么样子？它的面目基本上是这样：

从上图我们得知，它就是一套以Hadoop分布式文件系统为核心的数据处理工具集，目的是为了向用户提供数据分析服务的一个集成解决方案。

什么时候需要大数据平台？简单的说就是当数据总量大到传统单机数据解决方面没办法存储，分析，计算时就要用到大数据平台。

举例说，家用电脑目前一般是配置2TB大小的硬盘(存储容量约等于于18个128G的iPhone)，一般几万块钱的商用服务器容量大约在32TB容量，高端的单机存储器可以达到100TB以上，但是数据量如果再大比如上跳一个数量级1000TB,也就是1PB左右，单机系统就无能为力了，不单是存储容量无能为力，计算能力也无法应对了，因为我们知道，单台计算机的性能是有极限的，数据太多磁盘检索读取的速度就会变慢，CPU和内存压力也会变大，这个时候需要完成一个数据分析任务就要耗时很长，那么这个时候大数据平台就派上用场了，大数据平台的一个特性就是多台计算机组成一个集群集体并行作战，并且理论上可以无限拓展。

希望我的回答能够帮助到您，有任何问题请在留言区留言，也欢迎关注头条号，一个20年资深IT领域工作者，我会以图文和视频的方式陆续更新一些IT知识在我的头条号上。

作为一名IT行业的从业者，同时大数据也是我的主要研究方向之一，所以我来回答一下这个问题。

当前正处在大数据时代，数据将作为信息化时代背景下一个重要的生产材料，通过对于数据的价值化操作，能够不断从数据中挖掘出大量的价值，所以大数据将打造出一个新的、庞大的生态环境，这个生态环境对于整个社会都将产生重要的影响。所以当前无论是上层政策方面还是地方机构都对大数据非常重视，不少地区陆续成立的大数据局就是为了能够更好的促进大数据的发展和应用，从而帮助地区行业的发展和创新。

作为互联网企业来说，由于自身具备巨大的数据流量，同时也有较强的技术研发能力，所以在从事大数据方面具有天然的优势。在消费互联网时代，互联网企业把这种优势全面体现到了各种互联网产品中。可以说，消费互联网时代的产品竞争，主要就体现在“数据竞争”上，数据是互联网企业的核心资产，所以互联网企业做大数据是必然的。

互联网企业做大数据的同时也促进了大数据技术的发展，积累了大量的大数据应用经验。可以说，大数据技术的发展在很大程度上得益于互联网企业的推动。

随着5G标准的落地应用，产业互联网将是互联网发展的下一个重要方向，对于互联网企业来说，产业互联网的发展需要借助产业数据，而互联网企业自身并没有产业数据，所以在产业互联网阶段，互联网公司就需要与传统行业进行合作了，而且这个合作会越来越紧密，一方面传统行业需要互联网辅助创新和发展，另一方面互联网企业也需要借助产业互联网实现高速发展，可以说产业互联网是互联网行业和传统行业共同的选择。

我从事互联网行业多年，目前也在带计算机专业的研究生，主要的研究方向集中在大数据和人工智能领域，我会陆续写一些关于互联网技术方面的文章，感兴趣的朋友可以关注我，相信一定会有所收获。

如果有互联网方面的问题，或者考研方面的问题，都可以咨询我，谢谢！