欢迎光临散文网 会员登陆 & 注册

普通台式计算机可以跑大数据吗?

2023-07-19 14:32 作者:一枚IT小学妹  | 我要投稿

1. 前言(讲解大数据)

大数据(big data)又称巨量资料,是指高速(Velocity)涌现的大量(Volume)多样化(Variety)的数据,它具有大量、高速、多样、低价值密度、真实性5个特点。大数据这个概念起源是在1960-70年代,当时全球第一批数据中心和首个数据库在这个时代诞生。随着互联网的发展,大数据能够帮助我们更准确的分析数据,给出我们专业性的指导意见,例如产品开发、客户体验、机器学习、预测性维护等这些都是企业大数据常见的使用场景。

图1:来源于中国大数据产业联盟,大数据产业园区

2.大数据对服务器配置的要求

  •  高性能

处理器的性能很重要,CPU的主频要高,因为要提供较大的缓存。


  • 可靠性

系统要稳定,避免在跑数据的时候,系统突然出故障,要考虑硬盘、网卡、内存、电源这些设备稳定耐用性。


  • 存储数据的安全性和稳定性

硬件要拓展性好,在后期业务量增长的时候,能否进行扩展也很重要,大数据跑起来,需要硬件一直保证处于工作状态。


3. 计算机和服务器

  •  储存需求

我们这里看看超微的SYS-640SP-E1CR60举,超微这款存储服务器高达 54MB 的缓存。

 

 

图2:来源百度

市面上服务器最大能够支持102TB,而目前计算机最大能支持512TB,现在大部分人的计算机容量都在16GB以下,1TB=1024GB,可想而知,服务器的容量有多大。


  • 计算能力

同样的数据,普通台式计算机可能要跑一天,但是服务器只需要一天甚至更短的时间就能够完成和普通台式计算机一样的工作量。

 

图3:服务器实拍图
  • 数据处理和分析

服务器处理数据,会先按照数据传输序将数据摘要排入队列,然后服务器在按照队列依次进行处理,然后进行数据分类和有限处理一起使用,将数据按照不同的类型进行分类,最后对数据进行分层,分流管理。

普通台式对于大型任务,处理起来速度慢。效率低。


3.结论

所以普通台式机跑不了大数据,对于海量数据的大数据项目,个人电脑是无法实现的,个人电脑可以搭建,但是只能做简单的测试,正常跑大数据应用的机器是常年不关机的,而且要求性能很高。在硬件方面,台式计算机就不能够满足


如果有什么不了解的地方,欢迎私信我们,别忘记右上方点点关注。



普通台式计算机可以跑大数据吗?的评论 (共 条)

分享到微博请遵守国家法律