下述选项中与大数据密切相关的是
2022-08-13 11:41:28
与大数据密切相关的是
1、数据处理技术
大数据处理技术中，当流动的数据进入内存后，直接对数据进行实时的计算分析，更关注数据的时效性和用户的交互性。数据的实时流式计算过程不仅需要在数据不落地的情况下完成，而且还需要考虑多流合并、多流与外部维表关联、异常时间窗口等各种复杂因素及其它业务功能操作，与批处理相比，对系统性能要求更高。
2、数据存储技术
大数据的存储和计算是相辅相成的，存储是业务数据的重点，也是数据处理分析的基础。为了减少冗余数据的存储，应尽可能做数据的范式模式。大数据的数据类型种类繁多，分布广泛，可在多张数据表中进行关联复杂查询操作时，频繁的使用groupby或者orderby操作，查询性能下降明显，直接影响用户体验。
且在数据结构调整方面存在空间利用率低，停机操作麻烦等问题。分布式存储将数据分布在多台廉价的服务器替代昂贵的专用存储硬件，对数据存储采用副本机制，解决了数据丢失的问题，提高了数据的可靠性。
3、Kafka技术
大数据、高性能计算能力和深度神经网络架构是深度学习的核心要素和组成部分。Kafka根据不同的topic对消息进行分类保存，每一个topic又由多个partiton组成。Kafka具有持久性、可靠性和高并发性等特点，是中间消息件的首选框架。Kafka中Producer和Consumer客户端离开不会对Kafka集群造成额外的影响。
大数据是什么
大数据，或称巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。
云计算是什么
云计算是基于互联网的相关服务的增加、使用和交付模式，这种模式提供可用的、便捷的、按需的网络访问，进入可配置的计算资源共享池，这些资源能够被快速提供，只需投入很少的管理工作，或与服务供应商进行很少的交互。云是网络、互联网的一种比喻说法。
热门标签
