大数据的兴起离不开多种支撑技术,这些技术也刺激着市场对大数据技术的兴趣不断增加。来来来,看看下面的解释。
大数据技术
Hadoop 生态系统
当你在 Google 上搜索大数据时,你总会看到 Hadoop 这个词。包含在本文中。呵呵。
Hadoop生态系统不是一个应用程序,而是大数据问题的解决方案。 Hadoop 是开源的。这意味着,您可以修改 Hadoop 系统来满足企业大数据的需求。或者用今天的儿童俚语来说,你可以修复 Hadoop。 Edureka 的Shubham Sinha表示,Hadoop 是一个框架,由执行不同任务的多个部分组成。有些人的任务是收集数据,有些人的任务是分析数据。
来吧,我们来看看Hadoop生态系统成员的组成部分和职责。
HDFS(存储)
HDFS 是 Hadoop 分布式文件系统的缩写。 HDFS 有两个角色 现金应用数据库 不同的部分。嗯,这就是生育系统。是的,HDFS由名称节点和数据节点组成。
名称节点的作用是记录文件中的元数据。例如,文件大小、权限、文件存储位置等。同时,数据节点也有记录实际数据的作用。例如,二进制数等。
头晕了吧?相同的。呃哦。我不是在开玩笑。
就这么简单,HDFS就像一个咸蛋。这是蛋壳,还有蛋的部分。嗯,shell 就像一个名称节点。您可以从蛋壳的颜色、咸蛋生产标记(如果有)以及过期标记来判断它是否是咸蛋。然而,壳不是可以吃的东西。
当你买咸蛋时,你肯定想吃蛋,而不是壳。嗯,壳里的鸡蛋就好比是一个数据节点。你可以吃咸蛋,感受一下口感、味道等。就像数据节点记录实际文件一样。
然而,名称节点和数据节点都很重要。就像咸蛋一样。你有没有买过咸蛋,但咸蛋没有壳?还是买咸蛋不加鸡蛋?就像本质上无法分离的货币一样。
纱