Czl的博客

记录技术之路及生活上的点点滴滴


  • 首页

  • 关于我

  • 标签

  • 分类

  • 归档

大数据处理平台Hadoop(四)

发表于 2019-09-04 | 分类于 bigdata

Hadoop安装、单机模式及伪分布模式搭建

通过上一章的介绍和学习,相信读者朋友们已经掌握了怎么用自己的电脑登录服务器,我们懂得了远程登录工具的作用,还有的是我们还进行了节点的jdk配置,使我们的服务器更加的完善了,下面这一章我们将来介绍一下hadoop的安装以及单机调试模式,伪分布式这几个点。同样的,你搭建的4台机器也要安装上hadoop环境。

阅读全文 »

大数据处理平台Hadoop(三)

发表于 2019-08-05 | 分类于 bigdata

大数据处理平台Hadoop(三)

Hadoop的远程登录工具及jdk的安装

通过上一章的学习,相信读者朋友能够搭建出centos7的hadoop节点,要深入学习hadoop,请读者务必认真搭建好Hadoop的节点,毕竟现实中的我们没有真实的hadoop集群,我们只能靠电脑虚拟出来,通过虚拟机技术来模拟服务器。请读者朋友记住,这次我们需要的是4台虚拟机,请认真的配置好再进行下面章节的学习。下面的这一章,我们介绍的是用远程登录工具登录我们的节点,并且在节点安装jdk。

阅读全文 »

大数据处理平台Hadoop(二)

发表于 2019-07-24 | 分类于 bigdata

大数据处理平台Hadoop(二)

Hadoop节点的准备

通过上一章的学习和理解,相信读者朋友们和我一样已经理解了hadoop的发展和hadoop是个什么平台,hadoop的核心是hdfs分布式文件系统和mapreduce。但是,我们要使用分布式文件系统(HDFS)和mapreduce的时候必须进行环境的搭建,在进行hadoop的配置时,由于涉及的是分布式,因此我们需要多台机器的协助,虽然我们不能同时拥有多台电脑,但是,一些虚拟机技术带给我们学习Hadoop的方便。在准备学习hadoop平台时,希望读者朋友先准备4台虚拟机,当然要是读者朋友们有条件的话,可以得到节点也可以忽略虚拟机的安装。

阅读全文 »

大数据处理平台Hadoop(一)

发表于 2019-07-17 | 分类于 bigdata

简要介绍

作为本公众号的一个新的分支,计算机视觉这件小事一般记录的是深度学习和人工智能的学习笔记,今天将为大家献上大数据及大数据处理平台,分布式的一些笔记,以上是大数据平台关于hadoop的简介,以后将带领大家一步步走入大数据的学习,在学习前,我们应该先了解hadoop的简介,在接下来的一些章节,将为大家讲解hadoop的搭建安装,还有一些大数据工具,Hbase,Hive,Spark,zookeeper等等。

大数据处理平台Hadoop(一)

Hadoop发展

Hadoop是Doug Cutting(Apache Lucene创始人)开发的使用广泛的文本搜索库。Hadoop起源于Apache Nutch,后者是一个开源的网络搜索引擎,本身也是由Lucene项目的一部分。

阅读全文 »

对自编码及时间序列特征提取的总结

发表于 2019-07-15 | 分类于 1

介绍

时间序列是一种应用广、复杂、维度高的数据形式,是根据客观对象的某些物理量在时间维度上的采样值排列组成的数据序列,按一定的时间走势的数据类型,它客观地记录了所观测对象在各个单位时间点上的状态值。时间序列应用十分的广泛,金融数据,流媒体数据、气象数据、人口普查数据、系统日志数据都是时间序列数据类型。

阅读全文 »

Hello World

发表于 2019-07-10

Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hexo, you can find the answer in troubleshooting or you can ask me on GitHub.

阅读全文 »

陈紫良

陈紫良

一只脱缰的哈士奇

6 日志
2 分类
2 标签
GitHub
本站访客数:
本站总访问量次
© 2019 陈紫良