1安装现在运行安装Docker的命令：sudoaptgetinstallydocker.io等待安装完毕，现在我们使用下面的命令启动Docker：systemctlstartdocker运行系统引导时启用docker，命令：systemctlenabledocker你可能想核对一下dock

这些资料都是我在工作中学习、解决问题的资料汇总，我不能保证这里罗列的所有资料对看到的人有用，但大部分都经过我的实际验证。在不断学习和实践过程中，我会不断更新和总结这些资料，同时欢迎大家留言交流。感谢这些资料的作者。一、HDFS1、集群安装：Hadoop2.6.0HA高可用集群配置详解(https://www.os

Redis命令Redis命令用于在redis服务上执行操作。要在redis服务上执行命令需要一个redis客户端语法Redis客户端的基本语法为：$rediscli中文出现乱码问题要在redis

命令行使用高亮显示命令clear清空session列表select高亮显示响应匹配的请求session！如:selectjson响应类型(contenttype)为json的session都会高亮allbut与select命令相反、显示匹配外的sessio

1本地模式本地模式是最简单的模式，所有模块都运行在一个JVM进程中，使用本地文件系统而不是HDFS。本地模式主要是用于本地开发过程中的运行调试用，下载后的Hadoop不需要设置默认就是本地模式。2准备工作笔者喜欢把JDK放在/usr/local下，运行前请确保设置了JAVA_HOME，注

分布式缓存Flink提供了一个分布式缓存，类似于hadoop，可以使用户在并行函数中很方便的读取本地文件，并把它放在taskmanager节点中，防止task重复拉取。此缓存的工作机制如下：程序注册一个文件或者目录(本地或者远程文件系统，例如hdfs或者s3)，通过ExecutionEnvironment注册缓存文件并为它起一个名称。

1.Mongodbbson文档型数据库，整个数据都存在磁盘中，hbase是列式数据库，集群部署时每个familycolumn保存在单独的hdfs文件中。2.Mongodb主键是“\_id”,主键上面可以不建索引,记录插入的顺序和存放的顺序一样，hbase的主键就是rowkey，可以是任意字符串(最大长度是64KB，实际应用中长度一般为1010

【导语】：Python实现的HTTP请求命令行客户端，我理解为curl的Python版本，但是提供了更友好，更易使用的命令及选项。简介HTTPie是使用Python实现的HTTP命令行工具，提供了更人性化、交互性更好的命令和选项，可以用来做测试、调试以及与HTTPAPI服务器交互，http和https命令可以用来发送任意的http请求，使

查看防火墙的状态的命令为：sudosystemctlstatusfirewalld。打开防火墙的方式有两种，一种是打开后重启会恢复回原来的状态，命令为：sudosystemctlstartfirewalld；另一种是打开后重启不会恢复到原来的状态，命令为：sudosystemctlenablefirewalld，这种方式输入命令后要重启系统

时间2022年8月5日—2022年8月9日北京（同时转线上直播）（5日报到，6日9日上课）课程第一天一、大数据概述二、大数据处理架构Hadoop三、分布式文件系统HDFS四、分布式数据库HBase第二天五、MapReduce六、Spark七、IPythonNotebook运行PythonSpark程序八、PythonSpark集成开发环境第三