关于课程环境

1. 课程环境为单节点集群，名称为 hadoopsinglenode，包括Hadoop/Spark/Hive/HBase/Flume/Sqoop。
2. 这里的大数据集群的配置是减配的，如没有HA(高可用)、仅仅启动一部分功能组件和服务(daemon)，以降低内存消耗(需要8G内存)。
3. 本课程(大数据框架全栈(精简版))侧重于快速了解大数据的应用，因此不会出现诸如搭建等涉及底层原理的内容。
4. 数据可视化环境参考《大数据框架全栈》"数据可视化分析"章节说明。
5. 课程环境是定制的，根据高校的情况定制的，请联系松鼠学苑。

She平台高校版学生端网络设置

学生通过PC个人电脑的Chrome浏览器登录She平台高校版、具体网址由授课老师发布(但肯定不同于She平台C端版地址：http://she.kinginsai.com)。

She平台高校版通常部署在相应学校的机房环境中，学生PC个人电脑需要同时具备访问外网和访问学校机房环境的网络接入条件。

She平台高校版的资源

1. She平台C端版(http://she.kinginsai.com)的服务端有外网权限，所以松鼠学苑的标准课程均从资源的源端下载、如https://archive.apache.org/dist/hadoop/common/hadoop-3.1.2/hadoop-3.1.2.tar.gz；但通常She平台高校版的服务端没有外网权限(这个很容测试、如ping www.baidu.com)，因此需要通过(http)文件服务器/gitlab服务器下载、或者从学生本地计算机上传的方式解决。

2. 文件资源放在(http)文件服务器上，可以阅读She平台手册的"She平台课程环境详细操作说明"部分，这样在学生可使用wget命令下载到实训环境中，因为文件服务器和She平台是部署在同一内网中；如果对应高校版本中没有部署(http)文件服务器、或者(http)文件服务器中没有相应资源，可以在学生个人电脑端从互联网下载相应资源到本地，然后上传到实训环境中，具体方法参考She平台手册的"ssh远程连接远端服务器工具"部分。

3. 配置文件、代码等教学资源放在gitlab服务器上，可以阅读She平台手册的"She平台课程环境详细操作说明"部分，这样在学生可使用git clone命令下载到实训环境中，因为gitlab服务器和She平台是部署在同一内网中；如果对应高校版本中没有部署gitlab服务器、或者gitlab服务器中没有相应资源，可以在学生个人电脑端从松鼠学苑的github仓库(https://github.com/haiye1018/)下载相应资源到本地，压缩后上传到实训环境中，具体方法参考She平台手册的"ssh远程连接远端服务器工具"部分。

详细学习内容可观看Spark快速大数据处理扫一扫~~~或者引擎搜索Spark余海峰