[随笔]VSCode Remote-ssh+云主机搭建pySpark学习环境

Posted 2021-02-19 zeolim

最近spark上机练习比较多，原先采用了虚拟机的方式做练习

第一机器性能比较差，本地体验不好

第二用vscode比较多，轻量好用又熟悉

所以周末抽时间把环境布到开发机上去

构建流程:

1. 安装vscode

2. 安装msys2/mingw等模拟shell环境，安装ssh相关组件

   1. 这个可以偷个懒直接装 git for windows 一来这个东西本来就是个简化的msys并且有ssh组件，二来不需要编译项目的话也比较轻量，三来git基本都有，省得麻烦

3. 老三样密钥连接开发机 -> 启动git bash

   1. $ ssh-keygen

   2. $ ssh-copy-id yourname@yourip

   3. $ ssh yourname@yourip

4. OK的话本地的公钥已经copy到开发机了，在vscode里面只需要配置下环境地址就vans了

5. 扩展里安装下remote-ssh 插件 -> 安装完是这个状态

   

6. 添加一个新host 

7. 点击configure把刚添加的host(cloud)改成如上格式 

8. 右键connect ctrl+` 呼出终端 

9. 正常 配置spark环境，开发 done！