云爬虫测试

Posted Lqq`

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了云爬虫测试相关的知识,希望对你有一定的参考价值。

linux部分内容:
pwd:查看当前环境
ls:当前目录下的文件
cd .git
vim config(查看代码)
git pull(更新代码)
python manage.py shell
#读取文件中内容
 file_object=open(‘/home/princetechs/桌面/文件名’)
 all_the_text=file_object.read()
 print(all_the_text)
 file_object.close()
 
虚机到本机获取文件
scp [email protected]:/Us  ers/princetechs/Desktop/mongodb-linux.tgz /home/princetechs(获取文件用户名和当前的网址  文件所在的位置 文件名 所想要放的位置)[下载文件]
 
scp /home/princetechs/clawer-test-shell [email protected]:/Users/princetechs/Desktop/[上传文件]
 
解压 tar zxvf mongoldb-linux.tgz
移动 mv mongodb-linux-x86_64-amazon-3.2.5 mongoldb
超级用户创建目录db  sudo mkdir -p /data/db
在根目录下不能直接运行或者改变文件,加上sudo 强制执行就可以了
在后台运行可以在命令后加&
强制退出control+c
在指定目录下创建文件  touch lqq/touch /home/linux/lqq
创建文件夹:mkdir abc
查看文件在那个目录下:which python       which pip
更改路径:cp  源文件或目录  目标文件拷贝到另一个文件目录中
更改文件名:mv  源文件名   更改的文件名
删除文件:rm -f   文件名
删除文件夹:rm -rf 文件夹名
切换为root用户:su root
 
git的使用
git  pull:  拉代码
git status:查看当前状态
git bran test :创建一个分支
git checkout dev:切换分支
git push origin test:将文件给推到服务器上 
git merge dev:合并
git commit:提交
git add:添加一个文件到git index
git log:查看commit的日志
git clone ssh://[email protected]:2222/diffusion/BD/base_data.git

以上是关于云爬虫测试的主要内容,如果未能解决你的问题,请参考以下文章

centos系统下安装chrome和chromedriver驱动《实现selenium爬虫测试》

基于爬虫的小湖知识图谱系统测试心得

如果网页内容是由javascript生成的,应该怎么实现爬虫

爬虫测试该如何进行?这个方法教给你...

第一个爬虫与测试

第一个爬虫与测试