hadoop 每天定时同步数据库配置数据到hive中
deepin + python3 + opencv + dlib
docker build /home/derek/Desktop/dockerfils-dir/ -t test-image:v1.0
无验证仓库
docker 操作记录
docker 安装记录
做爬虫的时候,离不开代理ip,自己也抓取过免费代理,进行维护;说实在的，真不行，我抓取10个网站的免费代理,进行清洗，满足要求的就20个左右,非常不稳定,测试代理时还是能用,用来请求时就失效了,有的请求２次就废了;这种代理,自己学习如何维护代理还可以；爬取数据不行,生产环境更不行; 爬虫还是要继续的,那就买代理,目前我用过芝麻代理,阿布云,讯代理;都比较好用,芝麻代理每天都有免费的20个ip,这免费的20个ip，比自己抓的可是要好很多;买的代理相对稳定,但还是达不到要求，其实买的代理都是共用的,专用的太贵；现在只能搭建代理服务器；
虚拟机几乎都用过，VMware和virtualbox等，很少有人用过EXIS,专门用作虚拟系统创建管理，很强大，应用场景也很多，我们公司爬虫业务比较大，有32服务器，使用了一台48T硬盘，128G内存，这么大的服务器，当然不能搭建一台服务器，需要使用虚拟机，EXSI6.5基于linux的虚拟系统，大大的提升服务器性能；
因为国内运营商太狠了,没办法只能申请国外服务器,之前在阿里云香港服务器上搭建的vpn,刚搭建好还没用两天,端口就被墙了,我就又换了几个端口,又给我墙了 后来把我的服务器都给墙了,以为香港服务器,不会被墙；哎，运营商算你狠，那也挡不住我想去看看世界的心。
使用阿里云服务器搭建vpn服务器，访问谷歌