從出茳湖
-
-
【爬虫】存储库之MongoDB
一 简介MongoDB是一款强大、灵活、且易于扩展的通用型数据库1、易用性MongoDB是一个面向文档（document-oriented）的数据库，而不是关系型数据库。 不采用关系型主要是为了获得更好得扩展性。当然还有一些其他好处，与关系数据库相比，面向文档的数据库不再有“行“（row）的概念取而代之的是更为灵活的“文档”（document）模型。 通过在文档中嵌入文档和数组，面向文档的方法能够仅使用一条记录来表现复杂的层级关系，这与现代的面向对象语言的开发者对数据的看法一致。 另外，不再有预定义模式（pr...
-
【爬虫】解析库之beautifulsoup库
一 介绍Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.你可能在寻找 Beautiful Soup3 的文档,Beautiful Soup 3 目前已经停止开发,官网推荐在现在的项目中使用Beautiful Soup 4, 移植到BS4#安装 Beautiful Soup pip&nb...
-
数据分析开发环境部署
1、AnacondaAnaconda是Python的一个开源的发行版本，里面包含了很多科学计算相关的包，它和Python的关系就像linux系统中centos和Ubuntu的关系一样，不冲突，你可以同时在电脑上安装这两个东西。那至于为什么我已经在电脑上安装了pycharm还要安装这个Anaconda呢，主要有以下几点原因：（1）Anaconda附带了一大批常用数据科学包，它附带了conda、Python和 150 多个科学包及其依赖项。因此你可以用Anaconda立即开始处理数据。（2）管理包。Anaconda 是...
-
-
利用腾讯云函数设置定时任务实现腾讯视频自动签到获得V力值
腾讯视频vip花了钱，还不能自动升级，要每天签到才涨V力值。升级VIP等级。。实在蛋疼。这次又是云服务器函数，搞了个脚本COOKIES方式登录。测试了40多天。还没到期，感觉自用够了。分享出来吧。。cookies获取麻烦点。不过也就一两分钟的事，能用1个月以上就够了。准备工具：chrome浏览器qq或微信登录腾讯云腾讯视频会员一枚第一步：获取cookies1.浏览器打开腾讯视频官网：https://v.qq.com/登录VIP账号（这里我就不详写了。应该都会。我是直接手机扫码登录）2.VIP账号登录成功后，打开另一...
-
黑五买点啥？2019黑色星期五活动汇总
2019年11月29日14:44:52 更新：新增 UltraVPS活动！2019年11月29日14:29:55 更新：新增SkySilk活动！2019年11月29日14:14:54 更新：新增瓦工和老鹰主机活动！2019年11月29日14:01:01 更新：新增Chevereto/印象笔记优惠！2019年11月29日09:16:07 更新：新增Hostodo活动机型！2019年11月29日09:03:43 更新：新增Online黑五促销页面！2019年11月28日18:38:33 更新：新增CloudCone黑五...
-
【爬虫】请求库之selenium库
一、介绍selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器 from selenium import webdriver browser=webdriver.Chrome() browser=webdriver.Firefox() browser=webdri...
-
【爬虫】请求库之requests库
一、介绍#介绍：使用requests可以模拟浏览器的请求，比起之前用到的urllib，requests模块的api更加便捷（本质就是封装了urllib3） #注意：requests库发送请求将网页内容下载下来以后，并不会执行js代码，这需要我们自己分析目标站点然后发起新的request请求 #安装：pip3 install requests #各种请求方式：常用的就是requests.get()和requests.post() >>> import...
-
豫公网安备 41050302000069号