博客主页：小馒头学python 本文专栏: Python爬虫五十个小案例 专栏简介：分享五十个Python爬虫小案例 🪲前言 在这篇博客中，我们将学习如何使用Python爬取豆瓣电影Top250的数据。我们将使用requests库来发送HTTP请求，…

在处理大型数据集时，分页查询是一种常见的技术，用于将数据分成多个小块，以便逐步加载和显示。这不仅可以提高应用的性能，还可以提升用户体验，避免一次性加载过多数据导致页面加载缓慢或资源消耗过大。本文将详细介绍 S…

一、概念 什么是POM？ POM是PageObjectModule（页面对象模式）的缩写，其目的是为了Web UI测试创建对象库。在这种模式下，应用涉及的每一个页面应该定义为一个单独的类。类中应该包含此页面上的页面元素对象和处理这些元…

1、安装步骤 1、上传 cd /opt/modules 2、解压 tar -zxf spark-3.1.2-bin-hadoop3.2.tgz -C /opt/installs 3、重命名 cd /opt/installs mv spark-3.1.2-bin-hadoop3.2 spark-local 4、创建软链接 ln -s spark-local spark 5、配置环境变量： vi /etc/prof…

最近在复习mysql的知识点，像索引、优化、主从复制这些很容易就激活了脑海里尘封的知识，但是在mysql锁的这一块真的是忘的一干二净，一点映像都没有，感觉也有点太难理解了，但是还是想把这块给啃下来，于是想通…

4）定时器 1--固定定时器 功能特点 固定延迟：在每个请求之间添加固定的延迟时间。精确控制：可以精确控制请求的发送频率。简单易用：配置简单，易于理解和使用。 配置步骤 添加固定定时器 右键点击需要添加定时器的请求…

引入 我们现在提倡节约型杜会， 一切都应该节约为本。对待我们的程序当然也不例外，能不浪费的时间或空间，都应该考虑节省。我们再观察团下图的二叉树（链式存储结构)，会发现指针域并不是都充分的利用了，有许…

1、浏览器输入网址后发生了什么 1）应用层：浏览器解析ULR，生成发送给web服务器的请求信息，HTTP请求报文生成，委托给操作系统将消息发送给web服务器，发送之前需要查询服务器域名对应的IP地址（需要…