本代码演示去电影网址上抓取电影网址和电影名称的数据,并保存到本机到excel表格中
操作步骤如下:
一、去百度上搜索查询要爬去的电影网址:
搜索到的电影网址为:
http://dianying.2345.com/list/guzhuang------.html,即我们今天要通过python进行get请求的网址
二、开始测试爬取网址:
2025年07月06日
本代码演示去电影网址上抓取电影网址和电影名称的数据,并保存到本机到excel表格中
操作步骤如下:
一、去百度上搜索查询要爬去的电影网址:
搜索到的电影网址为:
http://dianying.2345.com/list/guzhuang------.html,即我们今天要通过python进行get请求的网址
二、开始测试爬取网址:
2025年07月06日
python原始套接字socket下载https网页文件到txt
import socket
import ssl
def download_https_webpage(url, output_file):
try:
# 解析 URL
if url.startswith("https://"):
url = url[8:]
host = url.split("/")[0]
path = "/" + "/".join(url.split("/")[1:])
# 创建 socket 对象
client_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
# 获取主机的 IP 地址
ip = socket.gethostbyname(host)
# 使用 ssl 模块将 socket 包装为安全连接
context = ssl.create_default_context()
client_socket = context.wrap_socket(client_socket, server_hostname=host)
# 连接到服务器
client_socket.connect((ip, 443))
# 构建 HTTP 请求
request = f"GET {path} HTTP/1.1\r\nHost: {host}\r\nConnection: close\r\n\r\n"
client_socket.sendall(request.encode())
# 接收响应
response = b""
while True:
data = client_socket.recv(4096)
if not data:
break
response += data
# 关闭 socket
client_socket.close()
# 分离 HTTP 头部和内容
header, content = response.split(b"\r\n\r\n", 1)
# 保存内容到文件
with open(output_file, "wb") as file:
file.write(content)
print(f"网页内容已成功保存到 {output_file}")
except Exception as e:
print(f"发生错误: {e}")
if __name__ == "__main__":
url = "https://www.5a8.com" # 替换为你要下载的网页 URL
output_file = "www5a8com.txt"
download_https_webpage(url, output_file)
2025年07月06日
一 python下载
1.1 什么是python解析器
python解释器是一款用于解释,执行python代码的应用程序
1.2. python解释器的下载
官网网站:https://www.python.org/
2025年07月06日
Shell脚本是Linux系统管理和自动化任务的强大工具。通过编写脚本,我们可以将重复性工作自动化,大幅提升效率。
本文将介绍7个实用Shell脚本,涵盖文件管理、系统监控、数据处理等常见场景,适合初学者学习参考。
2025年07月06日
学习Linux的重要性相信不用我多说大家也明白,以下是小编总结的常用Linux基础知识以及面试常问的Linux命令,希望能帮助大家更规范地理解和使用~
以正斜杠开始完整的文件的位置路径可用于任何想置顶一个文件名的时候
不以斜线开始置顶相对于当前工作目录或某目录的位置可以作为一个简短的形式指定一个文件名
2025年07月06日
Linux系统要跑起来,除了上几章节讲到的uboot、kernel、文件系统的移植,还有一个不可缺少的——Nand flash驱动的移植,搞linux的或者android底层驱动的先收藏,以后工作中会遇到的。
说明:
本人近期会陆续上传IT编程相关的资料和视频教程,可以关注一下互相交流:C C++ Java python linux ARM 嵌入式 物联网等。
想学编程的朋友进入主页即可看到相关教程和资料。