python 抓数据代码

Python 是一种非常流行的编程语言,其强大的数据批量处理功能使其成为了数据科学家、工程师和研究人员的首选语言。下面将介绍一些 Python 抓数据的代码,帮助您在工作中更高效地处理数据。

# 网页数据抓取
import requests
url = 'http://www.example.com'
response = requests.get(url)
html = response.content
print(html)
# 数据库数据抓取
import MySQLdb
db = MySQLdb.connect(host='localhost', user='root', passwd='password', db='database_name')
cursor = db.cursor()
query = 'SELECT * FROM table_name'
cursor.execute(query)
data = cursor.fetchall()
print(data)
# CSV 文件数据抓取
import csv
filename = 'data.csv'
with open(filename) as f:
reader = csv.reader(f)
data = list(reader)
print(data)

在上面的代码中,可以看到我们使用 Python 中的 requests 库从网站中抓取数据;使用 MySQLdb 库从数据库中抓取数据;使用 csv 库从 CSV 文件中抓取数据。这些代码都非常简单易懂,即使您是新手也可以轻松上手。

Python 抓数据的优点之一是其可扩展性。您可以编写自己的抓取函数、添加其他库或使用第三方库来加快处理速度或简化代码。

Python 还有其他很多工具和库可以帮助您更好地抓取和处理数据。让您可以轻松抓取数据,优化工作效率。

本文链接:https://my.lmcjl.com/post/20523.html

展开阅读全文

4 评论

留下您的评论.