使用Python编写一个简单的爬虫，爬取网页中的数据

编写一个简单的爬虫使用Python非常简单，我们可以使用第三方库如Requests和BeautifulSoup来实现。在这个例子中，我们将使用爬取一个网页的标题和链接。以下是完整的代码示例：

import requests
from bs4 import BeautifulSoup

# 定义爬取函数
def scrape_website(url):
    # 发起GET请求
    response = requests.get(url)
    # 检查响应是否成功
    if response.status_code == 200:
        # 使用BeautifulSoup解析HTML内容
        soup = BeautifulSoup(response.content, 'html.parser')
        # 查找网页标题
        title = soup.title.string
        print("网页标题:", title)
        print("链接:")
        # 查找所有的链接
        links = soup.find_all('a')
        # 遍历链接并打印
        for link in links:
            print(link.get('href'))
    else:
        # 响应失败
        print("请求失败")

# 调用爬取函数
scrape_website("http://example.com")

在这个例子中，我们首先导入了需要的库，包括requests和BeautifulSoup。然后，我们定义了一个scrape_website函数，它接受一个URL作为输入参数。函数内部，我们使用requests.get方法发起了一个GET请求，并检查响应的状态码是否为200，来验证是否成功获取网页内容。

如果获取成功，我们使用BeautifulSoup解析返回的HTML内容，并使用soup.title.string找到页面的标题，然后打印出来。接下来，我们使用soup.find_all方法查找页面中所有的<a>标签，然后遍历这些标签并使用link.get('href')方法获取对应链接的地址，并打印出来。

最后，我们调用scrape_website函数来实际爬取指定的网页。在这个例子中，我们爬取了"http://example.com"这个网页，并打印出了网页的标题和链接。

这只是一个简单的示例，你可以根据自己的需要来扩展功能，如保存数据到文件或爬取更多的信息等。抓取网页数据要谨慎行事，确保你对目标网站的使用政策和道德准则有充分的了解，以避免触犯法律或侵犯他人的权益。