今天编写爬虫时老是报错，而且明明没有语法错误，该安的库也已安好，最后才发现原来python文件头中的注释是有大用处的。
#!/usr/bin/python：这句注释的作用是告诉文件中的代码是用什么编译器去执行；
#!/usr/bin/env python:这种用法是为了防止操作系统用户没有将python装在默认的/usr/bin路径里。当系统看到这一行的时候，首先会到env设置里查找python的安装路径，再调用对应路径下的解释器程序完成操作。
#-*- coding: UTF-8 -*-:这段注释是告诉Python解释器，按照UTF-8编码读取源代码，否则，在源代码中写的中文输出可能会有乱码。
#!/usr/bin/python
# -*- coding:utf8 -
import sys
reload(sys)
sys.setdefaultencoding('utf8')
import requests
from bs4 import BeautifulSoup
resp=requests.get('http://www.507.sec')
print(resp) #打印请求结果的状态码
print(resp.content) #打印请求到的状态码
bso=BeautifulSoup(resp.content,'lxml') #将网页源码转换为BeautifulSoup对象，方便操作
a_list=bso.find_all('a') #获取网页中所有a标签对象
text='' # 创建一个空字符串
for a in a_list:
href=a.get('href') #获取a标签对象的href属性，即这个对象指向的链接地址
text+=href+'\n'
with open('url.txt','w')as f:
f.write(text)
print("运行完毕")
神龙|纯净稳定代理IP免费测试>>>>>>>>天启|企业级代理IP免费测试>>>>>>>>IPIPGO|全球住宅代理IP免费测试
