session爬虫的代码

1、Cookie和Session概念

（1）cookie： 在网站中，http请求是无状态的。也就是说即使第一次和服务器连接后并且登录成功后，第二次请求服务器依然不能知道当前请求是哪个用户。cookie的出现就是为了解决这个问题，第一次登录后服务器返回一些数据（cookie）给浏览器，然后浏览器保存在本地，当该用户发送第二次请求的时候，就会自动的把上次请求存储的cookie数据自动的携带给服务器，服务器通过浏览器携带的数据就能判断当前用户是哪个了。cookie存储的数据量有限，不同的浏览器有不同的存储大小，但一般不超过4KB。因此使用cookie只能存储一些小量的数据。

（2）session: session和cookie的作用有点类似，都是为了存储用户相关的信息。不同的是，cookie是存储在本地浏览器，session是一个思路、一个概念、一个服务器存储授权信息的解决方案，不同的服务器，不同的框架，不同的语言有不同的实现。虽然实现不一样，但是他们的目的都是服务器为了方便存储数据的。session的出现，是为了解决cookie存储数据不安全的问题的。
session的好处：

• 敏感数据不是直接发送回给浏览器，而是发送回给一个session_id服务器将session_id和敏感数据做一个映射存储在session(在服务器上面)中，更加安全。
• session可以设置过期时间，也从另一方面保护了用户的账户安全。

（3）cookie和session结合使用： web开发发展至今，cookie和session的使用已经出现了一些非常成熟的方案。在如今的市场或者企业里，一般有两种存储方式：

• 存储在服务端：通过cookie存储一个session_id，然后具体的数据则是保存在session中。如果用户已经登录，则服务器会在cookie中保存一个session_id，下次再次请求的时候，会把该session_id携带上来，服务器根据session_id在session库中获取用户的session数据。就能知道该用户到底是谁，以及之前保存的一些状态信息。这种专业术语叫做server side session。存储在服务器的数据会更加的安全，不容易被窃取。但存储在服务器也有一定的弊端，就是会占用服务器的资源，但现在服务器已经发展至今，一些session信息还是绰绰有余的。
• 将session数据加密，然后存储在cookie中。这种专业术语叫做client side session。flask采用的就是这种方式，但是也可以替换成其他形式。

2、flask中使用cookie和session

（1）cookie： 在Flask中操作cookie，是通过response对象来操作，可以在response返回之前，通过response.set_cookie来设置，这个方法有以下几个参数需要注意：

• key：设置的cookie的key。
• value：key对应的value。
• max_age：改cookie的过期时间，如果不设置，则浏览器关闭后就会自动过期。
• expires：过期时间，应该是一个datetime类型。
• domain：该cookie在哪个域名中有效。一般设置子域名，比如cms.example.com。
• path：该cookie在哪个路径下有效。

（2） session： Flask中的session是通过from flask import session。然后添加值key和value进去即可。并且，Flask中的session机制是将session信息加密，然后存储在cookie中。专业术语叫做client side session。

3、flask中的 session工作机制

• flask中的session机制是：把敏感数据经加密后，放入session中，然后再把session存放到cookie中，下次请求的时候，再从浏览器发送过来的cookie中读取 session，然后在从session中读取敏感数据，并进行解密，获取最终的用户数据。
• flask的这种session机制可以节省服务器的开销，因为把所有的信息都存储到了客户端（浏览器）。
• 安全是相对的，把session放到cookie中，经过加密，也是比较安全的，这点大家可以放心使用。

4、操作session

（1）session的操作方式：

• 使用session需要从flask中导入session，以后所有和session相关的操作都是通过这个变量来的。
• 使用session需要设置SECRERT_KEY，用来作为加密用的，而且这个SECRERT_KEY如果每次服务器启动后都变化的话，那么之前的session就不能再通过当前这个SECRERT_KEY进行解密了。
• 操作session的时候，跟操作字典是一样的。

• 添加session： ：session['username'] = 'string'。
• 删除session： session.pop('username') 或者del session['username']。
• 清除所有session： session.clear()
• 获取session： session.get('username')

（2）设置session的过期时间

• 如果没有指定session的过期时间，那么默认的就是浏览器关闭后就自动结束
• 如果设置了session的permanent属性为True，那么过期时间就是默认的31天。
• 自定义过期时间： 可通过个给app.config设置PERMANENT_SESSION_LIFETIME来更改过期时间，这个值的数据类型是datetime.timedelay类型。

示例：

# session_demo.py
from flask import Flask, session
import os  # 用于下面调用urandom(N)函数随机生成N个字符。
from datetime import timedelta

app = Flask(__name__)
app.config['SECRET_KEY'] = os.urandom(24)  # 24位字符
app.config['PERMANENT_SESSION_LIFETIME'] = timedelta(days=7)  # 如果设置了session.permanent=True，没设置这个天数的话，默认的是31天。


@app.route('/')
def index():
    session['username'] = 'Aboil'
    session.permanent = True  # 该属性默认的是false，为false时，默认的过期时间是浏览器关闭后就自动结束。
    return 'Hello Python!'


@app.route('/get/')
def get():
    print(session.get('username'))  # 获取session['username']的值
    return 'get success!'


@app.route('/delete/')
def delete():
    print(session.get('username'))  # 获取session['username']的值
    session.pop('username')  # 删除session['username']
    print(session.get('username'))  # 此时会打印出None，因为前面被删除了
    return 'delete success!'

@app.route('/clear/')
def clear():
    print(session.get('username'))  # 获取session['username']的值
    session.clear()  # 删除session中的所有数据
    print(session.get('username'))  # 此时会打印出None，因为前面被清空了
    return 'clear success!'

if __name__ == '__main__':
    app.run(debug=True)

---