四月的时候就想做全站HTTPS，那个时候因为阿里云主机的原因、WORLDPRESS的原因没弄成功。后来一怒之下换了博客程序，买了一个腾讯云服务器，然后又因为网站备案的原因，工作的原因一直耽误，昨天临时起意写篇博客，就想起了一直都没做的HTTPS，在之前公司的基友的帮忙下，花了两个多小时基本弄好了HTTPS，但这中间遇到了非常多的坑。

在开始配置之前，我按照官方的教程开始了操作，如下：

1. 获取证书

Nginx文件夹内获得SSL证书文件 1_www.domain.com_bundle.crt 和私钥文件 2_www.domain.com.key,
1_www.domain.com_bundle.crt 文件包括两段证书代码 “—–BEGIN CERTIFICATE—–”和“—–END CERTIFICATE—–”,
2_www.domain.com.key 文件包括一段私钥代码“—–BEGIN RSA PRIVATE KEY—–”和“—–END RSA PRIVATE KEY—–”。

这步操作基本没问题，把属于自己的证书下载下来即可，就两个文件。

2. 证书安装

将域名 www.domain.com 的证书文件1_www.domain.com_bundle.crt 、私钥文件2_www.domain.com.key保存到同一个目录，例如/usr/local/nginx/conf目录下。
更新Nginx根目录下 conf/nginx.conf 文件如下：

将数据通过requests请求爬下来后需要经过Xpath解析，解析过后的数据就可以通过某种数据保存方式保存下来了，不管是存为数据库格式或者文本格式都可以。

保存数据的方法

• open函数保存
• pandas包保存
• csv模块保存
• numpy包保存

1. open函数保存

• 使用with open()新建对象
• 写入数据

一直以来发现MacBook Pro的一个问题，就是外接显示器的时候会强制使用独显，这样就造成风扇转速过高且发热厉害，之前用air的时候一直没这个问题，原因就在于air用的是集显，用独显的时候务必会发热。然后我在网上找了一个教程就是在终端中执行命令即可。

1

sudo pmset -a GPUSwitch 0

• 0：强制使用核显
• 1：强制使用独显
• 2：自动切换显卡

然后执行sudo指令的时候需要输入密码，然后就可以了。

这里需要注意的点是：当强制使用核显之后，再次外接显示器会不显示，这个时候要再次执行指令，并设置显卡状态为2，也就是自动切换显卡，当连接好之后再切回来。

说实话，这样操作我也不知道到底好没好，因为感觉电脑还是发热，期待有大神来解决这个问题，后续找到更好的解决办法也会在这篇笔记中更新。

本文主要使用Xpath解析上文通过requests爬取的网页内容。

1. Xpath简述

1.1 什么是Xpath

XPath即为XML路径语言（XML Path Language），它是一种用来确定XML文档中某部分位置的语言。

XPath基于XML的树状结构，提供在数据结构树中找寻节点的能力。起初XPath的提出的初衷是将其作为一个通用的、介于XPointer与XSL间的语法模型。但是XPath很快的被开发者采用来当作小型查询语言。

可以阅读该Xpath文档了解更多关于Xpath的知识。

1.2. Xpath解析网页的流程

• 首先通过Requests库获取网页数据
• 通过网页解析，得到想要的数据或者新的链接
• 网页解析可以通过Xpath或者其它解析工具进行，Xpath在是一个非常好用的网页解析工具

本文主要分析pyhton requests库的主要用法，以及通过requests库来爬取豆瓣短评

1. Requests的简单用法

Requests库的七个主要方法

这里我们只需要掌握最常用的requests.get()方法即可。

Requests.get的用法：

1
2
3

import requests  #导入Requests库

r = requests.get(url) #使用get方法发送请求，返回包含网页数据的Response并存储到Response对象r中