Fork me on GitHub

发表于 | 更新于 | 分类于 | 评论数：

相信大家经常在工作中见到一些数据报告，比如周报啊，月报啊，绩效考核表之类的数据表格，这些表格每个月我们都需要发送给固定的人，比如领导，对于这些报告，有的需要手工导入数据，而有的其实都是一些固定数据，所以我就针对相对固定的数据来进行分析，如何让程序自动生成绩效考核表并发送邮件给领导。项目思路如下(列表页无法查看flowchart，详情页正常)：

首先利用python的openpyxl库获取表格内容，然后同样适用该库对数据进行修改，修改日期为当前日期。修改好之后保存一份；然后利用email库发送带有附件的邮件，最后再利用电脑或者服务器的定时任务执行当前脚本即可。下面是源码：

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

这个问题其实很早之前我就遇到过，当时用的是python2，在升级PIP之后发现报了一个错误，如下：

1
2
3
4
5
ubuntu@hello:/# pip3 install openpyxl
Traceback (most recent call last):
  File "/usr/bin/pip3", line 9, in <module>
    from pip import main
ImportError: cannot import name 'main'

报这个错的原因是PIP更新为10.0.0后库里面函数有所变动导致的结果。首先找到/usr/bin/pip中的pip文件，找到找到以下代码：

1
2
3
from pip import  main
if __name__ == '__main__':
    sys.exit(main())

将最后一行代码改成以下代码：

1
2
3
from pip import main
if __name__ == '__main__':
    sys.exit(__main__.main())

然后保存退出就可以解决这个错误了。

阅读全文 »

发表于 | 分类于 | 评论数：

前段时间在另一个博客中了解到了这个卡拉兹猜想，感觉有点意思，于是用想着用python实现看看。

卡拉兹(Callatz)猜想：对任何一个自然数n，如果它是偶数，那么把它砍掉一半；如果它是奇数，那么把(3n+1)砍掉一半。这样一直反复砍下去，最后一定在某一步得到n=1。

卡拉兹在1950年的世界数学家大会上公布了这个猜想，传说当时耶鲁大学师生齐动员，拼命想证明这个貌似很傻很天真的命题，结果闹得学生们无心学业，一心只证(3n+1)，以至于有人说这是一个阴谋，卡拉兹是在蓄意延缓美国数学界教学与科研的进展……

上述是这个猜想的故事背景，要实现这个猜想，就需要理解这个猜想。从字面意思来看，就是给定一个自然数，然后进行数学计算，如果是偶数，那么就直接砍掉一半，用数学公式来表达就是，设一个自然数n，当n为偶数时：n = n / 2；当n为奇数时：n = (3*n+1) / 2 ；然后按照这个逻辑一直往下执行，执行到n=1时候为止，也就是说一定会有一个n = 1的时刻，当n = 1时程序停止，下面我们用代码来实现下。

阅读全文 »

发表于 | 分类于 | 评论数：

新的一年到了，相信很多公司都会举办年会吧！而年会中最欢迎的环节就是抽奖了，运气好的能抽个大奖，开开心心回家过年；运气不好的也没事，重在参与嘛，就像我一样，年年都没咋中奖，但是仍然很期待抽奖，或许这就是人之本性吧，喜欢未知的惊喜，也叫随机惊喜。

今天我就想来分析下抽奖的需求，对于传统抽奖而言，一般都是HR把所有人的姓名跟一个号码对应，然后用乒乓球也好，小纸条也好，反正有多少参与人就有多少抽奖物料。然后拿一个大箱子把所有的乒乓球或者号码纸条放到箱子里面。开始抽奖时，就由某某领导开始用手随机抽取。对于这种抽奖方式而言，抽完奖之后乒乓球或者纸条就没用了，箱子也没用了，难免有些不环保，所以我想着用代码的方式实现抽奖。

熟悉了传统的抽奖方式之后我们得知要抽奖首先有以下的必要条件：

  • n个员工的号码牌；
  • 大箱子：抽奖池；
  • 随机抽取：满足抽奖的公平性；

在满足了上述必要条件之后我们用一句话归纳下抽奖算法：在n个员工中随机选择m名中奖者，已经中奖的人需要从抽奖池中去除（防止重复中奖），然后进行下一轮的随机选择，如此循环。除了在抽奖中应用之外，比如一些需要x位不重复的随机数也可以用这个算法实现。

主要功能为：

  • 构建n名员工工号；
  • 定义一个抽奖池；
  • 用random模块下的choice()随机选择m名员工工号，为了说明问题，当前文章m等于1；
  • 利用remove()移除已中奖的用户，防止重复中奖；
阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

由于最近负责的APP又要更新迭代了，所以我特别关注产品体验如何，尤其是一些细小的体验，比如接口的请求时长，请求大小等。加上自己一直是一个爬虫爱好者，所以对抓包工具一直有所研究。今天就分享一款抓包神器Charles。

为什么要抓包

要理解为什么要抓包，首先我们来看下网络抓包的定义：

抓包（packet capture）就是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全。抓包也经常被用来进行数据截取等。

以上是来自百度百科的定义。我们都知道，不论是B/S架构，还是C/S架构的产品，或多或少都会与服务器进行数据交互。也就是定义所说的网络数据的发送与接收，通过抓包，我们可以进行接口传参的数值修改，得到想要的数据。

在WEB产品中，我们可以通过浏览器的开发工具Network来进行网络抓包；在移动APP中，通过抓包工具也可以轻松实现抓包。

那抓包到底有什么用呢？以下我列几个使用场景：

  • 测试单个页面数据请求的数据、大小；
  • 查看页面请求接口的安全验证；
  • 获取某个APP的数据接口，进行数据爬取；

单个页面数据请求大小其实就是Network中的请求时间，为了产品体验更好，接口的响应时间需要尽可能的快，哪怕是弱网环境下也应该很快；经常我们在使用一款APP的时候，会说：”这个APP用起来很慢“，其实APP慢90%的原因都是服务器问题，真正因为手机硬件跟不上导致卡顿的比例极低。既然是跟服务器相关，那么通过抓包工具就可以轻易的测试出来接口返回数据的大小。

我通过抓了一些APP的接口来看，有部分APP接口安全性做的极差，举个例子，登录接口用GET方法，用户名与密码均明文上传；然后一些隐私数据的接口没有任何安全验证手段，直接GET即可请求回数据，有时候我也在想，如果有恶意的人拿这些裸奔的接口干一些坏事，会有什么后果？

最后一个就是我经常用来爬数据的，比如某电商产品的商品列表，通过抓包可以清楚看到一共有多少款商品，商品都是什么价格等等，用来做爬虫会非常方便。

阅读全文 »