代码地址：https://github.com/ddxygq/PyCode/tree/master/web/flask/mega_tutorial/chapter8-fans/app 本文翻译自The Flask Mega-Tutorial Part VIII: Followers 这是Flask Mega-Tutorial系列的第八部分，我将告诉你如何实现类似于Twitter和其他社交网络的“粉丝”功能。 在本章中，我将更多地使用应用的数据库。 我希望应用的用户能够轻松便捷地关注其他用户。 所以我要扩展数据库，以…
代码地址：https://github.com/ddxygq/PyCode/tree/master/web/flask/mega_tutorial/chapter7-errorhandle/app 本文翻译自The Flask Mega-Tutorial Part VII: Error Handling 这是Flask Mega-Tutorial系列的第七部分，我将告诉你如何在Flask应用中进行错误处理。 本章将暂停为microblog应用开发新功能，转而讨论处理BUG的策略，因为它们总是无处不在。为了帮助本章的…
代码地址：https://github.com/ddxygq/PyCode/tree/master/web/flask/mega_tutorial/chapter6-homepage/app 本文翻译自 The Flask Mega-Tutorial Part VI: Profile Page and Avatars 这是Flask Mega-Tutorial系列的第六部分，我将告诉你如何创建个人主页。 本章将致力于为应用添加个人主页。个人主页用来展示用户的相关信息，其个人信息由本人录入。 我将为你展示如何动态地生…
代码地址：https://github.com/ddxygq/PyCode/tree/master/web/flask/mega_tutorial/chapter5-login/app 本文翻译自The Flask Mega-Tutorial Part V: User Logins 这是Flask Mega-Tutorial系列的第五部分，我将告诉你如何创建一个用户登录子系统。 你在第三章中学会了如何创建用户登录表单，在第四章中学会了运用数据库。本章将教你如何结合这两章的主题来创建一个简单的用户登录系统。 本章的G…
代码地址：https://github.com/ddxygq/PyCode/tree/master/web/flask/mega_tutorial/chapter4-database/app sqlalchemy 数据库操作 本文翻译自 The Flask Mega-Tutorial Part IV: Database 在Flask Mega-Tutorial系列的第四部分，我将告诉你如何使用数据库。 本章的主题是重中之重！大多数应用都需要持久化存储数据，并高效地执行的增删查改的操作，数据库为此而生。 本章的Git…
POP3 POP3是Post Office Protocol 3的简称，即邮局协议的第3个版本,它规定怎样将个人计算机连接到Internet的邮件服务器和下载电子邮件的电子协议。它是因特网电子邮件的第一个离线协议标准,POP3允许用户从服务器上把邮件存储到本地主机（即自己的计算机）上,同时删除保存在邮件服务器上的邮件，而POP3服务器则是遵循POP3协议的接收邮件服务器，用来接收电子邮件的。 IMAP IMAP全称是Internet Mail Access Protocol，即交互式邮件存取协议，它是跟POP3类似…
如果使用java编写mapreduce程序实现wordcount也很简单，如下代码就实现了一个简单的hello world程序：word count。需要的pom.xml依赖 2.5 2.7.2 provided org.ikeguang common 1.0-SNAPSHOT org.apache.hadoop hadoop-common ${hadoop.version} ${scopeType} org.apache.hadoop hadoop-hdfs ${hadoop.version} ${scopeTy…
在Python里面，函数可以作为参数传入一个函数，函数也可以复制给变量，通过变量调用函数。装饰器可以扩展一个函数的功能，为函数做一个装饰器注解，可以把装饰器里面定义的功能于所有函数提前执行，提升代码的复用程度。 现在有这么个场景。 打卡 互联网公司里面有各种员工，程序员，前台...，程序员在打开电脑前，需要打卡，前台要早点来开门（我也不清楚，谁开门，这里假定，前台开门），前台开门前也需要打卡。也就是说，打卡是所有员工的最先的公共动作，那么可以把打卡这个功能抽出来作为公共逻辑。 普通函数调用方法 自然想到，可以实现如…
国庆节的一个大清早，我就被微信群吵醒了，说是spark实时程序有问题，数据没出来，让我看看。我看了下邮箱，确实有报警信息。我特么，没办法，起床。 1 主键自增id设置不合理引发的bug 首先，我检查了一下应用管理页面，发现资源没有用完，GC也正常，程序正在嗖嗖的跑呢，那怎么会没有今天的数据呢？ 看了下日志，error.log里面并没有今天的日志，warn.log里面有sql语句，都很正常，这到底是怎么回事呢？ 算了，手动验证一下吧，从warn.log里面复制了一条sql，放在mysql命令行执行，显示：OK 2 r…
场景描述 线上mysql数据库里面有张表保存有每天的统计结果，每天有1千多万条，这是我们意想不到的，统计结果咋有这么多。运维找过来，磁盘占了200G，最后问了运营，可以只保留最近3天的，前面的数据，只能删了。删，怎么删？ 因为这是线上数据库，里面存放有很多其它数据表，如果直接删除这张表的数据，肯定不行，可能会对其它表有影响。尝试每次只删除一天的数据，还是卡顿的厉害，没办法，写个Python脚本批量删除吧。 具体思路是： 每次只删除一天的数据； 删除一天的数据，每次删除50000条； 一天的数据删除完，开始删除下一天…
