折腾了1天，搭好博客的基本样子，然后会调一些问题，增加一些功能，前前后后，大概折腾了，1天加4个晚上。这里记录一下安装过程中遇到的一些困难，希望对同学们有帮助！ 需要准备的东西 域名一个，腾讯云主机一个，笔记本一台（安装了xshell或者mac笔记本） 安装wordpress过程 自定百度，文章很多，我也是懒得重复写了，注意里面下载的是最新版wordpress，我们需要去官网下载4.x版本的，前面安装nginx,mysql,php都是一样的。只是安装完成后会有php版本太低的问题，我安装的php版本：5.6.40，…
K-Means算法是最基础的聚类算法、也是最常用的机器学习算法之一。 本教程中，我们利用K-Means对图像中的像素点进行聚类，然后用每个像素所在的簇的中心点来代替每个像素的真实值，从而达到图像压缩的目的。 非负矩阵分解(Non-negative Matrix Factorization, NMF)是一种对非负矩阵进行低维近似逼近的常见方法，同样也能达到图像压缩的目的。 预计学习用时：30分钟。 本教程基于Python 3.5。 原创者：SofaSofa TeamM | 修改校对：SofaSofa TeamC | …
Hive系列文章 Hive表的基本操作 Hive中的集合数据类型 Hive动态分区详解 hive中orc格式表的数据导入 Java通过jdbc连接hive 通过HiveServer2访问Hive SpringBoot连接Hive实现自助取数 hive关联hbase表 Hive udf 使用方法 Hive基于UDF进行文本分词 Hive窗口函数row number的用法 数据仓库之拉链表 hive作为一个sql查询引擎，自带了一些基本的函数，比如count(计数)，sum(求和)，有时候这些基本函数满足不了我们的需求…
Python发送邮件代码，Python2/3都可以直接使用。 发送普通邮件 发送文本和html普通邮件如下： from email.header import Header from email.mime.text import MIMEText from email.utils import parseaddr, formataddr import smtplib def _format_addr(s): name, addr = parseaddr(s) return formataddr((Header(na…
Python2里面默认有一个包叫做turtle，别名：乌龟，对于Python初学者很有吸引力，适合学习。这个包，主要是画图用的，这里用它画个图，并提供源码。 源码 import turtle def draw_square(turtle): for i in range(4): turtle.forward(100) turtle.right(90) def draw_flower(turtle): for i in range(36): draw_square(turtle) turtle.right(10) d…
我相信很多人，跟我一样，经常需要生成各种二维码，好在微信中发送，传播，我通常都会用一个几行python代码的脚本快速生成二维码。 想用的时候，随时输入一个命令，就能生成二维码。 废话不多说，直接上脚本(python 2.7 版本) import qrcode import sys def run(url, path): qr_image = qrcode.make(url) qr_image.save(path) if __name__ == '__main__': args = sys.argv if len(a…
R语言利用rvest包爬虫，主要用到函数：read_html()、html_nodes()、html_text()和html_attrs()。 安装这个包：install.packages('rvest') read_html()：下载网页； html_nodes()：获得指定名称的网页元素、节点； html_text()：获得指定名称的网页元素、节点里面的文本； html_attrs()：获得指定的网址； 以新浪内地新闻为例 下面是新浪内地新闻网址：http://news.sina.com.cn/china/ 我…
实时统计pv、uv是再常见不过的大数据统计需求了，前面出过一篇SparkStreaming实时统计pv,uv的案例，这里用flink实时计算pv,uv。 我们需要统计不同数据类型每天的pv，uv情况,并且有如下要求. - 每秒钟要输出最新的统计结果； - 程序永远跑着不会停,所以要定期清理内存里的过时数据； - 收到的消息里的时间字段并不是按照顺序严格递增的,所以要有一定的容错机制； - 访问uv并不一定每秒钟都会变化,重复输出对IO是巨大的浪费,所以要在uv变更时在一秒内输出结果,未变更时不输出； Flink数据…
人，为什么要活着，有人为了生计，有人为了自己的亲人，有人不知道为了什么活着。有人活着，是因为理想。 记得初中学过一篇文章，是美国自由运动的黑人领袖——马丁·路德·金的《我有一个梦想》，他通过自己的努力为一类人争取自由，自己也因此获得了尊重，实现了自己的理想。 我们大部分人都是平凡人，没有除旧革新、造福人类的大理想，但是我们，仍应该有理想。 说到这里，我想打住，澄清自己的清白，我不是来展示我的洋洋洒洒的文采的，因为我压根就没有文采可言，我是个平凡的程序员，我只是想说说心里话：人活着，是因为理想。 所有人都在为理想而努…
Python可以实现强大的数据爬虫功能，并且数据分析与挖掘挺方便，也提供了大量的库，比如numpy, pands,matplotlib等。尤其，使用Python做机器学习也成了近年来的趋势，有人经常会问R语言与Python，该怎么取舍，我觉得都要学习，R语言擅长绘图，Python对于数据采集，各种算法，机器学习可能支持更好。 Python可以做什么 除了生孩子，Python都可以做。 - 数据采集； 数据分析，包括计算与绘图； 数据挖掘，支持多种数据挖掘算法； 机器学习，比如tensorflow； 图形化编程； W…
