自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

程序员欣宸的博客

Java程序员的空间

原创 golang实战之flag包

开发命令行程序时,经常需要接受命令行传入的参数,flag包提供了参数处理的功能,本文通过demo列出了常用API的用法

2019-02-24 13:17:10 611 1

原创 IDEA开发Spark应用实战(Scala)

实战IDEA开发Scala版的Spark应用

2019-02-17 09:33:59 3641 3

原创 docker下的spark集群,调整参数榨干硬件

调整docker-compose编排的参数,充分发挥硬件信息能运行spark集群

2019-02-16 17:04:18 1552 8

原创 spark实战之:分析维基百科网站统计数据(java版)

在《寻找海量数据集用于大数据开发实战(维基百科网站统计数据)》一文中,我们了解了如何获取维基百科网站的网页点击量统计数据,并且介绍了数据格式的基本内容,本文以这些数据进行实战,练习基本的spark开发

2019-02-16 11:27:15 1172 1

原创 寻找海量数据集用于大数据开发实战(维基百科网站统计数据)

在学习spark的过程中,除了经典的WrodCount例子(用于统计文本文件中的单词出现次数),我们也在寻找其他海量数据来做更多实战以提高自己,今天介绍的是一个海量数据集的下载方法,以及数据内容的简介; 关于维基百科网站统计数据 数据的下载页面地址:https://dumps.wikimedi...

2019-02-10 22:11:58 1685 1

原创 docker下,极速搭建spark集群(含hdfs集群)

搭建spark和hdfs的集群环境会消耗一些时间和精力,今天咱们就借助docker,极速搭建和体验spark和hdfs的集群环境;

2019-02-10 01:48:23 6335 6

原创 部署Spark2.2集群(on Yarn模式)

部署Spark on Yarn集群

2019-02-09 13:50:40 1815 3

原创 第一个spark应用开发详解(java版)

java版的spark应用开发

2019-02-08 21:53:06 13938 2

原创 Linux部署hadoop2.7.7集群

在CentOS7环境下,hadoop2.7.7集群部署的实战

2019-02-08 15:01:12 2598 3

原创 Linux配置SSH免密码登录(非root账号)

设置多台linux服务器之间以非root账号的身份免密码ssh登录

2019-02-08 00:45:33 10445 2

原创 Linux服务器端网络抓包和分析实战

本文实战了CentOS7下的网络抓包,以及windows下通过wireshark分析抓包数据

2019-02-07 17:39:14 3378 1

原创 springboot应用查询城市天气

本文的实战是开发一个springboot应用,通过RestTemplate获取公共的远程api服务,将查询到的指定城市的天气信息返回给前端;

2019-02-07 14:42:49 1534 0

原创 部署spark2.2集群(standalone模式)

部署spark2.2集群(standalone模式)

2019-02-04 10:04:16 1225 0

提示
确定要删除当前文章?
取消 删除