ZDK

热爱编程……

Tag:
船舶与海洋工程
房地产
Jewelry
JavaWeb
大数据

  • 与人为善&&教学相长

  • 为了提高英语水平, blog中能用英语的地方会尽量使用英语,因为平日能练习英语的场景太少了

  • 绝大多数情况下,多人共同求解的效率大于个人摸索, 如果大家有啥问题或者疑问,可以通过留言 || email || 微信的方式联系我,或许对话提供的灵感就能解决一个疑惑

  • 为什么不用markdown?
    虽然md有现成的blog 解决方案,但实在接受不了md的手动标题系统;段落之间的间距过大,调整起来麻烦;对表格、图片极其的不友好。
    个人觉得md适合写普通的非技术文章,适合移动端。 但如果写严肃的、篇幅较长、结构严谨复杂的技术文章甚至是学术论文,word完善的生态系统,对文字处理市场的垄断,口碑,强大的功能都完爆md。

直接进入文章页面


置顶:

Confused Words Of Coding

coding过程中遇到的一些易混淆的words

View details »


推荐文章:

spark源码分析4-任务调度.html

spark源码分析-任务调度.html

View details »

kafka同SparkStreaming的整合

kafka同SparkStreaming的整合,要点:
1.版本匹配和2种模式的优缺点
2.API:如何导依赖,创建DStream对象,获取RDD消费的topic、partition、offset信息,根据上次消费的offset创建DStream

View details »

手写代码练习

手写代码是程序员手艺的体现,必须重视起来

View details »

spark源码分析3-资源调度

spark源码分析-资源调度,driver的TS向master申请资源

View details »

spark源码分析2-client提交sparkApp

spark源码分析-client提交sparkApp

View details »

spark源码分析1-集群启动

spark源码分析-集群启动

View details »


hive的窗口函数、排名函数、lve

这3个函数在大数据分析中很常用

View details »

hive调优

调优的主要目的防止数据倾斜,均匀利用分布式资源

View details »

hdfs存储原理和读写流程

hdfs最重要的2个原理,存储原理和读写流程。网上的往往都不全,自己整合了一下

View details »


hadoop集群非HA非安全模式的搭建

hadoop集群搭建的完整总结
关于虚拟机的创建在:模板虚拟机的设置
包括单节点、pseudo、完全分布式的搭建
包括日志历史服务器,ssh配置,时间同步,初始化,启动
不包括安全模式和HA的设置,在另一篇文章:hadoopHA的搭建

View details »

克隆模板虚拟机的设置

创建已经做好基本配置的虚拟机,用来被克隆:
网络、必要的软件(jdk、hadoop)、chkconfig、用户创建权限设置、rsync脚本

View details »


hadoopHA的搭建

hadoop的HA分为hdfs的和yarn的

View details »

pageRank的研究和case

google的pageRank算法的来源、背景、原理和基于mapreduce的实现进行了详细的分析,提供代码,有详尽的注释

代码位置

View details »

对hadoop官方文档中完全分布式搭建和HA部分的翻译

官方文档中的描述实际上比百度上绝大多数的博客写的要好,很全面,所以把集群配置、安全模式、HA部分翻译一下

View details »


SpringdataJPA

SpringdataJPA

Spring Data是spring-based的持久层框架,下面有10多个子项目,包括hbase、redis。在跟DB的交互中, Spring Data JPA算是除了Mybatis外最常用的了,很适合EE的开发场景

View details »

Rest&Restful

rest、restful我刚开始学web开发的时候就听说过,记得那时候就搞不清楚。表现层状态转移???一切皆资源???动词、名词??? 看了很多文章还是不懂,不过因为属于架构层面的概念性的知识,倒没怎么影响实际工作。今天又想起来,根据这两年的体会,做个总结

View details »


java中的时间处理

时间处理是java开发中经常遇到的操作,尤其是跟DB交互过程中,有时真的磨人。1.8后出了新的API,好用了很多。

1. 1.8前后的时间API分开介绍
2. 从理解、usage、转换、实战的角度研究

View details »

微信开发

微信小程序、公众号、微网页、小游戏

git仓库位置

搭建,调用api

View details »


web中的分页研究

本文阐述了作者对分页的理解,套用OOP按功能设计的思想,将分页划分为分页逻辑,页面设计,数据封装,Model层实现,sql编写5部分。并逐一进行分析。

分析按照src(功能的场景和意义),comprehending(理解,用已有知识解释并落实到场景中),usage(使用,API的学习)进行划分

View details »

Heading

Donec id elit non mi porta gravida at eget metus. Fusce dapibus, tellus ac cursus commodo, tortor mauris condimentum nibh, ut fermentum massa justo sit amet risus. Etiam porta sem malesuada magna mollis euismod. Donec sed odio dui.

View details »