每日鸡汤

踮起脚尖就更接近阳光

 推荐博客

Greenplum安装总结 摘要: Greenplum安装总结一、环境说明服务器centos7 4台,一台Master节点,三台Segment节点:mdw 192.168.43.21 (master节点)sdw1 192.168.43.22 (segment节点,包含两个primary segment,两个mirror segment)sd...
发表于 2019-01-14 10:12 阅读(28) 评论(0)

Greenplum简介 摘要: Greenplum简介Greenplum是一种基于PostgreSQL的分布式数据库,其采用shared-nothing架构,主机、操作系统、内存、存储都是自我控制的,不存在共享。本质上讲Greenplum是一个关系型数据库集群. 它实际上是由数个独立的数据库服务组合成的逻辑数据库。与RAC不同,这种数据库集...
发表于 2018-12-17 12:25 阅读(29) 评论(0)

SqlServerCDC功能 摘要: SqlServerCDC功能SQLServer2008引入了数据变更捕获功能:CDC(Change Data Capture),通过对事务日志的异步读取,记录DML操作的发生时间、类型和实际影响的数据变化,然后将这些数据记录到启用CDC时自动创建的表中。通过cdc相关的存储过程,可以获取详细的数据变化情况。C...
发表于 2018-12-14 08:33 阅读(33) 评论(0)

centos7上安装sqlserver数据库 摘要: centos7上安装sqlserver数据库官网教程:https://docs.microsoft.com/en-us/sql/linux/quickstart-install-connect-red-hat?view=sql-server-2017一、配置yum源sudo curl -o /etc/yum....
发表于 2018-12-02 20:12 阅读(41) 评论(0)

Spark—RDD编程常用转换算子代码实例 摘要: Spark—RDD编程常用转换算子代码实例Spark rdd 常用 Transformation 实例:1、def map[U: ClassTag](f: T => U): RDD[U] 将函数应用于RDD的每一元素,并返回一个新的RDDpackage top.ruandbimport org.apach...
发表于 2018-10-27 23:09 阅读(61) 评论(0)

IDEA上搭建spark开发 摘要: IDEA上搭建spark开发环境我本地系统是windows10,首先IDEA上要安装了scala插件。1、下载winutils.exe文件winutils.exe是在Windows系统上需要的hadoop调试环境工具,里面包含一些在Windows系统下调试hadoop、spark所需要的基本的工具类,另外在使...
发表于 2018-10-27 14:20 阅读(47) 评论(0)

Thymeleaf语法总结 摘要: Thymeleaf语法总结一、Thymeleaf介绍Thymeleaf是Spring boot推荐使用的模版引擎,直接以html显示,前后端可以很好的分离。二、Thymeleaf语法(Thymeleaf3)在使用Thymeleaf时页面要引入名称空间: xmlns:th="http://www.thymele...
发表于 2018-10-27 09:34 阅读(87) 评论(0)

Spark—RDD编程 摘要: Spark—RDD编程1、RDD的创建在Spark中创建RDD的创建方式大概可以分为三种:(1)从集合中创建RDD 从集合中创建RDD,Spark主要提供了两种函数:parallelize 和 makeRDD。parallelize 例子:scala> val rdd1 = sc.parallelize...
发表于 2018-10-25 22:12 阅读(82) 评论(0)

Spark—RDD介绍 摘要: Spark—RDD1、概念介绍RDD(Resilient Distributed Dataset):弹性分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。官方定义还是比较抽象,个人理解为:它本质就是一个类,屏蔽了底层对数据的复杂抽象和处理,为用户提供了一组方便...
发表于 2018-10-25 20:47 阅读(84) 评论(0)

LeetCode——第7题 摘要: LeetCode——第7题Given a 32-bit signed integer, reverse digits of an integer.Example 1:Input: 123Output: 321Example 2:Input: -123Output: -321Example 3:Input: 1...
发表于 2018-10-17 13:12 阅读(100) 评论(0)

 关于博主

姓名:阮大彬
职业:数据工程师、后端工程师
籍贯:安徽省安庆市
QQ:864849501
Powered by 阮大彬 V1.0 皖ICP备18008696号-1