-
【.NET Core项目实战-统一认证平台】第三章 网关篇-数据库存储配置(1)
原文: 【.NET Core项目实战-统一认证平台】第三章 网关篇-数据库存储配置(1) 【.NET Core项目实战-统一认证平台】开篇及目录索引 本篇将介绍如何扩展Ocelot中间件实现自定义网关,并使用2种不同数据库来演示Ocelot配置信息存储和动态更新功能,内容也是从实际设计出发来编写我们自己的中间件,本文内容涵盖设计思想内容和代码内容,我希望园友...
时间:2018-11-19点击:254收藏
-
【.NET Core项目实战-统一认证平台】第七章 网关篇-自定义客户端限流
原文: 【.NET Core项目实战-统一认证平台】第七章 网关篇-自定义客户端限流 【.NET Core项目实战-统一认证平台】开篇及目录索引 上篇文章我介绍了如何在网关上增加自定义客户端授权功能,从设计到编码实现,一步一步详细讲解,相信大家也掌握了自定义中间件的开发技巧了,本篇我们将介绍如何实现自定义客户端的限流功能,来进一步完善网关的基础功能。 .ne...
时间:2018-11-19点击:181收藏
-
【.NET Core项目实战-统一认证平台】第六章 网关篇-自定义客户端授权
原文: 【.NET Core项目实战-统一认证平台】第六章 网关篇-自定义客户端授权 【.NET Core项目实战-统一认证平台】开篇及目录索引 上篇文章我们介绍了网关使用Redis进行缓存,并介绍了如何进行缓存实现,缓存信息清理接口的使用。本篇我们将介绍如何实现网关自定义客户端授权,实现可以为不同的接入客户端设置不同的访问权限。 .netcore项目实战交...
时间:2018-11-19点击:121收藏
-
分布式图数据库JanusGraph-简介
JanusGraph设计的目的是处理大图,单机无论是在存储和计算能力上都无法满足大图处理。大规模图实时计算和分析是JanusGraph最基本的优势。本节将讨论更多JanusGraph特有的优势以及它底层支持的存储方案。 转自:JanusGraph中文翻译文档 1.1. JanusGraph 基本优势 支持非常大的图。JanusGraph通过添加机器横向扩展集...
时间:2018-11-19点击:421收藏
-
0023-HOSTS配置问题导致集群异常故障分析
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.问题现象 Hadoop集群HDFS、YARN、Hive等服务出现异常告警 重启集群异常告警任然存在大量告警 Cluster 1 HDFS 可用空间抑制... NameNode 运行状况抑制... HDFS 金丝雀抑制... DataNode (ip-172-31-10-118) 日志文件 N...
时间:2018-11-19点击:315收藏
-
[译]介绍Spark2.4的用于处理复杂数据类型的新内置函数与高阶函数
[译]介绍Spark2.4的用于处理复杂数据类型的新内置函数与高阶函数 本文翻译自databricks的介绍spark2.4新特性的blog,英文原文参考原文链接 Apache Spark2.4总共支持了29个用于处理复杂数据类型(比如,数组类型等)的新内置函数和高阶函数。 在Spark2.4版本之前,有两种典型的方式处理复杂数据类型: 将嵌套结构的数据转化...
时间:2018-11-19点击:301收藏
-
0025-CENTOS6.5安装CDH5.12.1(二)
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 5.快速组件服务验证 5.1HDFS验证(mkdir+put+cat+get) mkdir操作: _[root@ip-172-31-6-148_~]# hadoop fs -mkdir -p /fayson/test [root@ip-172-31-6-148 ~]# hadoop fs -ls...
时间:2018-11-19点击:284收藏
-
0026-Hive使用十六进制分隔符异常分析
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.问题描述 通过sqoop抽取Mysql表数据到hive表,发现hive表所有列显示为null Hive表的分隔符为“u001B”,sqoop指定的分隔符也是“u001B” 通过命令show create table test_hive_delimiter查看建表语句如下: 0: jdbc:h...
时间:2018-11-19点击:341收藏
-
0027-如何在CDH集群启用Kerberos
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.文档编写目的 本文档讲述如何在CDH集群启用及配置Kerberos,您将学习到以下知识: 1.如何安装及配置KDC服务 2.如何通过CDH启用Kerberos 3.如何登录Kerberos并访问Hadoop相关服务 文档主要分为以下几步: 1.安装及配置KDC服务 2.CDH集群启用Kerb...
时间:2018-11-19点击:328收藏
-
0028-如何在CDH未启用认证的情况下安装及使用Sentry
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.文档编写目的 CDH平台中的安全,认证(Kerberos/LDAP)是第一步,授权(Sentry)是第二步。如果要启用授权,必须先启用认证。但在CDH平台中给出了一种测试模式,即不启用认证而只启用Sentry授权。但强烈不建议在生产系统中这样使用,因为如果没有用户认证,授权没有任何意义形同虚...
时间:2018-11-19点击:327收藏
-
扩展Spark Catalyst,打造自定义的Spark SQL引擎
Apache Spark是大数据处理领域最常用的计算引擎之一,被应用在各种各样的场景中,除了易用的API,稳定高效的处理引擎,可扩展性也是Spark能够得到广泛应用的一个重要原因。Spark中最常见的扩展就是基于DataSource API添加对新数据源的支持,除了Spark内置的HDFS,S3,Kafka等数据源,Parquet,Orc,Avro等数据类型...
时间:2018-11-19点击:484收藏
-
灵玖软件:KGB知识图谱技术是大数据精准挖掘新引擎
在大数据时代下,数据已发展成经济社会的强大动力,而且还在提高社会生产力等多方面取得了显著成效,但同时也会带来许多问题,比如数据的存储、稳定性与可靠性,其中,最重要的就属于数据信息的安全,且还一度引起人们的广泛关注。大数据,又称海量数据,即所涉及到的数据量无法通过人工,在一定时间内收集、管理、处理和整理出人们所需要的信息.其数据规模巨大,资料海量复杂,难以整理...
时间:2018-11-19点击:225收藏
点击排行
-
Docker使用Oracle官方镜像安装(12C,18C,19C)
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- CentOS8编译安装MySQL8.0.19
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- MySQL8.0.19开启GTID主从同步CentOS8
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- CentOS7,8上快速安装Gitea,搭建Git服务器
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果