文章列表-低调大师自媒体个人博客

您现在的位置是：首页>文章列表

文章列表

阿里云HBase SQL一站式解决复杂查询难题

一、背景概述 HBase作为海量在线存储引擎，被广泛应用于推荐、风控、物联网、画像、表单等大数据场景。Phoenix作为HBase的SQL层，极大降低了用户使用门槛，并且实现了二级索引、加盐表、动态列等大量实用功能。HBase底层存储基于LSM，LSM能将业务的随机写转为顺序写，能有效提升写吞吐，但是其查询只适合于Rowkey的前缀匹配，查询模式单一；Pho...
2019-06-18 13热度收藏
DLA支持MaxCompute(ODPS)数据源

DLA支持MaxCompute(ODPS)数据源 1. 概述支持功能包括： MaxCompute（ODPS）的数据查询，目前复杂数据类型以字符串形式返回；一条命令同步对应project下的所有表。不支持数据回流ODPS。其他说明：基于MaxCompute tunnel拉取数据；通过在查询中指定WHERE <分区列> = <分区k...
2019-06-18 44热度收藏
spring-boot整合protobuf

简介：protobuf是Google的语言中立，平台中立，可扩展的机制，用于序列化结构化数据 - 想想XML，但更小，更快，更简单。您可以定义数据的结构化结构，然后使用特殊生成的源代码轻松地将结构化数据写入和读取各种数据流，并使用各种语言。1.在项目中导入依赖 <dependency> <groupId>com.google.prot...
2019-06-18 7热度收藏
spring-cloud整合admin2.0实现云监控

简介：项目当中已经整合日志和拦截器的配置，同时解决监控服务自己无法监控自己的问题。一.在服务端配置1.导入依赖 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3....
2019-06-18 8热度收藏
spring-boot整合hazelcast实现高频交易撮合引擎缓存部分入门级

简介：官网：https://hazelcast.com/一.可用性Hazelcast的分布式架构为连续群集正常运行时间提供冗余，并始终提供可用数据，以满足最苛刻的应用需求。容量随着需求弹性增长，而不会影响性能或可用性。二.速度Hazelcast In-Memory解决方案可以更快地补充数据库和数量级。时间就是金钱; 为您的新应用提供推动业务发展所需的微秒响应...
2019-06-18 45热度收藏
百度黄埔学院：业界首批「首席 AI 架构师」毕业！飞桨（PaddlePaddle）核心框架V 1.5 提前揭秘

雷锋网 AI 科技评论按：6 月 16 日，百度黄埔学院在北京迎来一期学员的毕业典礼。百度 AI 技术平台体系执行总监、深度学习技术及应用国家工程实验室副主任、黄埔学院院长吴甜为来自国家卫星气象中心、中油瑞飞、中信银行、神思电子、OPPO、广东电网、广东长隆集团、中国联通软件研究院、华为、爱奇艺等企业的 28 位业界首批「首席 AI 架构师」颁发了毕业证书，...
2019-06-18 3热度收藏
分布式数据库选型——数据水平拆分方案

概述水平拆分的概念随着分布式数据库的推广已为大部分人熟知。分库分表、异构索引、小表广播、这些功能几乎是产品功能需求标配。然而有些客户使用分布式数据库后的体验不尽如意。本文尝试从数据的角度总结分布式数据的复制（replication）和分区（partition）技术原理和方案，其中分区也有称为分片（sharding），希望能引起读者一些思考，在分布式数据库选...
2019-06-18 5热度收藏
POLARDB v2.0 技术解读

点击观看“POLARDB 2.0 升级发布会”：https://yq.aliyun.com/live/1136 回顾POLARDB 1.0 POLARDB 1.0 主要的改进包括采用了计算存储分离的架构，完全兼容MYSQL，性能是原生MySQL的6倍。一个用户集群可以在分钟级弹性扩展到16个计算节点，对业务完全透明的计算和存储分离代理，从库延迟仅毫秒级。存储...
2019-06-18 2热度收藏
ASP.NET Core微服务之基于Consul实现服务治理（1）

Tip: 此篇已加入.NET Core微服务基础系列文章索引一、Consul基础介绍 Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置。与其他分布式服务注册与发现的方案，比如Airbnb的SmartStack等相比，Consul的方案更“一站式”，内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Val...
2019-06-18 10热度收藏
ASP.NET Core微服务之基于Consul实现服务治理（2）

Tip: 此篇已加入.NET Core微服务基础系列文章索引上一篇发布之后，很多人点赞和评论，不胜惶恐，这一篇把上一篇没有弄到的东西补一下，也算是给各位前来询问的朋友的一些回复吧。一、Consul服务注册之配置文件方式 1.1 重温Consul实验集群这里我们有三个Consul Server节点，一个Consul Client节点，在Client节点上...
2019-06-18 4热度收藏
ASP.NET Core微服务之服务间的调用方式（REST and RPC）

Tip: 此篇已加入.NET Core微服务基础系列文章索引一、REST or RPC ? 1.1 REST & RPC 微服务之间的接口调用通常包含两个部分，序列化和通信协议。常见的序列化协议包括json、xml、hession、protobuf、thrift、text、bytes等；通信比较流行的是http、soap、websockect，RP...
2019-06-18 11热度收藏
借助 Cloud Toolkit 快速创建 Dubbo 工程

Cloud Toolkit 是一个 IDE 插件，帮助开发者更高效地开发、测试、诊断并部署应用。在最新版的插件中，提供了快速创建 Dubbo 工程的功能，下面就来快速体验下吧。 Dubbo 采用全 Spring 配置方式，透明化接入应用，对应用没有任何 API 侵入，只需用 Spring 加载 Dubbo 的配置即可，Dubbo 基于Spring 的 Sch...
2019-06-18 6热度收藏
工作流在Kubernetes集群中的实践

本文主要介绍如何在ACK上基于工作流引擎进行大规模基因测序工作。阿里云工作流引擎基于开源项目Argo实现，支持并发、循环、重试等多种执行策略。实验步骤：依赖配置： 1. 创建集群 2. 安装AGS插件； 3. 配置argo-ui； 4. 创建NAS共享存储卷实验：任务解析；试验一：单任务执行；试验二：多任务执行； 1. 创建集群：拿到集群测试域...
2019-06-18 16热度收藏
ASP.NET Core微服务之基于Consul实现服务治理（3）

一、示例整体架构此示例会由一个API Gateway, 一个Consul Client以及三个Consul Server组成，有关Consul的Client和Server这两种模式的Agent的背景知识，请移步我之前的文章加以了解：《.NET Core微服务之基于Consul实现服务治理》。其中，Consul的Client和Server节点共同构成一个Da...
2019-06-18 4热度收藏
PHP 批斗大会之缺失的异常

作为一名深度 phper，我如果要黑咱们 php，就像说自己母校差一样，大家不要见外。个人博客地址：https://mengkang.net/1368.html 故事的开始这几天观察错误日志发现有一个数据反序列化的notice错误，实际情况我是从缓存中读取数据然后反序列化，因为反序列化失败，所以实际每次都是去数据库取的值。背后性能影响还是挺大的。缺失的异...
2019-06-18 4热度收藏
SpringBoot使用redis进行发布订阅消息

redis不仅是一个非常强大的非关系型数据库，它同时还拥有消息中间件的pub/sub功能，在spring boot中进行如下设置就可以使用redis的pub/sub功能 1、新建一个消息发布者，设置主题为topic /** * @author Gjing * * 消息发送者 **/ @RestController public class PubContro...
2019-06-18 6热度收藏
Python爬虫入门教程 57-100 python爬虫高级技术之验证码篇3-滑动验证码识别技术

滑动验证码介绍本篇博客涉及到的验证码为滑动验证码，不同于极验证，本验证码难度略低，需要的将滑块拖动到矩形区域右侧即可完成。这类验证码不常见了，官方介绍地址为：https://promotion.aliyun.com/ntms/act/captchaIntroAndDemo.html使用起来肯定是非常安全的了，不是很好通过机器检测如何判断验证码类型这个...
2019-06-18 20热度收藏
一种在块设备层模拟io hang的方法

前言 io hang对于数据库/存储系统而言是致命的，因此，如何模拟一个较为真实的io hang环境，并对自己的系统代码进行测试显得尤为重要。io hang的模拟根据模拟的层次可以有很多方法，比较简单的有使用LD_PRELOAD对用户态函数进行偷梁换柱、或者使用Fuse实现用户态文件系统、稍微深一点的有使用systemtap工具hook内核系统调用，还...
2019-06-18 14热度收藏
如何更好的利用区块链API

区块链允许数据提供者和消费者直接在单个开放系统中交易信息，而不是订阅世界各地的数十个集中服务，并编写他们的软件来与每个API进行通信。阅读此区块链API教程，了解如何根据你的特定需求使用它。 API（应用程序编程接口）是单个计算机程序可以用来与另一个程序交互的方法（类，过程，函数，结构或常量）的描述。它通常包含在任何Internet协议（例如RFC）的描述中...
2019-06-18 4热度收藏
大数据流处理如何帮助世界新兴市场

【大咖・来了第7期】10月24日晚8点观看《智能导购对话机器人实践》多年来，大数据已经改变了很多事情，其中之一就是流处理。这就是它产生影响的方式和原因。随着当今技术的发展，对流处理的需求也越来越大。例如，必须快速处理数据，以便企业能够实时跟上不断变化的业务和市场状况。这就是实时流处理进入图片的地方，它可能会改变人们所知道的关于大数据的一切。在此，将解...
2019-06-18 5热度收藏

« 上页 413/5186 下页 »

文章筛选

文章列表