-
RabbitMQ通过HTTP API获取队列消息内容
RabbitMQ通过HTTP API获取队列消息内容 背景 为配合公司数据中台建设,我们对公司内部使用的mysql binlog数据分发中间件(现已开源:https://gitee.com/kekingcn/keking-binlog-distributor )进行定制化改造,使其能够同时支持redis和rabbitmq两个分发渠道,并能在前端页面监控队列长...
时间:2019-04-18点击:791收藏
-
浅析ServiceMesh & Istio
浅析ServiceMesh & Istio 前言 公司于18年10月正式确认服务容器化,到18年12月4日第一个服务正式部署到生产环境kubernetes集群,再到如今已有23个服务完成了生产环境容器化的切换,更多的服务在测试环境容器化部署随时可以切换到生产环境。目前新项目的开发,大部分都直接在测试环境容器化部署,不再需要新购ECS搭建测试环境。随着...
时间:2019-04-18点击:476收藏
-
kkbida - 开源消息投递中间件详细解析
kkbida - 开源消息投递中间件详细解析 项目简介 kkbida为凯京科技开源的消息投递中间件,谐音必达,旨在保证异构系统间消息通知时消息投递必达,详情见 https://gitee.com/kekingcn/kkbida 快速开始 从gitee拉取代码 git clone https://gitee.com/kekingcn/kkbida 准备一个my...
时间:2019-04-18点击:640收藏
-
阿里云文件存储NAS开发测试环境最佳实践
软件开发过程中,开发成员经常需要把自己工作集成到项目中,通常每个成员每天至少集成一次。如果项目较小,对外部的依赖较小,那么软件集成可能不会是什么问题。但是目前很多软件项目特别是互联网项目面临着需求不明确,系统架构复杂,任务分配混乱等一系列问题,从而给持续集成带来许多麻烦。也给整个项目带来不必要的风险。持续集成作为敏捷开发重要的一步,其目的在于让产品快速迭代的...
时间:2019-04-18点击:604收藏
-
【大数据技术】什么是HBase ?所有的基础都在这儿了
2006 年10 月Google 发布三架马车之一的《Bigtable:A Distributed Storage System for Strctured Data》论文之后,Powerset 公司就宣布 HBase 在 Hadoop 项目中成立,作为子项目存在。后来,在2010 年左右逐渐成为 Apache 旗下的一个顶级项目。可能是实际应用中包装得太好...
时间:2019-04-18点击:548收藏
-
Spark机器学习实战 (十一) - 文本情感分类项目实战
0 相关源码 将结合前述知识进行综合实战,以达到所学即所用。文本情感分类这个项目会将分类算法、文本特征提取算法等进行关联,使大家能够对Spark的具体应用有一个整体的感知与了解。 1 项目总体概况 2 数据集概述 数据集 3 数据预处理 4 文本特征提取 官方文档介绍 提取,转换和选择特征本节介绍了使用特征的算法,大致分为以下几组: 提取:从“原始”数据中提...
时间:2019-04-18点击:601收藏
-
想学习大数据?这才是完整的大数据学习体系
干货走起,闲话不多说,以下就是小编整理的大数据学习思路 在这里还是要推荐下我自己建的大数据学习交流群:199427210,群里都是学大数据开发的,如果你正在学习大数据 ,小编欢迎你加入,大家都是软件开发党,不定期分享干货(只有大数据软件开发相关的),包括我自己整理的一份最新的大数据进阶资料和高级开发教程,欢迎进阶中和进想深入大数据的小伙伴加入。 第一阶段:l...
时间:2019-04-18点击:568收藏
-
大数据技术的那些应该重点知识,必读!!
大数据有很多方向,目前我们口中经常说的大数据的主要就业方向是:大数据研发,大数据分析与挖掘,深度学习,人工智能等方向。 下面我们就从学习的要求到学习的知识进行讲解一、要求1、大专及以上学历,最好是理工科毕业(部分文科学生学习起来比较费力) 2、年龄20-32岁 二、需要学习的知识1、基础知识:java+linux学习大数据,只需要学习Java的标准版Jav...
时间:2019-04-18点击:479收藏
-
大数据开发必备技能
一,题记 要说当下IT行业什么最火?ABC无出其右。所谓ABC者,AI + Big Data + Cloud也,即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行,今天我们来讨论下大数据Big Data这个方向。 二,大数据里面的角色 角色一:大数据工程 大数据工程需要解决数据的定义、收集、计算与保存的工作,因此大数据工程师们在设计和部...
时间:2019-04-18点击:516收藏
-
HBase+Spark技术双周刊 第七期
【点击订阅HBase+Spark技术双周刊】 近期线上直播 GC优化利器 - HBase2.0全链路offheap 详情:gc问题会带来访问毛刺,回顾一下读写链路,然后看看全链路offheap怎么减少gc停顿、减低p999延迟的。 线下沙龙最全资料下载往期回顾 中国HBase技术社区第十届meetup——HBase生态实践(杭州站) 中国HBase技术社区...
时间:2019-04-18点击:514收藏
-
大数据开发工程师必备那些技能
成为一名大数据开发工程师,你需要具备以下这些技能 Java 大家都知道Java的方向有JavaSE、JavaEE、JavaME,学习大数据要学习那个方向呢?只需要学习Java的标准版JavaSE就可以了,像Servlet、JSP、Tomcat、Struts、Spring、Hibernate,Mybatis都是JavaEE方向的技术在大数据技术里用到的并不...
时间:2019-04-18点击:515收藏
-
举个栗子:专有云MaxCompute创建TableStore外部表
1、 案例背景 某客户专有云v3环境现场,TableStore(OTS)数据迁移,需要进行数据校验工作,由于迁移工具并未有校验的api接口或者独有的校验工具,所以考虑使用在MaxCompute的上边创建OTS的外部表的方式来进行验证; 2、创建外部表访问的方式 方式1:MaxCompute计算服务要访问TableStore数据需要有一个安全的授权通道。Max...
时间:2019-04-18点击:455收藏
点击排行
推荐阅读
最新文章
- Docker安装Oracle12C,快速搭建Oracle学习环境
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7安装Docker,走上虚拟化容器引擎之路
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- Linux系统CentOS6、CentOS7手动修改IP地址
- Red5直播服务器,属于Java语言的直播服务器