笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2018-11-04

2018杭州云栖大会参会总结

数字化、在线化、智能化驱动数字中国本次云栖大会的主题是驱动数字中国，以阿里集团和阿里云的先进技术帮助中国更多的中小企业实现数字化转型，或者更好的利用数据、技术来提高自身的产能和行业竞争力。而传统企业的数字化转型的必经路线是：数字化 -> 在线化 -> 智能化，根据这个主题，我们来看本次云栖大会的议程，这些议程基本可以划分为数字化、在线化、智能化...

683

阅读约2分钟

2018-11-04

Spring data elasticsearch 3.1 大数据集访问手册外更新

错误提示 elasticsearch result window is too large from + size must be less than or equal to 10000 原因 Elasticsearch 默认返回集在10000条以内。解决办法如果需要更多的返回值，有2种办法：调整max_result_window，好处是沿用现有的访...

648

阅读约4分钟

2018-11-04

云上Hadoop之部署结构

云上Hadoop的部署结构在云上部署Hadoop是比较灵活的，可以根据不同的业务目标部署Hadoop集群，笔者总结了在云上的大体部署结构。经典模式传统的部署模式如上，线下的机器比较固定，所以一般的节点上会部署Datanode、NodeManager节点。经典模式2 一般把节点分为：Master Node、Core Node、Task Node。这么部...

674

阅读约2分钟

2018-11-04

云上Hadoop之挑战

引言在云上云行Hadoop，很多人担心性能。因为一提到虚拟化就会有人想到有成本，往往得出有偏见的结论-在云上运行肯定比物理机器上运行性能差。如果单独把10台物理机虚拟化跑Hadoop，这肯定是有部分性能的开销的。但是如果在公共云上，情况就不是这样了。因为公共云虚拟化的开销最终是由平台方来承担的，其一是平台方采购机器有规模优势，其二平台方可以在保证虚拟机性能...

719

阅读约2分钟

2018-11-04

云上Hadoop之优势

云上Hadoop的优势如果对E-Mapreduce有兴趣，可以访问E-Mapreduce培训系列之基本介绍这里主要是围绕E-Mapreduce这款云产品展开的。易用主要体现在集群的创建、销毁、扩容、缩容等方面，目前一个集群基本4分钟内开启。支持作业的编排、作业执行错误后报警等。hadoop本身提供了基本的软件，目前hue、zeppelin、ooize等...

673

阅读约2分钟

2018-11-04

E-MapReduce(Hadoop)10大类问题之集群规划

集群规划类问题所有的使用Hadoop或者打算使用Hadoop的人肯定会遇到集群规划的问题，我到底使用多大的集群规模呢?有没有一个标准呢? 本篇文章就为你介绍集群规划。在云环境E-MapReduce中，各种搭配是比较自由的。当前，cpu跟memory的比例有1：2及1：4的。磁盘是单机4快盘，从不同的性能有普通云盘、高校云盘、SSD云盘，价格也分别不同，单...

645

阅读约2分钟

2018-11-04

E-MapReduce助力建设企业级数据仓库

概述对于大部分的企业，数据一般存在两个地方，一个是业务数据库，一个是日志。一般来讲，数据库数据容量有限，对于历史标记删除的记录一般会做定时清理，但是这些数据往往还是很有价值的。数据库计算能力也有限，如果要做一些数据分析，则会浪费宝贵的计算资源。一些数据分析会横跨不能的部门，不同的业务线，往往需要不同DB之间，甚至需要跟日志做一些关联，这时就会有一个新的部...

676

阅读约2分钟

2018-11-04

基于Kerberos的大数据安全方案

1.背景互联网从来就不是一个安全的地方。很多时候我们过分依赖防火墙来解决安全的问题，不幸的是，防火墙是假设“坏人”是来自外部的，而真正具有破坏性的攻击事件都是往往都是来自于内部的。近几年，在thehackernews等网站上总会时不时的看到可以看到一些因为数据安全问题被大面积攻击、勒索的事件。在Hadoop1.0.0之前，Hadoop并不提供对安全的支持...

611

阅读约18分钟

2018-11-04

为什么说“上云就上阿里云”

云服务器又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品。近年来，越来越热的云计算被推倒风口浪尖，各大中型企业纷纷把企业服务迁移到云上，众多的创业公司也把云服务器作为数据服务的首选。上云隐隐的成为了大家的一种默契，使用传统服务器早就成为了例外。其实云计算并没有想象中的那样“高大上”，今天阿里云河南来为大家捋一捋企业在上云的时候要考虑哪些，只有清楚...

616

阅读约6分钟

2018-11-04

Docker Compose 实战教学，教您如何运行、管理和升级分布式应用程序（二）

出品丨Docker公司（ID：docker-cn）编译丨小东每周一、三、五晚6点10分与您不见不散！这篇文章是 Windows Dockerfile 系列文章中的一篇，我将介绍使用 Docker Compose 在 Docker 中运行、管理和升级分布式应用程序。今天我将为大家带来本文的第二部分内容：使用 Docker Compose 在 Docker...

775

阅读约9分钟

2018-11-04

对象存储 OSS 上传、下载发生 "便秘"

对象存储 OSS 上传、下载发生 "便秘" 再复杂的网络架构和环境中经常遇到各种各样的网络超时问题，OSS 作为很多企业用户的源站经常会遇到下 GET 、PUT 慢的情况，问题就像便秘一样纠缠，作为存储，很多客户端把矛头指向了 OSS ，鉴于情况众多，我们今天具体分析一下都有哪些种便秘堵塞了你的生活。确认基础信息 ping 工具，目的测试到对端的 IP 链...

681

阅读约2分钟

2018-11-04

在Kubernetes上使用RDMA

RDMA RDMA(全称RemoteDirect Memory Access) 它为了解决网络传输中服务器端数据处理的延迟而产生。它的原理是将待传输的数据从一台计算机的内存，直接传输到另一台计算机的内存，整个传输过程无需操作系统和协议栈的介入。由于旁路了操作系统协议栈，通讯过程极大的降低了CPU的使用率，减少了内核的内存复制，以及用户态与内核态的上下文切换...

750

阅读约2分钟

2018-11-04

E-MapReduce支持计算与存储分离,成本下降1倍

Hadoop一出生就是存储与计算在一起的，前几年面试题中都问，Hadoop怎么保证高性能呢？其中一个原因是存储不动，计算(code)动，不同于传统的集中式的存储模式。那我们为什么还要谈存储计算分离呢？众观历史，分久必合、合久必分，在计算机历史中也很类似，如今，也许到了计算与存储分离的阶段。后面我们以实际的case说明，分离的好处与劣势。为什么呢？先说一个...

661

阅读约2分钟

2018-11-04

基于Docker+Prometheus+Grafana监控SpringBoot健康信息

在微服务体系当中，监控是必不可少的。当系统环境超过指定的阀值以后，需要提醒指定的运维人员或开发人员进行有效的防范，从而降低系统宕机的风险。在CNCF云计算平台中，Prometheus+Grafana是比较通用的解决方案，在SpringBoot2.0以后metrics默认与micrometer集成，而micrometer有关于Prometheus的MeterR...

817

阅读约14分钟

2018-11-04

Prometheus 对比 Zabbix

公司要上监控，Prometheus 是最热门的监控解决方案，作为喜新厌旧的程序员，我当然是选择跟风了，但上级更倾向于 Zabbix，那没办法，只能好好对比一番，给出几个靠谱的理由了。但稍稍深入一点，我就体会到，我之前其实并没有真的理解口口相传的 Prometheus 的优点，这次对比虽然是始于无奈，但还是蛮有意义的，正好总结一下自己粗浅的体会。 1. 对比...

737

阅读约7分钟

2018-11-04

使用NAS动态存储卷创建有状态应用

介绍：目前动态生成NAS存储卷的实现：在一个已有文件系统上，自动生成子文件系统（子目录），并生成目标存储卷（PV）；生成的PV名字为：pvc-${pv-uid} 镜像介绍： registry.cn-hangzhou.aliyuncs.com/acs/alicloud-nas-controller:v3.1.0-k8s1.11 部署：部署前要先创建一个N...

647

阅读约2分钟

2018-11-04

docker安装mysql

从阿里云的Docker Hub 上pull一个MySQL的image.docker pull registry.cn-hangzhou.aliyuncs.com/acs-sample/mysql:5.7 查看下载镜像[root@hcdev yum.repos.d]# docker imagesREPOSITORY TAG IMAGE ID CREATED S...

687

阅读约4分钟

2018-11-04

阿里巴巴开源 Spring Cloud Alibaba，加码微服务生态建设

本周，Spring Cloud联合创始人Spencer Gibb在Spring官网的博客页面宣布：阿里巴巴开源 Spring Cloud Alibaba，并发布了首个预览版本。随后，Spring Cloud 官方Twitter也发布了此消息。大家好，很高兴地告诉大家，今天 Spring Cloud Alibaba 的第一个版本发布了。 Spring Clo...

643

阅读约2分钟

2018-11-04

EDAS 答疑

Q1: springboot里面配置嵌入tomcat的话，比如配置https，将springboot的应用放到EDAS，EDAS使用的是springboot嵌入的tomcat吗？ A：是的，EDAS 应用访问前端有个 nginx 代理，需要改动 nginx 的配置，但是 https 暂时还没有完全支持，只是支持了 https 的健康检查。 Q2: edas环...

789

阅读约2分钟

2018-11-04

Eclipse 部署应用程序到阿里云 EDAS

文末有视频演示前言在之前的一篇文章中，我们介绍了如何将一个本地的 Java 应用程序直接部署到阿里云 ECS ，有不少读者反馈，如果目前已经在使用阿里云 EDAS 了，那该如何配合这个插件部署应用呢？在本文中，我们来介绍在 Eclipse 中部署 Java 应用程序到阿里云 EDAS。关于 EDAS EDAS 是一个围绕应用和微服务的PaaS平台，提...

677

阅读约2分钟

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

文章列表

2018杭州云栖大会参会总结

Spring data elasticsearch 3.1 大数据集访问手册外更新

云上Hadoop之部署结构

云上Hadoop之挑战

云上Hadoop之优势

E-MapReduce(Hadoop)10大类问题之集群规划

E-MapReduce助力建设企业级数据仓库

基于Kerberos的大数据安全方案

为什么说“上云就上阿里云”

Docker Compose 实战教学，教您如何运行、管理和升级分布式应用程序（二）

对象存储 OSS 上传、下载发生 "便秘"

在Kubernetes上使用RDMA

E-MapReduce支持计算与存储分离,成本下降1倍

基于Docker+Prometheus+Grafana监控SpringBoot健康信息

Prometheus 对比 Zabbix

使用NAS动态存储卷创建有状态应用

docker安装mysql

阿里巴巴开源 Spring Cloud Alibaba，加码微服务生态建设

EDAS 答疑

Eclipse 部署应用程序到阿里云 EDAS

资源下载

优质分享App

Nacos

Spring

Rocky Linux

欢迎您来访！