搜索[三大系统]结果-低调大师优秀个人博客

精选列表

搜索[三大系统]，共10000篇文章

Flume + Solr + log4j搭建web日志采集系统【转】

前言很多web应用会选择ELK来做日志采集系统，这里选用Flume，一方面是因为熟悉整个Hadoop框架，另一方面，Flume也有很多的优点。

2018-11-27

SpringBoot实现Java高并发秒杀系统之Web层开发（三）

SpringBoot实现Java高并发秒杀系统之Web层开发（三）接着上一篇文章：SpringBoot实现Java高并发之Service层开发，今天我们开始讲SpringBoot实现Java高并发秒杀系统之

2018-11-06

SpringBoot实现Java高并发秒杀系统之Service层开发（二）

继上一篇文章：SpringBoot实现Java高并发秒杀系统之DAO层开发我们创建了SpringBoot项目并熟悉了秒杀系统的表设计，下面我们将讲解一下秒杀系统的核心部分：Service业务层的开发。

2018-11-05

SpringBoot实现Java高并发秒杀系统之DAO层开发（一）

SpringBoot实现Java高并发秒杀系统之DAO层开发（一）秒杀系统在如今电商项目中是很常见的，最近在学习电商项目时讲到了秒杀系统的实现，于是打算使用SpringBoot框架学习一下秒杀系统（本项目基于慕课网的一套免费视频教程

2018-11-04

实时计算助力1688打造「实时挑货」系统

一、背景内容是一个电商app不可或缺的组成部分。越来越多的人会使用碎片时间浏览手机app的内容，包含导购的帖子、短视频、直播等。1688挑货业务，打造了基于买家和商家之间老买卖关系的内容场。让商家通过内容维系老客户，挖掘新客户。让买家能第一时间获取到关注商家的上新、优惠、直播等信息，为自己的采购等决策提供帮助。从宏观的背景分析，挑货业务有以下几个特点：基于1688的老买卖关系: 关注关系、客户会员关系、星标关系、分销关系内容的产生源头是供应商，供应商在1688网站的各种行为，都可以转变成内容信息内容的消费源头是供应商的老买家(与供应商有老买卖关系) 内容形式比较多样：帖子、营销活动、店铺上新、商家动态、直播、短视频等一系列商家产生的有效内容内容产生形式：供应商的主动行为、供应商的被动行为基于上面的业务特点，我们梳理下挑货整体的业务架

2018-10-28

分布式系统中处理参数配置的 4 种方案

一个系统中包含有各种各样的配置信息，如一个日志文件需要配置以下几个信息。

2018-10-22

从零打造聚合支付系统：二、建立领域模型

从零打造聚合支付系统系列文章链接如下从零打造聚合支付系统：一、浅谈聚合支付的核心价值从零打造聚合支付系统：二、建立领域模型从零打造聚合支付系统：三、应用微服务架构上一篇分析了聚合支付为什么能做，本篇开始讲讲聚合支付系统怎么入手

2018-10-14

深入理解分布式系统中的缓存架构(上)

本文主要介绍大型分布式系统中缓存的相关理论，常见的缓存组件以及应用场景。

2018-10-10

深入理解分布式系统中的缓存架构(下)

承接上一篇《理解分布式系统中的缓存架构(上)》，介绍了大型分布式系统中缓存的相关理论，常见的缓存组件以及应用场景，本文主要介绍缓存架构设计常见问题以及解决方案，业界案例。

2018-10-10

Java编程详细解析—淘宝大秒杀系统是如何设计的？

但这给的详情系统带来了很大压力，为了将这种突发流量隔离，才设计了秒杀系统，文章主要介绍大秒系统以及这种典型读数据的热点问题的解决思路和实践经验。一些数据大家还记得2013年的小米秒杀吗？

2018-10-08

最简单的教程：在Ubuntu操作系统里安装Docker

Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口。今天这篇文章咱们就来将Docker安装到Ubuntu上。 1. 由于Ubuntu里apt官方库里的docker版本可能比较低，因此先用下面的命令行卸载旧版本（如果有的话） sudo apt-get remove docker docker-engine docker-ce docker.io 2. 更新apt包索引： sudo apt-get update 3. 执行下列命令行，使apt可以通过HTTPS协议去使用存储库： sudo apt-get install -y apt-transport-https ca-certificates curl software-properties-common 4. 添加Docker官方提供的GPG密钥： curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add - 什么是GPG密钥呢？大家可以从阮一峰老师的博客：GPG入门教程里获得答案： 1991年，程序员Phil Zimmermann为了避开政府监视，开发了加密软件PGP。这个软件非常好用，迅速流传开来，成了许多程序员的必备工具。但是，它是商业软件，不能自由使用。所以，自由软件基金会决定，开发一个PGP的替代品，取名为GnuPG。这就是GPG的由来。上面的文字出自阮一峰老师的博客链接：http://www.ruanyifeng.com/blog/2013/07/gpg.html 5. 设置stable存储库： sudo add-apt-repository "deb [arch=amd64] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable" 最后再次更新apt包索引： 6. 安装最新版本的docker-ce： sudo apt-get install -y docker-ce 安装完毕后，可以看到Docker服务已经从/lib/systemd/system/docker.service启动了，dockerd进程id为4921：命令行ps -aux查看进程id为4921的进程路径：/usr/bin/dockerd -H fd:// 使用命令sudo docker version可以查看安装docker的版本：使用命令sudo docker run hello-world，能观察到从远程下载这个测试用的容器：Pulling from library/hello-world: 然后看到打印消息：Hello from Docker! 说明Docker安装成功。 To generate this message, Docker took the following steps: 1. The Docker client contacted the Docker daemon. 2. The Docker daemon pulled the "hello-world" image from the Docker Hub. (amd64) 3. The Docker daemon created a new container from that image which runs the executable that produces the output you are currently reading. 4. The Docker daemon streamed that output to the Docker client, which sent it to your terminal. To try something more ambitious, you can run an Ubuntu container with: $ docker run -it ubuntu bash Share images, automate workflows, and more with a free Docker ID: https://hub.docker.com/ For more examples and ideas, visit: https://docs.docker.com/engine/userguide/ 要获取更多Jerry的原创技术文章，请关注公众号"汪子熙"或者扫描下面二维码:

2018-10-01

业界 | Airbnb的变更数据捕获系统，实现数据突变实时响应

上面的场景是个很好的示例，其中动态定价，房间可用性和预留工作流需要近乎实时地响应系统中不同部分的变化。从基础架构的角度来看，设计我们的架构以扩展是必要的，因为我们的数据和服务数量不断增长。

2018-09-26

python linux 系统管理与自动化运维

pypdf2 图片：pillow 邮件：smtplib yagmail：简单发送邮件 image.png image.png 接收邮件：imapclient image.png settools打包 python-nmap image.png image.png ipy。。。。。。 dnspython... 同时处理多台服务器：polysh wget http://guichaz.free.fr/polysh/files/polysh-0.4.tar.gz tar -zxvf polysh-0.4.tar.gz cd polysh-0.4 python setup.py install 获取用户输入：pexcept paramiko:https://blog.csdn.net/l1028386804/article/details/79029041 脚本操作ssh fabric from fabric.api import * #导入fabric.api模块 env.hosts= ['192.168.122.101','192.168.122.102','192.168.122.103'] #指定远端服务器的ip地址。如果有dns解析的也可以写主机名。 env.password='indionce' #指定远端主机的密码，如果各个密码不相同可以使用一个字典指定，例如：env.password={“root@192.168.122.101”:"indionce"} @runs_once def local_uname(): #定义一个本地任务的函数 local('uname -r') def remote_uname(): #定义一个远程任务的函数 run('uname -r') def uname(): #定义一个函数，将本地与远端组合起来使用 local_uname() remote_uname() 查看列表 from fabric.api import * @runs_once #一定要指定这一条，否则会让你输入多次路径 def input(): return prompt("input path:") #prompt函数，让用户输入自己想要的路径，将输入的值返回到函数。 def ls_path(dirname): #在定义函数的时候指定形参。 run("ls -l "+dirname) def go(): ls_path(input()) #使用input返回的值，用于ls_path()的参数处理异常 from fabric.api import * from fabric.contrib.console import * #这个模块中包含confirm def backup(): with settings(warn_only=True): #with命令表示执行这句后，执行下面的命令。使用settings命令来设置警告模式 state=local('mkdir /root/zz') #创建一个文件夹 if state.failed and not confirm("/root/zz is already exist,continue?"): #使用failed来判断state这条命令是否失败，失败了为真。confirm向用户确认是否继续，继续为真。如果命令失败了，并且用户希望停止，便通过if判断。 abort("退出任务") #abort是退出任务，有些类似python的exit。退出并且时返回给用户一串字符串 local('tar cavf /root/zz/etc.tar.gz /etc') #将etc的文件备份到/root/zz文件夹中并行执行与顺序执行 @parallel #将下面的函数设为并行执行。 def runs_parallel(): run('uname -r') @serial #将下面的函数设为顺序执行(默认即为顺序执行 ) def runs_serially(): pass @parallel(pool_size=5) #将下面的函数设为并行执行，并且限制最多5个线程。 def runs_parallel(): pass

2018-09-25

Python Linux系统管理与自动化运维

Py't'hon语言与Linux系统管理 Py't'hon生态工具打造命令行工具文本处理 Linux系统管理使用python监控Linux系统文档与报告网络 Python自动化部署深入浅出Ansible

2018-09-25

中国发布自主开发的域名系统基础软件 “红枫”

9月12日消息，域名工程中心（英文缩写 ZDNS）发布了宣称自主开发的域名系统基础软件 “红枫(Maple DNS)”。目前除了新闻稿，基本找不到相关细节，但显然不是开源软件。

2018-09-14

怎么根据现有的网站文件选择空间和操作系统

您可看您的网站，找开网站上的任意几个页面看一下如果页面的网址链接有.php，申请时请选Linux操作系统。如果页面的网址链接中有.asp或.aspx，申请时请选windows 操作系统。

2018-09-01

ELK日志系统之使用Rsyslog快速方便的收集Nginx日志

Rsyslog --omkafka--> Kafka --> Logstash --> Elasticsearch --> Kibana● Nginx产生日志通过syslog系统服务传给

2018-08-30

ECS运维：操作系统有异常？诊断日志来帮忙！

但在使用ECS实例的过程中，仍然有可能会出现由于操作系统配置不当或程序过载等原因导致系统内核崩溃的情况，这将导致系统夯机、异常重启或无法正常启动等问题。

2018-07-22

数据预处理：自定义PDF格式批量转换TXT系统

数据预处理：自定义文件格式转换系统 ( 白宁超 2018年8月29日15:36:24 ) 导读：随着大数据的快速发展，自然语言处理、数据挖掘、机器学习技术应用愈加广泛。

2018-07-17

短视频开发，音视频系统关于美颜SDK代码详解

SvThreeScreenFilter.class黑白闪烁 —— SvBlackWhiteTwinkleFilter.class转场动画 —— SvCutSceneFilter.class优质特效内容的井喷式增长是引发下一步短视频系统领域爆发的绝对因素

2018-07-04

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。