首页 文章 精选 留言 我的

精选列表

搜索[高DPI],共10005篇文章
优秀的个人博客,低调大师

高并发优雅的做限流

技术分析 如果你比较关注现在的技术形式,就会知道微服务现在火的一塌糊涂,当然,事物都有两面性,微服务也不是解决技术,架构等问题的万能钥匙。如果服务化带来的利大于弊,菜菜还是推荐将系统服务化。随着服务化的进程的不断演化,各种概念以及技术随之而来。任何一种方案都是为了解决问题而存在。比如:熔断设计,接口幂等性设计,重试机制设计,还有今天菜菜要说的限流设计,等等这些技术几乎都充斥在每个系统中。 就今天来说的限流,书面意思和作用一致,就是为了限制,通过对并发访问或者请求进行限速或者一个时间窗口内的请求进行限速来保护系统。一旦达到了限制的临界点,可以用拒绝服务、排队、或者等待的方式来保护现有系统,不至于发生雪崩现象。 限流就像做帝都的地铁一般,如果你住在西二旗或者天通苑也许会体会的更深刻一些。我更习惯在技术角度用消费者的角度来阐述,需要限流的一般原因是消费者能力有限,目的为了避免超过消费者能力而出现系统故障。当然也有其他类似的情况也可以用限流来解决。 限流的表现形式上大部分可以分为两大类: 限制消费者数量。也可以说消费的最大能力值。比如:数据库的连接池是侧重的是总的连接数。还有菜菜以前写的线程池,本质上也是限制了消费者的最大消费能力。 可以被消费的请求数量。这里的数量可以是瞬时并发数,也可以是一段时间内的总并发数。菜菜今天要帮YY妹子做的也是这个。 除此之外,限流还有别的表现形式,例如按照网络流量来限流,按照cpu使用率来限流等。按照限流的范围又可以分为分布式限流,应用限流,接口限流等。无论怎么变化,限流都可以用以下图来表示: 常用技术实现 令牌桶算法 令牌桶是一个存放固定容量令牌的桶,按照固定速率往桶里添加令牌,填满了就丢弃令牌,请求是否被处理要看桶中令牌是否足够,当令牌数减为零时则拒绝新的请求。令牌桶允许一定程度突发流量,只要有令牌就可以处理,支持一次拿多个令牌。令牌桶中装的是令牌。 漏桶算法 漏桶一个固定容量的漏桶,按照固定常量速率流出请求,流入请求速率任意,当流入的请求数累积到漏桶容量时,则新流入的请求被拒绝。漏桶可以看做是一个具有固定容量、固定流出速率的队列,漏桶限制的是请求的流出速率。漏桶中装的是请求。 计数器 有时我们还会使用计数器来进行限流,主要用来限制一定时间内的总并发数,比如数据库连接池、线程池、秒杀的并发数;计数器限流只要一定时间内的总请求数超过设定的阀值则进行限流,是一种简单粗暴的总数量限流,而不是平均速率限流。 除此之外,其实根据不同的业务场景,还可以出现很多不同的限流算法,但是总的规则只有一条:只要符合当前业务场景的限流策略就是最好的 限流的其他基础知识请百度!! 另一种方式解决妹子问题 回归问题,YY妹子的问题,菜菜不准备用以上所说的几种算法来帮助她。菜菜准备用一个按照时间段限制请求总数的方式来限流。 总体思路是这样: 用一个环形来代表通过的请求容器。 用一个指针指向当前请求所到的位置索引,来判断当前请求时间和当前位置上次请求的时间差,依此来判断是否被限制。 如果请求通过,则当前指针向前移动一个位置,不通过则不移动位置 重复以上步骤 直到永远....... 用代码说话才是王道 以下代码不改或者稍微修改可用于生产环境 以下代码的核心思路是这样的:指针当前位置的时间元素和当前时间的差来决定是否允许此次请求,这样通过的请求在时间上表现的比较平滑。 思路远比语言重要,任何语言也可为之,请phper,golanger,javaer 自行实现一遍即可 //限流组件,采用数组做为一个环 class LimitService { //当前指针的位置 int currentIndex = 0; //限制的时间的秒数,即:x秒允许多少请求 int limitTimeSencond = 1; //请求环的容器数组 DateTime?[] requestRing = null; //容器改变或者移动指针时候的锁 object objLock = new object(); public LimitService(int countPerSecond,int _limitTimeSencond) { requestRing = new DateTime?[countPerSecond]; limitTimeSencond= _limitTimeSencond; } //程序是否可以继续 public bool IsContinue() { lock (objLock) { var currentNode = requestRing[currentIndex]; //如果当前节点的值加上设置的秒 超过当前时间,说明超过限制 if (currentNode != null&& currentNode.Value.AddSeconds(limitTimeSencond) >DateTime.Now) { return false; } //当前节点设置为当前时间 requestRing[currentIndex] = DateTime.Now; //指针移动一个位置 MoveNextIndex(ref currentIndex); } return true; } //改变每秒可以通过的请求数 public bool ChangeCountPerSecond(int countPerSecond) { lock (objLock) { requestRing = new DateTime?[countPerSecond]; currentIndex = 0; } return true; } //指针往前移动一个位置 private void MoveNextIndex(ref int currentIndex) { if (currentIndex != requestRing.Length - 1) { currentIndex = currentIndex + 1; } else { currentIndex = 0; } } } 测试程序如下: static LimitService l = new LimitService(1000, 1); static void Main(string[] args) { int threadCount = 50; while (threadCount >= 0) { Thread t = new Thread(s => { Limit(); }); t.Start(); threadCount--; } Console.Read(); } static void Limit() { int i = 0; int okCount = 0; int noCount = 0; Stopwatch w = new Stopwatch(); w.Start(); while (i < 1000000) { var ret = l.IsContinue(); if (ret) { okCount++; } else { noCount++; } i++; } w.Stop(); Console.WriteLine($"共用{w.ElapsedMilliseconds},允许:{okCount}, 拦截:{noCount}"); } 测试结果如下: 最大用时15秒,共处理请求1000000*50=50000000 次 并未发生GC操作,内存使用率非常低,每秒处理 300万次+请求 。以上程序修改为10个线程,大约用时4秒之内 如果是强劲的服务器或者线程数较少情况下处理速度将会更快 写在最后 以上代码虽然简单,但是却为限流的核心代码(其实还有优化余地),经过其他封装可以适用于Webapi的filter或其他场景。妹子问题解决了,要不要让她请我吃个饭呢? 更多精彩文章 分布式大并发系列 架构设计系列 趣学算法和数据结构系列 设计模式系列

优秀的个人博客,低调大师

快速构建高并发微服务

0. 为什么说做好微服务很难? 要想做好微服务,我们需要理解和掌握的知识点非常多,从几个维度上来说: 基本功能层面 并发控制&限流,避免服务被突发流量击垮 服务注册与服务发现,确保能够动态侦测增减的节点 负载均衡,需要根据节点承受能力分发流量 超时控制,避免对已超时请求做无用功 熔断设计,快速失败,保障故障节点的恢复能力 高阶功能层面 请求认证,确保每个用户只能访问自己的数据 链路追踪,用于理解整个系统和快速定位特定请求的问题 日志,用于数据收集和问题定位 可观测性,没有度量就没有优化 对于其中每一点,我们都需要用很长的篇幅来讲述其原理和实现,那么对我们后端开发者来说,要想把这些知识点都掌握并落实到业务系统里,难度是非常大的,不过我们可以依赖已经被大流量验证过的框架体系。go-zero微服务框架就是为此而生。 另外,我们始终秉承工具大于约定和文档的理念。我们希望尽可能减少开发人员的心智负担,把精力都投入到产生业务价值的代码上,减少重复代码的编写,所以我们开发了goctl工具。 下面我通过短链微服务来演示通过go-zero快速的创建微服务的流程,走完一遍,你就会发现:原来编写微服务如此简单! 1. 什么是短链服务? 短链服务就是将长的URL网址,通过程序计算等方式,转换为简短的网址字符串。 写此短链服务是为了从整体上演示go-zero构建完整微服务的过程,算法和实现细节尽可能简化了,所以这不是一个高阶的短链服务。 2. 短链微服务架构图 这里把shorten和expand分开为两个微服务,并不是说一个远程调用就需要拆分为一个微服务,只是为了最简演示多个微服务而已 后面的redis和mysql也是共用的,但是在真正项目里要尽可能每个微服务使用自己的数据库,数据边界要清晰 3. 准备工作 安装etcd, mysql, redis 准备goctl工具 直接从https://github.com/tal-tech/go-zero/releases下载最新版,后续会加上自动更新 也可以从源码编译,在任意目录下进行,目的是为了编译goctl工具 git clone https://github.com/tal-tech/go-zero 在tools/goctl目录下编译goctl工具go build goctl.go 将生成的goctl放到$PATH下,确保goctl命令可运行 创建工作目录shorturl 在shorturl目录下执行go mod init shorturl初始化go.mod 4. 编写API Gateway代码 通过goctl生成shorturl.api并编辑,为了简洁,去除了文件开头的info,代码如下: type ( shortenReq struct { url string `form:"url"` } shortenResp struct { shortUrl string `json:"shortUrl"` } ) type ( expandReq struct { key string `form:"key"` } expandResp struct { url string `json:"url"` } ) service shorturl-api { @server( handler: ShortenHandler ) get /shorten(shortenReq) returns(shortenResp) @server( handler: ExpandHandler ) get /expand(expandReq) returns(expandResp) } type用法和go一致,service用来定义get/post/head/delete等api请求,解释如下: service shorturl-api {这一行定义了service名字 @server部分用来定义server端用到的属性 handler定义了服务端handler名字 get /shorten(shortenReq) returns(shortenResp)定义了get方法的路由、请求参数、返回参数等 使用goctl生成API Gateway代码 goctl api go -api shorturl.api -dir api 生成的文件结构如下: . ├── api │ ├── etc │ │ └── shorturl-api.yaml // 配置文件 │ ├── internal │ │ ├── config │ │ │ └── config.go // 定义配置 │ │ ├── handler │ │ │ ├── expandhandler.go // 实现expandHandler │ │ │ ├── routes.go // 定义路由处理 │ │ │ └── shortenhandler.go // 实现shortenHandler │ │ ├── logic │ │ │ ├── expandlogic.go // 实现ExpandLogic │ │ │ └── shortenlogic.go // 实现ShortenLogic │ │ ├── svc │ │ │ └── servicecontext.go // 定义ServiceContext │ │ └── types │ │ └── types.go // 定义请求、返回结构体 │ └── shorturl.go // main入口定义 ├── go.mod ├── go.sum └── shorturl.api 启动API Gateway服务,默认侦听在8888端口 go run api/shorturl.go -f api/etc/shorturl-api.yaml 测试API Gateway服务 curl -i "http://localhost:8888/shorten?url=http://www.xiaoheiban.cn" 返回如下: HTTP/1.1 200 OK Content-Type: application/json Date: Thu, 27 Aug 2020 14:31:39 GMT Content-Length: 15 {"shortUrl":""} 可以看到我们API Gateway其实啥也没干,就返回了个空值,接下来我们会在rpc服务里实现业务逻辑 可以修改internal/svc/servicecontext.go来传递服务依赖(如果需要) 实现逻辑可以修改internal/logic下的对应文件 可以通过goctl生成各种客户端语言的api调用代码 到这里,你已经可以通过goctl生成客户端代码给客户端同学并行开发了,支持多种语言,详见文档 5. 编写shorten rpc服务 在rpc/shorten目录下编写shorten.proto文件 可以通过命令生成proto文件模板 goctl rpc template -o shorten.proto 修改后文件内容如下: syntax = "proto3"; package shorten; message shortenReq { string url = 1; } message shortenResp { string key = 1; } service shortener { rpc shorten(shortenReq) returns(shortenResp); } 用goctl生成rpc代码,在rpc/shorten目录下执行命令 goctl rpc proto -src shorten.proto 文件结构如下: rpc/shorten ├── etc │ └── shorten.yaml // 配置文件 ├── internal │ ├── config │ │ └── config.go // 配置定义 │ ├── logic │ │ └── shortenlogic.go // rpc业务逻辑在这里实现 │ ├── server │ │ └── shortenerserver.go // 调用入口, 不需要修改 │ └── svc │ └── servicecontext.go // 定义ServiceContext,传递依赖 ├── pb │ └── shorten.pb.go ├── shorten.go // rpc服务main函数 ├── shorten.proto └── shortener ├── shortener.go // 提供了外部调用方法,无需修改 ├── shortener_mock.go // mock方法,测试用 └── types.go // request/response结构体定义 直接可以运行,如下: $ go run shorten.go -f etc/shorten.yaml Starting rpc server at 127.0.0.1:8080... etc/shorten.yaml文件里可以修改侦听端口等配置 6. 编写expand rpc服务 在rpc/expand目录下编写expand.proto文件 可以通过命令生成proto文件模板 goctl rpc template -o expand.proto 修改后文件内容如下: syntax = "proto3"; package expand; message expandReq { string key = 1; } message expandResp { string url = 1; } service expander { rpc expand(expandReq) returns(expandResp); } 用goctl生成rpc代码,在rpc/expand目录下执行命令 goctl rpc proto -src expand.proto 文件结构如下: rpc/expand ├── etc │ └── expand.yaml // 配置文件 ├── expand.go // rpc服务main函数 ├── expand.proto ├── expander │ ├── expander.go // 提供了外部调用方法,无需修改 │ ├── expander_mock.go // mock方法,测试用 │ └── types.go // request/response结构体定义 ├── internal │ ├── config │ │ └── config.go // 配置定义 │ ├── logic │ │ └── expandlogic.go // rpc业务逻辑在这里实现 │ ├── server │ │ └── expanderserver.go // 调用入口, 不需要修改 │ └── svc │ └── servicecontext.go // 定义ServiceContext,传递依赖 └── pb └── expand.pb.go 修改etc/expand.yaml里面的ListenOn的端口为8081,因为8080已经被shorten服务占用了 修改后运行,如下: $ go run expand.go -f etc/expand.yaml Starting rpc server at 127.0.0.1:8081... etc/expand.yaml文件里可以修改侦听端口等配置 7. 修改API Gateway代码调用shorten/expand rpc服务 修改配置文件shorter-api.yaml,增加如下内容 Shortener: Etcd: Hosts: - localhost:2379 Key: shorten.rpc Expander: Etcd: Hosts: - localhost:2379 Key: expand.rpc 通过etcd自动去发现可用的shorten/expand服务 修改internal/config/config.go如下,增加shorten/expand服务依赖 type Config struct { rest.RestConf Shortener rpcx.RpcClientConf // 手动代码 Expander rpcx.RpcClientConf // 手动代码 } 修改internal/svc/servicecontext.go,如下: type ServiceContext struct { Config config.Config Shortener rpcx.Client // 手动代码 Expander rpcx.Client // 手动代码 } func NewServiceContext(config config.Config) *ServiceContext { return &ServiceContext{ Config: config, Shortener: rpcx.MustNewClient(config.Shortener), // 手动代码 Expander: rpcx.MustNewClient(config.Expander), // 手动代码 } } 通过ServiceContext在不同业务逻辑之间传递依赖 修改internal/logic/expandlogic.go,如下: type ExpandLogic struct { ctx context.Context logx.Logger expander rpcx.Client // 手动代码 } func NewExpandLogic(ctx context.Context, svcCtx *svc.ServiceContext) ExpandLogic { return ExpandLogic{ ctx: ctx, Logger: logx.WithContext(ctx), expander: svcCtx.Expander, // 手动代码 } } func (l *ExpandLogic) Expand(req types.ExpandReq) (*types.ExpandResp, error) { // 手动代码开始 resp, err := expander.NewExpander(l.expander).Expand(l.ctx, &expander.ExpandReq{ Key: req.Key, }) if err != nil { return nil, err } return &types.ExpandResp{ Url: resp.Url, }, nil // 手动代码结束 } 增加了对expander服务的依赖,并通过调用expander的Expand方法实现短链恢复到url 修改internal/logic/shortenlogic.go,如下: type ShortenLogic struct { ctx context.Context logx.Logger shortener rpcx.Client // 手动代码 } func NewShortenLogic(ctx context.Context, svcCtx *svc.ServiceContext) ShortenLogic { return ShortenLogic{ ctx: ctx, Logger: logx.WithContext(ctx), shortener: svcCtx.Shortener, // 手动代码 } } func (l *ShortenLogic) Shorten(req types.ShortenReq) (*types.ShortenResp, error) { // 手动代码开始 resp, err := shortener.NewShortener(l.shortener).Shorten(l.ctx, &shortener.ShortenReq{ Url: req.Url, }) if err != nil { return nil, err } return &types.ShortenResp{ ShortUrl: resp.Key, }, nil // 手动代码结束 } 增加了对shortener服务的依赖,并通过调用shortener的Shorten方法实现url到短链的变换 至此,API Gateway修改完成,虽然贴的代码多,但是期中修改的是很少的一部分,为了方便理解上下文,我贴了完整代码,接下来处理CRUD+cache 8. 定义数据库表结构,并生成CRUD+cache代码 shorturl下创建rpc/model目录:mkdir -p rpc/model 在rpc/model目录下编写创建shorturl表的sql文件shorturl.sql,如下: CREATE TABLE `shorturl` ( `shorten` varchar(255) NOT NULL COMMENT 'shorten key', `url` varchar(255) NOT NULL COMMENT 'original url', PRIMARY KEY(`shorten`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4; 创建DB和table create database gozero; source shorturl.sql; 在rpc/model目录下执行如下命令生成CRUD+cache代码,-c表示使用redis cache goctl model mysql ddl -c -src shorturl.sql -dir . 也可以用datasource命令代替ddl来指定数据库链接直接从schema生成 生成后的文件结构如下: rpc/model ├── shorturl.sql ├── shorturlmodel.go // CRUD+cache代码 └── vars.go // 定义常量和变量 9. 修改shorten/expand rpc代码调用crud+cache代码 修改rpc/expand/etc/expand.yaml,增加如下内容: DataSource: root:@tcp(localhost:3306)/gozero Table: shorturl Cache: - Host: localhost:6379 可以使用多个redis作为cache,支持redis单点或者redis集群 修改rpc/expand/internal/config.go,如下: type Config struct { rpcx.RpcServerConf DataSource string // 手动代码 Table string // 手动代码 Cache cache.CacheConf // 手动代码 } 增加了mysql和redis cache配置 修改rpc/expand/internal/svc/servicecontext.go,如下: type ServiceContext struct { c config.Config Model *model.ShorturlModel // 手动代码 } func NewServiceContext(c config.Config) *ServiceContext { return &ServiceContext{ c: c, Model: model.NewShorturlModel(sqlx.NewMysql(c.DataSource), c.Cache, c.Table), // 手动代码 } } 修改rpc/expand/internal/logic/expandlogic.go,如下: type ExpandLogic struct { ctx context.Context logx.Logger model *model.ShorturlModel // 手动代码 } func NewExpandLogic(ctx context.Context, svcCtx *svc.ServiceContext) *ExpandLogic { return &ExpandLogic{ ctx: ctx, Logger: logx.WithContext(ctx), model: svcCtx.Model, // 手动代码 } } func (l *ExpandLogic) Expand(in *expand.ExpandReq) (*expand.ExpandResp, error) { // 手动代码开始 res, err := l.model.FindOne(in.Key) if err != nil { return nil, err } return &expand.ExpandResp{ Url: res.Url, }, nil // 手动代码结束 } 修改rpc/shorten/etc/shorten.yaml,增加如下内容: DataSource: root:@tcp(localhost:3306)/gozero Table: shorturl Cache: - Host: localhost:6379 可以使用多个redis作为cache,支持redis单点或者redis集群 修改rpc/shorten/internal/config.go,如下: type Config struct { rpcx.RpcServerConf DataSource string // 手动代码 Table string // 手动代码 Cache cache.CacheConf // 手动代码 } 增加了mysql和redis cache配置 修改rpc/shorten/internal/svc/servicecontext.go,如下: type ServiceContext struct { c config.Config Model *model.ShorturlModel // 手动代码 } func NewServiceContext(c config.Config) *ServiceContext { return &ServiceContext{ c: c, Model: model.NewShorturlModel(sqlx.NewMysql(c.DataSource), c.Cache, c.Table), // 手动代码 } } 修改rpc/shorten/internal/logic/shortenlogic.go,如下: const keyLen = 6 type ShortenLogic struct { ctx context.Context logx.Logger model *model.ShorturlModel // 手动代码 } func NewShortenLogic(ctx context.Context, svcCtx *svc.ServiceContext) *ShortenLogic { return &ShortenLogic{ ctx: ctx, Logger: logx.WithContext(ctx), model: svcCtx.Model, // 手动代码 } } func (l *ShortenLogic) Shorten(in *shorten.ShortenReq) (*shorten.ShortenResp, error) { // 手动代码开始,生成短链接 key := hash.Md5Hex([]byte(in.Url))[:keyLen] _, err := l.model.Insert(model.Shorturl{ Shorten: key, Url: in.Url, }) if err != nil { return nil, err } return &shorten.ShortenResp{ Key: key, }, nil // 手动代码结束 } 至此代码修改完成,凡事手动修改的代码我加了标注 10. 完整调用演示 shorten api调用 curl -i "http://localhost:8888/shorten?url=http://www.xiaoheiban.cn" 返回如下: HTTP/1.1 200 OK Content-Type: application/json Date: Sat, 29 Aug 2020 10:49:49 GMT Content-Length: 21 {"shortUrl":"f35b2a"} expand api调用 curl -i "http://localhost:8888/expand?key=f35b2a" 返回如下: HTTP/1.1 200 OK Content-Type: application/json Date: Sat, 29 Aug 2020 10:51:53 GMT Content-Length: 34 {"url":"http://www.xiaoheiban.cn"} 11. Benchmark 因为写入依赖于mysql的写入速度,就相当于压mysql了,所以压测只测试了expand接口,相当于从mysql里读取并利用缓存,shorten.lua里随机从db里获取了100个热key来生成压测请求 可以看出在我的MacBook Pro上能达到3万+的qps。 12. 总结 我们一直强调工具大于约定和文档。 go-zero不只是一个框架,更是一个建立在框架+工具基础上的,简化和规范了整个微服务构建的技术体系。 我们在保持简单的同时也尽可能把微服务治理的复杂度封装到了框架内部,极大的降低了开发人员的心智负担,使得业务开发得以快速推进。 通过go-zero+goctl生成的代码,包含了微服务治理的各种组件,包括:并发控制、自适应熔断、自适应降载、自动缓存控制等,可以轻松部署以承载巨大访问量。 13. 微信交流群

优秀的个人博客,低调大师

高德地图之轨迹回放

最近项目中有需要做车辆的轨迹回放功能,在这里就给打分享一下还是挺简单的。 <!doctype html> <html> <head> <meta charset="utf-8"> <meta http-equiv="X-UA-Compatible" content="IE=edge"> <meta name="viewport" content="initial-scale=1.0, user-scalable=no, width=device-width"> <title>轨迹回放</title> <link href="styles/NewGlobal.css" rel="stylesheet" /> <link rel="stylesheet" href="css/gaode_main1119.css" /> <link rel="stylesheet" type="text/css" href="css/ui.css"> <!-- <link type="text/css" rel="stylesheet" href="css/sale-list.css" /> --> <link rel="stylesheet" href="css/demo-center.css"/> <script type="text/javascript" src="jquery/1.9.1/jquery.min.js"></script> <style> html, body, #container { height: 98%; width: 100%; } .input-card .btn{ margin-right: 1.2rem; width: 9rem; } .input-card .btn:last-child{ margin-right: 0; } </style> </head> <body> <div id="container"></div> <div class="input-card" style="margin-bottom:45px"> <div style="" align="center"><span id="tsid" style="font-size: 14px"></span></div> <h4>轨迹回放控制</h4> <div class="input-item"> <input type="button" class="btn" style="width: 25%" value="今天" id="start1" onclick="gettrack('1')"/> <input type="button" class="btn" style="width: 25%" value="昨天" id="start2" onclick="gettrack('2')"/> <input type="button" class="btn" style="width: 25%" value="前天" id="start3" onclick="gettrack('3')"/> <input type="button" class="btn" value="开始回放" id="start" onclick="startAnimation()"/> <input type="button" class="btn" value="暂停回放" id="pause" onclick="pauseAnimation()"/> </div> </div> <div class="aui-l-content" style="width:100%;margin: 0 auto; bottom: 0px; position: fixed;"> <div class="aui-menu-list aui-menu-list-clear"> <ul> <li class="b-line"> <a href="new_index.html"> <div class="aui-icon"><img src="images/icon-home/my-in2.png"></div> <h3>返回主页</h3> <div class="aui-time"><i class="aui-jump"></i></div> </a> </li> </ul> </div> </div> <script type="text/javascript" src="https://webapi.amap.com/maps?v=1.4.10&key="></script> <script> var marker, lineArr=new Array(),tishiArr=new Array(); $(function(){ var h = document.documentElement.clientHeight || document.body.clientHeight; $("#container").css("height", h-52-77-12-50); tomap(); }) //lineArr数组为历史回顾的GPS点 function tomap(){ var map = new AMap.Map("container", { resizeEnable: true, center: [104.04, 30.40], zoom: 14 }); map.clearMap(); // 清除地图覆盖物 marker = new AMap.Marker({ map: map, position: lineArr[0], icon: "images/car.png", offset: new AMap.Pixel(-26, -13), autoRotation: true, angle:-90, }); // 绘制轨迹 var polyline = new AMap.Polyline({ map: map, path: lineArr, showDir:true, strokeColor: "#28F", //线颜色 // strokeOpacity: 1, //线透明度 strokeWeight: 6, //线宽 // strokeStyle: "solid" //线样式 }); var passedPolyline = new AMap.Polyline({ map: map, // path: lineArr, strokeColor: "#AF5", //线颜色 // strokeOpacity: 1, //线透明度 strokeWeight: 6, //线宽 // strokeStyle: "solid" //线样式 }); marker.on('moving', function (e) { passedPolyline.setPath(e.passedPath); }); map.setFitView(); } var i=0; var t1; var k=0; function addinfo(){ $("#tsid").html(tishiArr[i]); i=i+1; if(i>tishiArr.length){ clearInterval(t1); i=0; } } //开始 function startAnimation () { if(lineArr.length>0){ if(k>0){ marker.resumeMove(); }else{ marker.moveAlong(lineArr, 350); } t1=window.setInterval(addinfo, 500); } } //继续 function pauseAnimation () { k=1; clearInterval(t1); if(lineArr.length>0){ marker.pauseMove(); } } // function resumeAnimation () { marker.resumeMove(); } //停止 function stopAnimation () { if(lineArr.length>0){ marker.stopMove(); } } </script> </body> </html> 上个图吧这里: ​​​ 是不是就是很简单的操作。 如有需要可以加我Q群【308742428】大家一起讨论技术。 后面会不定时为大家更新文章,敬请期待。 喜欢的朋友可以关注下。

优秀的个人博客,低调大师

高可用Redis(三):Hash类型

1.哈希类型键值结构 哈希类型也是key-value结构,key是字符串类型,其value分为两个部分:field和value 其中field部分代表属性,value代表属性对应的值 上面的图里,user:1:info为key,name,age,Date为user这个key的一些属性,value是属性对应的值 在hash中,可以为key添加一个新的属性和新的值 比如使用下面的命令向user:1:info这个key添加一个新属性viewCounter,属性对应的值为100 hset user:1:info viewCounter 100 2.特点 key-value结构 key(field)不能相同,value可以相同 3.Redis哈希类型对应的命令 3.1 hget命令,hset命令和hdel命令 hget key field 获取hash key对应的field的value hset key field value 设置hash key对应的field的value hdel key field 删除hash key对应的field的value 例子: 127.0.0.1:6379> hset user:1:info age 23 (integer) 1 127.0.0.1:6379> hget user:1:info age "23" 127.0.0.1:6379> hset user:1:info name python (integer) 1 127.0.0.1:6379> hgetall user:1:info 1) "age" 2) "23" 3) "name" 4) "python" 127.0.0.1:6379> hdel user:1:info age (integer) 1 127.0.0.1:6379> hgetall user:1:info 1) "name" 2) "python" 127.0.0.1:6379> 注意事项: hget命令,hset命令和hdel命令的时间复杂度为O(1) 3.2 hexists命令和hlen命令 hexists key field 判断hash key是否有field hlen key 获取hash key field的数量 例子: 127.0.0.1:6379> hgetall user:1:info 1) "name" 2) "python" 3) "age" 4) "23" 127.0.0.1:6379> hexists user:1:info name (integer) 1 127.0.0.1:6379> hlen user:1:info (integer) 2 注意事项: hexists命令和hlen命令的时间复杂度为O(1) 3.3 hmget命令和hmset命令 hmget key field1 field2 ... fieldN 批量获取hash key的一批field对应的值 hmset key field1 value1 field2 value2 ... fieldN valueN 批量设置hash key的一批field value 例子: 127.0.0.1:6379> hmset user:2:info age 30 name mysql page 50 OK 127.0.0.1:6379> hlen user:2:info (integer) 3 127.0.0.1:6379> hmget user:2:info age name 1) "30" 2) "mysql" 127.0.0.1:6379> 注意事项: hmget命令和hmset命令的时间复杂度为O(1) 3.4 hgetall命令,hvals命令和hkeys命令 hgetall key 返回hash key对应所有的field和value hvals key 返回hash key对应所有field的value hkeys key 返回hash key对应所有field 例子: 127.0.0.1:6379> hgetall user:2:info 1) "age" 2) "30" 3) "name" 4) "mysql" 5) "page" 6) "50" 127.0.0.1:6379> hvals user:2:info 1) "30" 2) "mysql" 3) "50" 127.0.0.1:6379> hkeys user:2:info 1) "age" 2) "name" 3) "page" 注意事项: hgetall命令,hvals命令和hkeys命令的时间复杂度为O(1) 由于Redis的单线程的特点以及hgetall会返回所有的key和value,所以如果hash中存储的数据过多时,hgetall命令的执行速度会比较慢 3.5 hsetnx命令,hincrby命令和hincrbyfloat命令 hsetnx key field value 设置hash key对应field的value(如field已经存在,则失败) hincrby key field intCounter hash key对应的field的value自增intCounter hincrbyfloat key field floatCounter hincrby浮点数版 注意事项: hsetnx命令,hincrby命令和hincrbyfloat命令的时间复杂度为O(1) 4.实战 记录网站每个用户个人主页的访问量,也可以使用哈希类型 这样可以保证每个用户的相关数据是一个整体,而使用字符串类型保存的话,则每个用户个人主面的访问量与每个用户的其他数据都是一个分离的状态。 记录网站每个用户个人主页的访问量需要根据实际情况来进行设计使用 hincrby user:1:info pageview count 5.使用Redis保存每个用户相关的数据,可以使用三种方式 5.1 方式一 使用用户的id为key,把用户的相关数据进行序列化后并做为value 使用时,根据用户id获取对应的数据的字符串格式,进行反序列化后就可以得到用户相关的数据进行查询和更新操作 5.2 方式二 使用用户的id与用户对应的属性名进行拼接得到新的字符串,并做为key,用户对应属性的值做为value 这样,用户的所有信息都是分离开的,可以很方便的对用户的数据进行查询和更新,并且可以很方便的为用户添加新的属性,而不用对原来的属性有影响 5.3 方式三 使用用户id做为key,用户的其他数据都保存为hash格式, 对用户的属性进行查询,更新和添加都比较方便 保存用户相关数据的方式比较

优秀的个人博客,低调大师

高并发下linux ulimit优化

系统性能一直是一个受关注的话题,如何通过最简单的设置来实现最有效的性能调优,如何在有限资源的条件下保证程序的运作,ulimit 是我们在处理这些问题时,经常使用的一种简单手段。ulimit 是一种 linux 系统的内键功能,它具有一套参数集,用于为由它生成的 shell 进程及其子进程的资源使用设置限制。 ulimit 用于限制 shell 启动进程所占用的资源,支持以下各种类型的限制:所创建的内核文件的大小、进程数据块的大小、Shell 进程创建文件的大小、内存锁住的大小、常驻内存集的大小、打开文件描述符的数量、分配堆栈的最大大小、CPU 时间、单个用户的最大线程数、Shell 进程所能使用的最大虚拟内存。同时,它支持硬资源和软资源的限制。 ulimit 指令参数: 选项 [options] 含义 -H 设置硬资源限制,一旦设置不能增加。 -S 设置软资源限制,设置后可以增加,但是不能超过硬资源设置。 -a 显示当前所有的 limit 信息。 -c 最大的 core 文件的大小, 以 blocks 为单位。 -d 进程最大的数据段的大小,以 Kbytes 为单位。 -f 进程可以创建文件的最大值,以 blocks 为单位。 -l 最大可加锁内存大小,以 Kbytes 为单位。 -m 最大内存大小,以 Kbytes 为单位。 -n Linux操作系统对一个进程可以打开最大文件描述符的数量。 -p 管道缓冲区的大小,以 Kbytes 为单位。 -s 线程栈大小,以 Kbytes 为单位。 -t 最大的 CPU 占用时间,以秒为单位。 -u 用户最大可用的进程数。 -v 进程最大可用的虚拟内存,以 Kbytes 为单位。 在我的centos 6.3 32位系统输入 ulimit -a 结果如下 这边重点描述下红色部分 ulimit -n 问题:Can’t open so many files对于linux运维的同学们,相信都遇到过这个问题。 在Linux下一切资源皆文件,普通文件是文件,磁盘打印机是文件,socket 当然也是文件。系统默认设置成1024,但是这个数字对于服务器特别是大并发的远远是不够的,所以,我们需要结合实际情况修改成一个更大更合理的值。 修改方法 vim /etc/security/limits.conf # 确认包含下面的内容: * soft nofile 65536 * hard nofile 65536 保存,然后重启 注:65536 是我这边的设定值,读者也可以自行设置一个合适的值,* 代表针对所有用户 同时还有个要注意的值file-max是设置 系统所有进程一共可以打开的文件数量 ,可以通过如下方法进行修改 echo 6553560 > /proc/sys/fs/file-max 或修改 /etc/sysctl.conf, 加入 fs.file-max = 6553560 重启生效 另外还有一个,/proc/sys/fs/file-nr,可以看到整个系统目前使用的文件句柄数量 ulimit -u 比如我们在模拟大规模http并发测试的时候,客户端会报一个无法fork new proc异常,原因是受到了最大进程1024的限制 解除 Linux 系统的最大进程数 方法如下 vim/etc/security/limits.d/90-nproc.conf # 添加如下的行 * soft nproc 10240 root soft nproc unlimited

优秀的个人博客,低调大师

[AR]高通Vuforia Getting Started

文章目录[点击展开](?)[+] Vuforia Getting Started 简介 ​ Vuforia创建增强现实应用程序是一个软件平台。开发人员可以轻松地将先进的计算机视觉功能添加到任何应用程序中,允许它识别图像和对象,或在现实世界中重建环境。 ​ 无论你是构建企业应用程序提供一步一步的指示和训练,或交互式营销活动,或产品可视化,使购物体验,Vuforia已经所有的功能和性能来满足您的需求。 ​ Vuforia SDK 6是我们最重要的SDK版本。它包括开创性VuMark™解决方案交付基于“增大化现实”技术的经验任何对象,支持Windows 10设备,和一些新特性和改进。 SDK的示例 从官网下载的Vuforia SDK For Unity的文件列表如下:(6-0-112是版本号) VuMark-6-0-112.unitypackage VirtualButtons-6-0-112.unitypackage UserDefinedTargets-6-0-112.unitypackage TextReco-6-0-112.unitypackage SmartTerrain-6-0-112.unitypackage ObjectRecognition-6-0-112.unitypackage MultiTargets-6-0-112.unitypackage ImageTargets-6-0-112.unitypackage FrameMarkers-6-0-112.unitypackage CylinderTargets-6-0-112.unitypackage CloudReco-6-0-112.unitypackage Vuforia功能特性 Vuforia的识别和跟踪功能可以使用各种图像和对象。 Image Targets (图像目标) 平面图像,如印刷媒体和产品包装。 VuMarks (VuMarks)是定制标记,可以编码数据格式。他们同时支持独特的基于“增大化现实”技术的应用程序识别和跟踪。 VuMark是Vuforia 6.0版本新增的一个功能。它是一个可定制的可视化代码,可以贴在任何产品或机器上面。Vumark的标志可以是预先制作的贴纸或者临时打印。Vumark在工业方面的应用是通过增强现实技术直观地为用户显示一个设备从组装、使用、清洗、修理到最 后检验的一整个流程等。为了保证VuMark的视觉吸引力和可辨识度等方面,用户可以根据现有产品的图形以及品牌标识等重新设计,并且能够编码任何类型的数据,如序列号或URL,VuMark更打破了现有条形码解决方案的局限性,克服了当前条形码不支持增强现实体验, 以及可能影响产品外观的问题。 Multi-Targets (多目标) 创建使用多个图像目标和可以安排成常规的几何形状(如箱)或平面表面的任意安排。 Cylinder Targets (圆柱目标)图像封装到对象约圆柱的形状(例如瓶装饮料、咖啡杯、汽水罐)。 Frame Markers (帧标记) 提供512个数字编码标记,可用于任何图像。标记可能很小,你可以同时探测和跟踪其中几个。 Text Recognition (文字识别)允许您开发应用程序识别的单词从字典~ 100000个英语单词。 Object Targets Vuforia可以识别和跟踪更广泛的3 d对象。对象识别允许对象被扫描物体创建目标。它允许您创建应用程序识别和跟踪复杂的刚体。除了目标识别,Vuforia提供了一个认识和了解用户的物理环境。 Smart Terrain (聪明/智慧的地形)是一个突破性的技术,可以重现用户的物理环境作为一个3 d网格。它使开发人员能够创建一个全新的类游戏和现实产品的视觉经验,内容可以与物理对象和表面在现实世界中。 Platform Components(平台组件) Vuforia平台有三个主要组件 1.Vuforia Engine Vuforia Engine是客户端库,静态链接的应用程序。这是可以通过客户端SDK,支持Android和iOS。你可以使用Android Studio,Xcode或Unity——跨平台的游戏引擎构建应用程序。 2.Tools Vuforia提供工具包括创建Targets,管理Target database,安全地管理App的licenses。 Vuforia Object Scanner(可用于Android),帮助你轻松的扫描3D对象成 target格式,可以在Vuforia引擎中兼容。 开发人员为光学透明的digital eyewear(数码眼镜)构建的应用,可以利用(校准助理)可以让最终用户创建个性化的概要文件适合他们独特的面部几何。Vuforia引擎可以使用这个配置文件,以确保内容呈现在正确的位置。 所有应用程序都需要一个许可证密钥。许可证管理器允许您创建和管理您的许可证密钥和相关服务的计划。 更加详情的文档,请对照官网原文 3. Cloud Recogintion Service(云识别服务) 如果你的app需要识别大量的images,或者database需要频繁的升级,vuforia提供云识别服务。 vuforia web services API 允许你管理这些 large images database 在云端更加有效,使你能够自动化工作流通过直接集成到你的内容管理系统。 更多 Unity扩展 下载地址:https://developer.vuforia.com/downloads/sdk 以vuforia-unity-6-0-112.unitypackage约50MB为例,此package中包括各个功能特性的组件,比如: Assets\Vuforia\Scripts\ BackgroundPlaneBehaviour.cs CloudRecoBehaviour.cs CylinderTargetBehaviour.cs DatabaseLoadBehaviour.cs DefaultInitializationErrorHandler.cs DefaultSmartTerrainEventHandler.cs DefaultTrackableEventHandler.cs DeviceTrackerBehaviour.cs DigitalEyewearBehaviour.cs GLErrorHandler.cs HideExcessAreaBehaviour.cs ImageTargetBehaviour.cs KeepAliveBehaviour.cs MarkerBehaviour.cs MaskOutBehaviour.cs MultiTargetBehaviour.cs ObjectTargetBehaviour.cs PropBehaviour.cs ReconstructionBehaviour.cs ReconstructionFromTargetBehaviour.cs SmartTerrainTrackerBehaviour.cs SurfaceBehaviour.cs TextRecoBehaviour.cs TurnOffBehaviour.cs TurnOffWordBehaviour.cs UserDefinedTargetBuildingBehaviour.cs VideoBackgroundBehaviour.cs VideoBackgroundManager.cs VirtualButtonBehaviour.cs VuforiaBehaviour.cs VuMarkBehaviour.cs WebCamBehaviour.cs WireframeBehaviour.cs WireframeTrackableEventHandler.cs WordBehaviour.cs Scripts\Internal Scripts\Internal\AndroidUnityPlayer.cs Scripts\Internal\ComponentFactoryStarterBehaviour.cs Scripts\Internal\IOSUnityPlayer.cs Scripts\Internal\VuforiaBehaviourComponentFactory.cs Scripts\Internal\WSAUnityPlayer.cs Scripts\Internal\Vuforia.UnityExtensions.dll Scripts\Internal\Vuforia.UnityExtensions.XML Assets\Vuforia\Prefab 各个功能组件的prefab Assets\Plugins Android,IOS,WSA,x86,x64 各平台的插件 说明 日期:2016-09-28 英文原文:https://library.vuforia.com/getting-started 本文转自赵青青博客园博客,原文链接:http://www.cnblogs.com/zhaoqingqing/p/5918681.html,如需转载请自行联系原作者

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

用户登录
用户注册
修改密码
忘记密码