日均百万PV架构第二弹(缓存时代来临)-低调大师

日均百万PV架构第二弹(缓存时代来临)

2017-11-08 564

上一弹中我们规划并搭建了基本的架构组成,当然此架构存在诸多问题,我们在接下来的章节中将不断

完善其功能特性,使之成为实至名归的百万PV架构站点

首先来对上一弹架构做基本的ab 并发100, 总量2000的测试,让我们对站点性能有所熟知,之后在之前的功能上我们添加多道

缓存对性能进行提升. (ps: 测试机器均为虚拟机环境 , 大约性能比主流服务器低 3.5 - 4.5 倍 , 测试参

数可做此对比评估)

新测试：最近再一次申请微软的云服务帐号试用，双核，3G内存下，相同架构的软件环境，未调优结果如下

按照规划,我们在salve3.king.com中添加两实例的varnish,在slave4.king.com中添加memcache实现

session信息共享. 本期架构图如下,可与第一弹做对比学习日均百万PV架构第一弹(基本架构搭建)

操作:

i) 安装配置varnish实现静态内容缓存

 
        1. 准备如下文件(slave3.king.com)
       
        varnish-3.0.4-1.el6.x86_64.rpm
       
        varnish-docs-3.0.4-1.el6.x86_64.rpm
       
        varnish-libs-3.0.4-1.el6.x86_64.rpm
       
        varnish-libs-devel-3.0.4-1.el6.x86_64.rpm
       
        rpm -ivh varnish*.rpm

 
        2. 配置varnish(slave3.king.com)
       
        vim 
        /etc/sysconfig/varnish 
       
        VARNISH_STORAGE=
        "malloc,100M" 
       
        #
       
        vim 
        /etc/varnish/default
        .vcl 
       
        backend imgs1 {
       
        .host = 
        "imgs1.king.com"
        ; 
       
        .port = 
        "80"
        ; 
       
        }
       
        #
       
        backend imgs2 {
       
        .host = 
        "imgs2.king.com"
        ; 
       
        .port = 
        "80"
        ; 
       
        }
       
        #
       
        sub vcl_recv {
       
        # 由于前端的haproxy已经做了负载均衡,这里直接按请求原路径处理 
       
        if 
        (req.http.host == 
        "imgs1.king.com"
        ) { 
       
        set 
        req.backend = imgs1; 
       
        } 
        else 
        { 
       
        set 
        req.backend = imgs2; 
       
        } 
       
        return
        (lookup); 
       
        }
       
        #
       
        sub vcl_deliver {
       
        set 
        resp.http.X-Age = resp.http.Age; 
       
        unset 
        resp.http.Age; 
       
        #
       
        if 
        (obj.hits > 0) { 
       
        set 
        resp.http.X-Cache = 
        "HIT via " 
        + server.
        hostname
        ; 
       
        } 
        else 
        { 
       
        set 
        resp.http.X-Cache = 
        "MISS"
        ; 
       
        } 
       
        }

 
        3. 配置haproxy将流量转向varnish(slave1.king.com , slave2.king.com)
       
        vim 
        /etc/haproxy/haproxy
        .cfg 
       
        backend img_servers
       
        balance roundrobin 
       
        server imgsrv1 imgs1.king.com:6081 check maxconn 4000 
       
        server imgsrv2 imgs2.king.com:6081 check maxconn 4000

 
        4. 更改文本内容的设置
       
        如上过程,也可以使用同一个varnish(略)

加入缓存后,站点测试

加入缓存后的ab 并发100 总量2000 测试

ii) 安装配置memcache实现session共享

 
        1. 安装memcache(slave4.king.com)
       
        ################## 1. 解决依赖 ####################
       
        tar 
        xf libevent-2.0.21-stable.
        tar
        .gz 
       
        cd 
        libevent-2.0.21-stable 
       
        .
        /configure 
        --prefix=
        /usr/local/libevent 
       
        make 
        && 
        make 
        install 
       
        echo 
        "/usr/local/libevent/lib" 
        > 
        /etc/ld
        .so.conf.d
        /libevent
        .conf 
       
        ldconfig
       
        ################## 2. 安装memcached ####################
       
        tar 
        xf memcached-1.4.15.
        tar
        .gz 
       
        cd 
        memcached-1.4.15 
       
        .
        /configure 
        --prefix=
        /usr/local/memcached 
        --with-libevent=
        /usr/local/libevent 
       
        make 
        && 
        make 
        install 
       
        ###### 3. 提供启动脚本(/etc/init.d/memcached) ###########
       
        #!/bin/bash
       
        #
       
        # Init file for memcached
       
        #
       
        # chkconfig: - 86 14
       
        # description: Distributed memory caching daemon
       
        #
       
        # processname: memcached
       
        # config: /etc/sysconfig/memcached
       
        #
       
        . 
        /etc/rc
        .d
        /init
        .d
        /functions 
       
        #
       
        ## Default variables
       
        PORT=
        "11211" 
       
        USER=
        "nobody" 
       
        MAXCONN=
        "1024" 
       
        CACHESIZE=
        "64" 
       
        #
       
        RETVAL=0
       
        prog=
        "/usr/local/memcached/bin/memcached" 
       
        desc=
        "Distributed memory caching" 
       
        lockfile=
        "/var/lock/subsys/memcached" 
       
        #
       
        start() {
       
        echo 
        -n $
        "Starting $desc (memcached): " 
       
        daemon $prog -d -p $PORT -u $USER -c $MAXCONN -m $CACHESIZE 
       
        RETVAL=$? 
       
        [ $RETVAL -
        eq 
        0 ] && success && 
        touch 
        $lockfile || failure 
       
        echo 
       
        return 
        $RETVAL 
       
        }
       
        #
       
        stop() {
       
        echo 
        -n $
        "Shutting down $desc (memcached): " 
       
        killproc $prog 
       
        RETVAL=$? 
       
        [ $RETVAL -
        eq 
        0 ] && success && 
        rm 
        -f $lockfile || failure 
       
        echo 
       
        return 
        $RETVAL 
       
        }
       
        #
       
        restart() {
       
        stop 
       
        start 
       
        }
       
        #
       
        reload() {
       
        echo 
        -n $
        "Reloading $desc ($prog): " 
       
        killproc $prog -HUP 
       
        RETVAL=$? 
       
        [ $RETVAL -
        eq 
        0 ] && success || failure 
       
        echo 
       
        return 
        $RETVAL 
       
        }
       
        #
       
        case 
        "$1" 
        in 
       
        start) 
       
        start 
       
        ;; 
       
        stop) 
       
        stop 
       
        ;; 
       
        restart) 
       
        restart 
       
        ;; 
       
        condrestart) 
       
        [ -e $lockfile ] && restart 
       
        RETVAL=$? 
       
        ;;  
       
        reload) 
       
        reload 
       
        ;; 
       
        status) 
       
        status $prog 
       
        RETVAL=$? 
       
        ;; 
       
        *) 
       
        echo 
        $
        "Usage: $0 {start|stop|restart|condrestart|status}" 
       
        RETVAL=1 
       
        esac
       
        #
       
        exit 
        $RETVAL 
       
        ################# 4. 配置脚本 ####################
       
        chmod 
        +x 
        /etc/init
        .d
        /memcached 
       
        chkconfig --add memcached
       
        service memcached start

 
        2. 配置php支持memcache(slave3.king.com , slave4.king.com)
       
        tar 
        xf memcache-2.2.7.tgz 
       
        cd 
        memcache-2.2.7 
       
        /usr/local/php/bin/phpize
       
        .
        /configure 
        --
        enable
        -memcache --with-php-config=
        /usr/local/php/bin/php-config 
       
        make 
        && 
        make 
        install 
       
        # 安装结束时，会出现类似如下行, 将后半句复制
       
        Installing shared extensions:     
        /usr/local/php/lib/php/extensions/no-debug-non-zts-20100525/memcache
        .so 
       
        #
       
        编辑
        /etc/php
        .ini，在“dynamically loaded extension”相关的位置添加如下一行来载入memcache扩展： 
       
        extension=
        /usr/local/php/lib/php/extensions/no-debug-non-zts-20100525/memcache
        .so

 
        3. 实现session共享(slave3.king.com , slave4.king.com)
       
        编辑php.ini文件，确保如下两个参数的值分别如下所示：
       
        session.save_handler = memcache
       
        session.save_path = 
        "tcp://172.16.43.4:11211?persistent=1&weight=1&timeout=1&retry_interval=15" 
       
        最后重启 slave3.king.com , slave4.king.com 的 php-fpm 服务

 
        4. 测试
       
        新建php页面 
        /nfsshared/html/setsess
        .php，为客户端设置启用session： 
       
        <?php
       
        session_start();
       
        if 
        (!isset($_SESSION[
        'www.king.com'
        ])) { 
       
        $_SESSION[
        'www.king.com'
        ] = 
        time
        (); 
       
        }
       
        print $_SESSION[
        'www.king.com'
        ]; 
       
        print 
        "<br><br>"
        ; 
       
        print 
        "Session ID: " 
        . session_id(); 
       
        ?>
       
        #
       
        新建php页面 
        /nfsshared/html/showsess
        .php，获取当前用户的会话ID： 
       
        <?php
       
        session_start();
       
        $memcache_obj = new Memcache;
       
        $memcache_obj->connect(
        '172.16.43.4'
        , 11211); 
       
        $mysess=session_id();
       
        var_dump($memcache_obj->get($mysess));
       
        $memcache_obj->close();
       
        ?>

加入memcache后, 反复刷新www.king.com在dns轮询,haproxy的调度算法下, 存储在memcache

中的session没有改变,证明session共享成功

本文转自My_King1 51CTO博客，原文链接：http://blog.51cto.com/apprentice/1408690，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/468653

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

XenApp/XenDesktop 7.11新功能

本文原载于微信公众号：tasnrh, 时间之外的IT小屋 =========================== Citrix已发布最新当前版本（CR）XenApp和XenDesktop 7.11，让我们来看看都有哪些新功能的更新！对于XenApp和XenDesktop 7.11的新功能，概括性来说，管理员的对于分散的地理位置的高级管理选项，如用户位置，应用程序位置或用户配置文件位置。同时还改善并提供新的性能指标和提醒功能，更方便的自助服务密码重置功能以及更多配置选项。此版本还加强和改进3D图形渲染能力，以及Linux的应用交付和配置文件管理交付，大大提升Linux虚拟桌面和虚拟应用的用户体验。一、拥抱微软的最新平台对于Windows Server 2016 Day One的支持。 Windows Server 2016是微软下一代云就绪的服务器操作系统。只要Windows Server 2016服务器操作系统正式发布，用户就能够在基于Windows Server 2016的平台上使用7.11的版本承担虚拟应用和基于服务器的桌面，以及Citrix的托管基础架构组件，如Deli...

2017-11-09

622

微服务（Microservices）—Martin Fowler【翻译】

微服务 “微服务架构（Microservice Architecture）”一词在过去几年里广泛的传播，它用于描述一种设计应用程序的特别方式，作为一套独立可部署的服务。目前，这种架构方式还没有准确的定义，但是在围绕业务能力的组织、自动部署（automated deployment）、端智能（intelligence in the endpoints）、语言和数据的分散控制，却有着某种共同的特征。 “微服务（Microservices）”——只不过在满大街充斥的软件架构中的一新名词而已。尽管我们非常鄙视这样的东西，但是这玩意所描述的软件风格，越来越引起我们的注意。在过去几年里，我们发现越来越多的项目开始使用这种风格，以至于我们身边的同事在构建企业级应用时，把它理所当然的认为这是一种默认开发形式。然而，很不幸，微服务风格是什么，应该怎么开发，关于这样的理论描述却很难找到。简而言之，微服务架构风格，就像是把一个单独的应用程序开发为一套小服务，每个小服务运行在自己的进程中，并使用轻量级机制通信，通常是 HTTP API。这些服务围绕业务能力来构建，并通过完全自动化部署机制来独立部署。这些服务...

2017-11-09

617

发表评论

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。