搜索[自动化]结果-低调大师优秀个人博客

精选列表

搜索[自动化]，共10001篇文章

kettle自动化的那些事儿

就写这么多吧，如果你也在搞ETL自动化，咱们可以多交流。我在开发代码时，遇到了太多的坑，一起学习一起进步！学习累了让自己笑一下吧，告诉自己未来的生活是美好的！！！

2020-11-04

内部网络自动化趋势

企业可以通过网络自动化技术来降低成本，延长正常运行时间，并简化数据中心的运营。

2020-07-15

基于Jenkins Pipeline自动化部署

最近在公司推行Docker Swarm集群的过程中，需要用到Jenkins来做自动化部署，Jenkins实现自动化部署有很多种方案，可以直接在jenkins页面写Job，把一些操作和脚本都通过页面设置，

2019-06-02

1.PSSH简介 PSSH提供OpenSSH和相关工具的并行版本。包括pssh，pscp，prsync，pnuke和pslurp。该项目包括psshlib，可以在自定义应用程序中使用。 pssh是python写的可以并发在多台机器上批量执行命令的工具，它的用法可以媲美ansible的一些简单用法，执行起来速度比ansible快它支持文件并行复制，远程命令执行，杀掉远程主机上的进程等等。杀手锏是文件并行复制，，当进行再远程主机批量上传下载的时候，最好使用它。项目地址: https://code.google.com/archive/p/parallel-ssh/ 2.PSSH使用 2.1 安装PSSH 前提条件：注意需要安装 python 2.4 或以上版本 wget https://clsn.io/files/pssh/pssh-2.3.1.tar.gz tar zxf pssh-2.3.1.tar.gz cd pssh-2.3.1 python setup.py install 安装过程 [root@clsn.io /opt/pssh-2.3.1] #python setup.py install running install running build running build_py creating build creating build/lib creating build/lib/psshlib copying psshlib/task.py -> build/lib/psshlib copying psshlib/askpass_server.py -> build/lib/psshlib copying psshlib/__init__.py -> build/lib/psshlib copying psshlib/cli.py -> build/lib/psshlib copying psshlib/psshutil.py -> build/lib/psshlib copying psshlib/manager.py -> build/lib/psshlib copying psshlib/askpass_client.py -> build/lib/psshlib copying psshlib/version.py -> build/lib/psshlib copying psshlib/color.py -> build/lib/psshlib running build_scripts creating build/scripts-2.6 copying and adjusting bin/pssh -> build/scripts-2.6 copying and adjusting bin/pnuke -> build/scripts-2.6 copying and adjusting bin/prsync -> build/scripts-2.6 copying and adjusting bin/pslurp -> build/scripts-2.6 copying and adjusting bin/pscp -> build/scripts-2.6 copying and adjusting bin/pssh-askpass -> build/scripts-2.6 changing mode of build/scripts-2.6/pssh from 644 to 755 changing mode of build/scripts-2.6/pnuke from 644 to 755 changing mode of build/scripts-2.6/prsync from 644 to 755 changing mode of build/scripts-2.6/pslurp from 644 to 755 changing mode of build/scripts-2.6/pscp from 644 to 755 changing mode of build/scripts-2.6/pssh-askpass from 644 to 755 running install_lib creating /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/task.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/askpass_server.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/__init__.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/cli.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/psshutil.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/manager.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/askpass_client.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/version.py -> /usr/lib/python2.6/site-packages/psshlib copying build/lib/psshlib/color.py -> /usr/lib/python2.6/site-packages/psshlib byte-compiling /usr/lib/python2.6/site-packages/psshlib/task.py to task.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/askpass_server.py to askpass_server.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/__init__.py to __init__.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/cli.py to cli.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/psshutil.py to psshutil.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/manager.py to manager.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/askpass_client.py to askpass_client.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/version.py to version.pyc byte-compiling /usr/lib/python2.6/site-packages/psshlib/color.py to color.pyc running install_scripts copying build/scripts-2.6/pscp -> /usr/bin copying build/scripts-2.6/prsync -> /usr/bin copying build/scripts-2.6/pnuke -> /usr/bin copying build/scripts-2.6/pssh -> /usr/bin copying build/scripts-2.6/pssh-askpass -> /usr/bin copying build/scripts-2.6/pslurp -> /usr/bin changing mode of /usr/bin/pscp to 755 changing mode of /usr/bin/prsync to 755 changing mode of /usr/bin/pnuke to 755 changing mode of /usr/bin/pssh to 755 changing mode of /usr/bin/pssh-askpass to 755 changing mode of /usr/bin/pslurp to 755 running install_data creating /usr/man creating /usr/man/man1 copying man/man1/pssh.1 -> /usr/man/man1 copying man/man1/pscp.1 -> /usr/man/man1 copying man/man1/prsync.1 -> /usr/man/man1 copying man/man1/pslurp.1 -> /usr/man/man1 copying man/man1/pnuke.1 -> /usr/man/man1 running install_egg_info Writing /usr/lib/python2.6/site-packages/pssh-2.3.1-py2.6.egg-info 2.2 安装完成使用yum安装后，只能使用pssh，但是编译安装后会包括其他命令也安装了（pscp prsync pnuke pslurp） pssh：在远程多台主机上并行运行命令 Example: pssh -h hosts.txt -l irb2 -o /tmp/foo uptime pscp :把文件并行复制到多台远程主机上 Example: pscp -h hosts.txt -l irb2 foo.txt /home/irb2/foo.txt prsync:使用rsync协议本地文件同步到远程多台主机上。 Example: prsync -r -h hosts.txt -l irb2 foo /home/irb2/foo pnuke:在远程多台主机上并行killall某一进程 Example: pnuke -h hosts.txt -l irb2 java pslurp:把文件从远程多台主机上复制到本地主机上 Example: pslurp -h hosts.txt -L /tmp/outdir -l irb2 /home/irb2/foo.txt foo.txt 2.3 pssh参数说明 -h HOST_FILE 后边跟远程主机列表（ip） -H HOST_STRING 后边跟远程主机名或者ip地址 -l USER 指定远程主机的用户名-p PAR 指定pssh最大的并行线程数。 -o 将输出的内容重定向到一个指定的文件中 -O 指定ssh参数的具体配置 -e 将执行错误重定向到一个指定的文件中 -t 设定命令执行超时时间 -x 传递ssh命令的一些参数 -i 在远程主机上执行命令完成后显示标准输出和标准错误 -P 在执行远程命令时，输出执行结果 2.4 其他常用的方法 pssh使用帮助 pssh --help pssh查看所有服务器的uptime -h list 指定了执行命令的机器列表 -A表示提示输入密码（如果机器都是ssh key打通的则无需加-A） pssh -i -A -h list 'uptime' 使用pscp向一堆机器分发文件 pscp -h list localfile remote_dir 从一堆机器中拷贝文件到中心机器 pslurp -h list /etc/hosts local_dir 2.5 常见问题如果你遇到这样的错误： IOError: [Errno 4] Interrupted system call 建议升级python版本到python2.7 3.附录 3.1 pssh CLSN站点镜像地址本站将pssh软件包镜像到本地，以防丢失，有需求的可以执行下载，下载后注意校验MD5值。 File Summary + Labels Uploaded Size pssh-2.3.1.tar.gz PSSH 2.3.1 Source Feb 3, 2012 22.88KB pssh-2.3.tar.gz PSSH 2.3 Source Jan 25, 2012 21.62KB pssh-2.2.2.tar.gz PSSH 2.2.2 Source Feb 3, 2011 20.94KB pssh-2.2.1.tar.gz PSSH 2.2.1 Source Jan 27, 2011 20.88KB pssh-2.2.tar.gz PSSH 2.2 Source Jan 27, 2011 20.84KB pssh-2.1.1.tar.gz PSSH 2.1.1 Source Mar 5, 2010 17.94KB pssh-2.1.tar.gz PSSH 2.1 Source Feb 26, 2010 17.65KB pssh-2.0.tar.gz PSSH 2.0 Source Oct 21, 2009 15.03KB 3.2 pssh GOOGLE源 File Summary + Labels Uploaded Size pssh-2.3.1.tar.gz PSSH 2.3.1 Source Feb 3, 2012 22.88KB pssh-2.3.tar.gz PSSH 2.3 Source Jan 25, 2012 21.62KB pssh-2.2.2.tar.gz PSSH 2.2.2 Source Feb 3, 2011 20.94KB pssh-2.2.1.tar.gz PSSH 2.2.1 Source Jan 27, 2011 20.88KB pssh-2.2.tar.gz PSSH 2.2 Source Jan 27, 2011 20.84KB pssh-2.1.1.tar.gz PSSH 2.1.1 Source Mar 5, 2010 17.94KB pssh-2.1.tar.gz PSSH 2.1 Source Feb 26, 2010 17.65KB pssh-2.0.tar.gz PSSH 2.0 Source Oct 21, 2009 15.03KB 3.3 文件包MD5值下载完成后务必校验MD5值 MD5值文件名 dbdbfda5681b82d4c64abdb3668e88bc pssh-2.3.tar.gz 53e70d53064f658bf8f44880340e8e5c pssh-2.3.1.tar.gz 689207677b260a7e4178174295b1389e pssh-2.2.tar.gz 865305ae39647884bc54a42e9f9554bb pssh-2.2.2.tar.gz f7583259976ef64bf3cae957a0b66e41 pssh-2.2.1.tar.gz 725f902bb7e128cc7aa1322551f7ca37 pssh-2.1.tar.gz 4b355966da91850ac530f035f7404cd5 pssh-2.1.1.tar.gz 07474f9f9dbefedc809e997f04e1dee5 pssh-2.0.tar.gz 4.参考文献 https://code.google.com/archive/p/parallel-ssh/http://opstool.com/article/266https://www.cnblogs.com/Dicky-Zhang/p/5988415.htmlhttps://help.aliyun.com/knowledge_detail/38835.html 作者：惨绿少年出处： http://clsn.io 本文版权归作者所有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接，否则保留追究法律责任的权利。

2018-12-31

自动化流程开源框架BotSharp

BotSharp的目标是帮助.NET开发者构建自己的流程自动化机器人，以自然语言对话交流的方式让电脑完成一些机械重复的劳动，并加入智能感知进去。让机器人能在声音，图像和语言方面都能与使用者沟通。

2018-09-17

使用python 自动化监控进程

自动化监控进程在项目中是非常重要的，监控指定程序是否运行，如果程序没有运行，那么启动程序，下面是使用python来实现的一个进程监控脚本，自己搞的过程中遇到的坑，在这里总结下下面的我们的python

2018-08-05

Webpack自动化构建实践指南

Webpack 我们使用Webpack打包工具作为项目的自动化构建工具，将JavaScript，CSS，图片等资源都当作JavaScript模块（使用Webpack loader处理转换）进行统一管理，

2018-07-11

webTest-----webUI自动化框架

元素的定位和操作按照页面划分，达到Web端自动化回归测试的目的，并生成测试报告。浏览器兼容性暂时未完善。本例子展示了一个必应首页搜索"龙珠超"的测试用例，比较简陋。

2018-03-03

SQL自动化审核初体验

2017.5.11-13，北京，DTCC-数据库技术大会第一次参加DTCC，这应该是转型专职DBA以来，收获最大的3天，全场超过一半讲师都讲到DB自动化运维，自此自动化运维在心里埋下一颗种子。

2018-01-28

自动化部署工具PUPPET介绍

是一个为实现数据中心自动化管理而设计的配置管理软件，它使用跨平台语言规范，管理配置文件、用户、软件包、系统服务等。客户端默认每隔半小时会和服务器通信一次，确认是否有更新。

2017-11-01

自动化运维工具Saltstack

一、概述 1.1 Saltstack简介 SaltStack是一个服务器基础架构集中化管理平台，具备配置管理、远程执行、监控等功能，一般可以理解为简化版的puppet和加强版的func。SaltStack基于Python语言实现，结合轻量级消息队列（ZeroMQ）与Python第三方模块（Pyzmq、PyCrypto、Pyjinjia2、python-msgpack和PyYAML等）构建。通过部署SaltStack环境，我们可以在成千上万台服务器上做到批量执行命令，根据不同业务特性进行配置集中化管理、分发文件、采集服务器数据、操作系统基础及软件包管理等，SaltStack是运维人员提高工作效率、规范业务配置与操作的利器。 1.2 特点简单兼顾大规模部署与更小的系统的同时提供多功能性是很困难的，Salt是非常简单配置和维护，不管项目的大小。Salt可以胜任管理任意的数量的服务器，不管是本地网络，还是跨数据中心。架构采用C/S模式，在一个后台程序中集成必要功能。默认不需要复杂的配置就可以工作，同时可以定制用于特殊的需求。并行执行 Salt的核心功能：通过并行方式让远端节点执行命令采用安全的加密/解析协议最小化使用网络和负载提供简单的程序接口 Salt引入了更细粒度的控制，允许不通过目标名字，二是通过系统属性分类构建在成熟技术之上 Salt采用了很多技术和技巧。网络层采用优秀的ZeroMQ库，所以守护进程里面包含AMQ代理。Salt采用公钥和主控通讯，同时使用更快的AES加密通信，验证和加密都已经集成在Salt里面。Salt使用msgpack通讯，所以更快速和更轻量网络交换。 Python 客户端接口为了实现简单的扩展，Salt执行例程可以写成简单的Python模块。客户端程序收集的数据可以发送回主控端，可以是其他任意程序。可以通过Python API调用Salt程序，或者命令行，因此，Salt可以用来执行一次性命令，或者大型应用程序中的一部分模块。快速，灵活，可扩展结果是一个系统可以高速在一台或者一组服务器执行命令。Salt速度很快，配置简单，扩展性好，提供了一个远程执行架构，可以管理多样化需求的任何数量的服务器。整合了世界上最好的远程执行方法，增强处理能力，扩展使用范围，使得可以适用任何多样化复杂的网络。开源 Salt基于Apache 2.0 licence开发，可以用于开源或者自有项目。请反馈你的扩展给项目组，以便更多人受益，共同促进Salt发展。请在你的系统部署系统，让运维更便捷。 1.3 架构 saltstack是基于C/S服务模式，在该架构中，服务器端叫做Master，客户端叫做Minion。传统的C/S模式我们这样理解，客户端发送请求给服务器端，服务器端接受到来自客户端的请求并处理完成后再返回客户端。在saltstack架构中，不仅有传统的C/S服务模式，而且有消息队列中的发布与订阅（pub/sub）服务模式。目前我们一般用其C/S架构做批量管理。 1)Master：控制中心,salt命令运行和资源状态管理 2)Minion:需要管理的客户端机器,会主动去连接Mater端,并从Master端得到资源状态 3)信息,同步资源管理信息 4)States：配置管理的指令集 5)Modules：在命令行中和配置文件中使用的指令模块,可以在命令行中运行 6)Grains：minion端的变量,静态的 7)Pillar：minion端的变量,动态的比较私密的变量,可以通过配置文件实现同步minions定义 8)highstate：为minion端下发永久添加状态,从sls配置文件读取.即同步状态配置 9)salt_schedule：会自动保持客户端配置 1.4 连接方式 Master与Minion认证(1)、minion在第一次启动时，会在/etc/salt/pki/minion/（该路径在/etc/salt/minion里面设置）下自动生成minion.pem（private key）和 minion.pub（public key），然后将 minion.pub发送给master。 (2)、master在接收到minion的public key后，通过salt-key命令accept minion public key，这样在master的/etc/salt/pki/master/minions下的将会存放以minion id命名的 public key，然后master就能对minion发送指令了。 SaltStack master启动后默认监听4505和4506两个端口。4505（publish_port）为saltstack的消息发布系统，4506（ret_port）为saltstack客户端与服务端通信的端口。如果使用lsof 查看4505端口，会发现所有的minion在4505端口持续保持在ESTABLISHED状态二、安装部署主机名 IP地址系统 saltstack-server 172.20.4.50 CentOS release 6.9 (Final) saltstack-1 172.20.4.51 CentOS release 6.9 (Final) saltstack-2 172.20.4.52 CentOS release 6.9 (Final) 2.1 初始化环境： yuminstallntpdate-y&&ntpdatetime1.aliyun.com#同步时间 serviceiptablesstop#关闭iptables sed-i"s/SELINUX=enforcing/SELINUX=disabled/"/etc/selinux/config#关闭selinux setenforce0 cat>saltstack.repo<<EOF [saltstack-repo] name=SaltStackrepoforRHEL/CentOS$releasever baseurl=https://repo.saltstack.com/yum/redhat/$releasever/$basearch/latest enabled=1 gpgcheck=1 gpgkey=https://repo.saltstack.com/yum/redhat/$releasever/$basearch/latest/SALTSTACK-GPG-KEY.pub EOF rpm--importhttps://repo.saltstack.com/yum/redhat/6/x86_64/latest/SALTSTACK-GPG-KEY.pub yumcleanall&&yummakecache#更新yum源 2.2 master 端安装 yum-yinstallsalt-master mkdir/etc/salt/states 编辑/etc/salt/states interface:0.0.0.0 state_top:top.sls file_roots: base: -/etc/salt/states 启动服务，并设置开机自启 /etc/init.d/salt-masterstart chkconfigsalt-masteron 2.3 monitor端安装配置yum源和master方法一致 yum-yinstallsalt-minion 修改/etc/salt/minion文件（slatstack-1/2 都更改成对应的id，master指向master的ip地址）启动客户端，并设置开机自启动 2.4 证书管理 #执行salt-key-L查看秘钥验证 #执行Salt-key-a加ID添加认证秘钥三、验证测试四、常见模块 (1)、cp模块（实现远程文件、目录的复制，以及下载URL文件等操作）将主服务器file_roots指定位置下的目录复制到被控主机 salt"*"cp.get_dirsalt://testdir/tmp/test 将主服务器file_roots指定位置下的文件复制到被控主机 salt"*"cp.get_filesalt://testdir/testfile/tmp/testfile 下载指定URL内容到被控主机指定位置 salt"*"cp.get_urlhttp://mirrors.163.com/.help/CentOS6-Base-163.repo/etc/yum.repos.d/CentOS6-Base-163.repo (2)、cmd模块（实现远程的命令行调用执行） salt"*"cmd.run'netstat-lntup' (3)、cron模块（实现被控主机的crontab操作）为指定的被控主机、root用户添加crontab信息 salt"*"cron.set_jobroot'*/5''*''*''*''*''/usr/sbin/ntpdatetime1.aliyun.com' 删除指定的被控主机、root用户的crontab信息 salt"*"cron.rm_jobroot'/usr/sbin/ntpdatetime1.aliyun.com' 查看定时任务 salt'*'cron.raw_cronroot (4)、dnsutil模块（实现被控主机通用DNS操作）为被控主机添加指定的hosts主机配置项 salt'*'dnsutil.hosts_append/etc/hosts127.0.0.1test.saltstack.com (5)、file模块（被控主机文件常见操作，包括文件读写、权限、查找、校验等） salt'*'file.get_sum/etc/resolv.confmd5 salt'*'file.stats/etc/resolv.conf (6)、network模块（返回被控主机网络信息） salt'*'network.ip_addrs salt'*'network.interfaces (7)、pkg包管理模块（被控主机程序包管理，如yum、apt-get等） salt'*'pkg.installsysstat salt'*'pkg.file_listsysstat (8)、service 服务模块（被控主机程序包服务管理） salt'*'service.enablecrond salt'*'service.disablecrond salt'*'service.statuscrond salt'*'service.stopcrond salt'*'service.startcrond salt'*'service.restartcrond salt'*'service.reloadcrond

2017-10-22

Jenkins实现Android自动化打包

创建钉钉群聊机器人选择自定义机器人点击添加输入机器人的名字复制 Hook 地址第二步：Jenkins 后台添加钉钉插件第三步：添加构建后操作第四步：添加钉钉插件参数总结到这里关于 Jenkins 的自动化打包的主要内容已经介绍完了

2017-08-14

Android自动化测试探索

为了保证效率以及解决成本，我们就需要考虑将这些过程采用自动化测试来完成。 自动化测试介绍何为自动化测试？自动化测试就是通过计算机将我们人工操作的动作自动完成，比如自动点击，自动填入文本等等。

2017-08-03

Android渠道包自动化验证

随着产品发布越来越快，渠道包越来越多，渠道包自动化验证重要性逐渐凸显出来，需要将大把的人力从中解放出来，且避免人工失误造成的验证不完全；最近客户端产品尝试使用渠道包 自动化测试的方法，这里说说我们目前的做法

2017-07-03

Appium IOS 自动化测试初探

手机平台的自动化测试工具很多，之前研究过了安卓和苹果的原生自动化测试框架，经一些同事介绍，貌似Appium是个不错的工具。

2017-07-02

iOS及Android自动化实践

目前Appium已经到了1.1版本，这款自动化工具还是不错的，跨平台，跨语言支持都比较好，稳定性也在逐步提升。最新内容请见作者的GitHub页：http://qaseven.github.io/

2017-07-02

腾讯Android自动化测试实战

腾讯Android自动化测试实战丁如敏盛娟等著图书在版编目（CIP）数据腾讯Android自动化测试实战 / 丁如敏等著.

2017-05-01

Android必会的自动化测试

device, serialno="emulator-5554") # content = hViewer.findViewById('id/btn_login') 连接真机，使用monkeyrunner自动化测试工具运行脚本

2016-11-21

Devstack 多节点自动化部署

minxihou的翻译文章，转载请注明出处Bob Hou: http://blog.csdn.net/minxihou JmilkFan：minxihou的技术博文方向是算法&Openstack自动化

2016-07-16

RPA 流程自动化落地指南：财务发票、采购合同、系统孤岛优先自动化清单

今天不聊虚的，我们深入公司各业务部门，告诉你RPA流程自动化软件，最应该上哪些高价值任务。看完直接能用。

2026-08-18

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。