通过Docker搭建开源版IVRE-低调大师

通过Docker搭建开源版IVRE

2017-08-01 512

1 引言

1.1 编写目的

本文主要介绍开源IVRE项目的安装、部署和配置。目的是提供给IVRE项目学习、研究人员，利于他们更快的搭建和部署IVRE。

1.2 背景

IVRE(又名DRUNK)是一款网络侦查框架，包括两个基于p0f和Bro的被动侦查模块和一个基于Nmap&Zmap的主动侦查模块，其功能类似于国内知道创宇公司推出的一款网络空间搜索引擎ZoomEye(钟馗之眼)。

1.3 定义

Docker：一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口(类似 iPhone 的 app)。几乎没有性能开销,可以很容易地在机器和数据中心中运行。最重要的是,他们不依赖于任何语言、框架包括系统。

1.4 参考资料

安装Docker：

http://www.cnblogs.com/MicroTeam/p/see-docker-run-in-debian-with-aliyun-ecs.html

IVRE官方网站：

https://ivre.rocks/

GitHub

https://github.com/cea-sec/ivre

2 系统配置

2.1 运行环境

Ubuntu Server 14.4 64位

Docker

IVRE

2.2 系统依赖

Python 2, version 2.6 minimum

the Crypto module

the pymongo module, version 2.7.2 minimum.

Nmap & ZMap

Bro & p0f

MongoDB, version 2.6 minimum

web服务器(在Apache、Nginx下测试通过)

web浏览器(在FireFox和Chromum下测试通过)

Maxmind GeoIP免费数据库

Tesseract(可选，可对Nmap扫描结果增加快照)

Docker & Vagrant (version 1.6 minimum，可选)

2.3 前端组件

AngularJS

Twitter Bootstrap

jQuery

D3.js

flag-icon-css

Passive recon

2.4 系统安装部署图

2.5 系统硬件配置

测试机配置：

CPU：Intel至强E5400系列CPU*2

内存：4G 1333MHz

硬盘：100GB

2.6 系统应用服务器软件安装与配置

Linux服务器安装步骤(略)

注意：内核版本如果低于 3.8，就要升级内核，参考方法如下

http://docs.docker.com/installation/debian/

查看linux内核命令：

uname –a

3 程序部署

3.1 安装Docker

快速安装Docker方法有2种：

第一种方法：(推荐使用)

sudo wget -qO- https://get.docker.com/ | sh

第二种方法：

sudo curl -sSL https://get.docker.com/ | sh

3.1.1 验证Docker安装是否成功(可忽略)

运行 hello world：

sudo docker run hello-world

如果前面步骤都没有问题的话，能看到 hello-world 启动了。

Hello from Docker.
This message shows that your installation appears to be working correctly.

3.1.2 把非管理员用户添加到docker组

sudo useradd -G docker 登陆系统用户名

3.2 安装Vagrant

安装IVRE方法有2种：

第一种方法：(推荐使用)

wget https://releases.hashicorp.com/vagrant/1.7.4/vagrant_1.7.4_x86_64.deb
sudo dpkg -i vagrant_1.7.4_x86_64.deb

第二种方法：

sudo apt-get install -y vagrant

3.3 安装IVRE

$ mkdir -m 1777 var_lib_mongodb var_log_mongodb ivre-share
$ wget -q https://ivre.rocks/Vagrantfile
$ sudo vagrant up --no-parallel
$ docker attach ivreclient
root@e809cb41cb9a:/#

此时IVRE已经安装成功。通过Docker装好的IVRE是没有数据的。

界面如下：

4 IVRE运行和停止

查看docker有那些容器，命令：

docker ps –a

开启IVRE分三步，

第一步要开启database server，命令：

sudo docker start ivredb

第二步开启web，命令：

sudo docker start ivreweb

第三步开启客户端，命令：

sudo docker start ivreclient

然后通过attach命令进入ivreclient

sudo docker attach ivreclient

5 IVRE扫描并导入数据

通过attach命令进入ivreclient

sudo docker attach ivreclient

5.1运行如下初始化命令：(前4步可忽略)

root@881486651a32:/$ ipinfo --init
This will remove any passive information in your database. Process ? [y/N] y
root@881486651a32:/$ ipdata --init
This will remove any country/AS information in your database. Process ? [y/N] y
root@881486651a32:/$ scancli --init
This will remove any scan result in your database. Process ? [y/N] y
root@881486651a32:/$ runscans-agentdb --init
This will remove any agent and/or scan in your database and files. Process ? [y/N] y
root@881486651a32:/$ ipdata --download --import-all --dont-feed-ipdata-cols
[...]
The latest command will take a long time. Then we can integrate the
Nmap results to the database:
root@881486651a32:/$ nmap2db -r -s MySource -c MyCategory /ivre-share
You can then exit the shell (`C-d`), this will stop the
container.

或者忽略5.1步骤执行如下命令：

root@881486651a32:/$ ipdata --download

5.1 扫描任务

执行命令：

root@881486651a32:/$ runscans --routable --limit 1000 --output=XMLFork

上面这条命令将对互联网上1000个随机主机进行标准扫描，开启13个nmap进程。

5.2 扫描结果入库

root@881486651a32:/$ nmap2db -c ROUTABLE-CAMPAIGN-001 -s MySource -r scans/ROUTABLE/up

5.3 界面展示

6 安装出错解决

安装IVRE成功后，通过attach命令进入ivreclient后。可能出现缺少ipdata、runscans和nmap2db等命令现象。

解决方法如下：

通过attach命令进入ivreclient

sudo docker attach ivreclient

安装curl

root@881486651a32:/$ apt-get install crul

安装unzip

root@881486651a32:/$ apt-get install unzip

利用curl命令将IVRE项目里的bin目录下所有文件下载到Docker容器里：

root@881486651a32:/$ tmp
root@881486651a32:/$ curl –O http://hackliu.com/bin.zip
root@881486651a32:/$ cd /

将bin.zip解压到/usr/bin目录

root@881486651a32:/$ unzip /tmp/bin.zip –d /usr/

为下载的文件添加执行权限：

root@881486651a32:/$ chmod + x analyzercli
root@881486651a32:/$ chmod + x getmoduli
root@881486651a32:/$ chmod + x httpd-ivre
root@881486651a32:/$ chmod + x ipdata
root@881486651a32:/$ chmod + x ipinfo
root@881486651a32:/$ chmod + x ipinfohost
root@881486651a32:/$ chmod + x nmap2db
root@881486651a32:/$ chmod + x p0f2db
root@881486651a32:/$ chmod + x passiverecon2db
root@881486651a32:/$ chmod + x passivereconworker
root@881486651a32:/$ chmod + x plotdb
root@881486651a32:/$ chmod + x runscans
root@881486651a32:/$ chmod + x runscans-agent
root@881486651a32:/$ chmod + x runscans-agentdb
root@881486651a32:/$ chmod + x scancli
root@881486651a32:/$ chmod + x scanstatus

7 其他

7.1 安装所需软件包

链接: http://pan.baidu.com/s/1kUsuOGv 密码: wvct

本文作者：HackLiu

来源：51CTO

微信关注我们

原文链接：https://yq.aliyun.com/articles/183930

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

使用Docker在本地搭建hadoop，spark集群

本环境使用的单个宿主主机，而不是跨主机集群，本spark集群环境存在的意义可能在于便于本地开发测试使用，非常轻量级和便捷。这个部署过程，最好在之前有过一定的hadoop，spark集群部署经验的基础，本文重点在于docker相关的操作，至于hadoop和spark集群的部署，极力推荐这两个网页： Hadoop集群：http://blog.csdn.net/stark_sum ... 24279。 Spark集群：http://blog.csdn.net/stark_sum ... 58081 主机系统：ubuntu14.04，64位，内存4G，主机名docker。(实际上是在虚拟机上安装的) 软件版本：hadoop-2.6.0，jdk1.7.0_79，scala-2.10.5，spark-1.2.0-bin-hadoop2.4，docker版本：1.9.1，镜像：ubuntu14.04。搭建环境前调研结果描述：目前网上在docker上部署spark的介绍比较简单和没有相关启动使用的操作，部署大致分为两类情况： 1. 直接在docker仓库pull下来。这个方法我尝试了一下，不建议使...

2017-08-02

522

这些服务称为SaaS或者软件即服务。他们可以使你通过浏览器登录自己的账号来访问数据。这样就不需要在自己电脑上安装这些软件。本次总结，笔者分享了可用于云的9个免费工具。这些工具旨在使生活变得更容易。 1. arXshare arXshare是一个安全的、端到端加密的文件存储软件，可以轻松地实现本地托管和安全协作。免费供个人使用! 2. ZeroPC 连接个人云，在一个虚拟平台安全地访问你所有的来自各种服务的文件、照片、音乐、和视频。并可以从一个服务到另一个服务拖拽、删除任何内容。 3. Primadesk 通过将你日常使用的各种应用结合来简化生活，Primadesk的搜索框帮你准确定位你正在寻找什么，而不是在服务之间拖拽鼠标来下载和上传。 4. Mover 当需要时，要得到你想要的云数据，使用Mover。 5. Otixo 当需要时，要得到你想要的云数据，使用Mover。 6. CarotDAV CarotDAV是针对Windows操作系统的简单WebDAV /FTP /OneDrive /DropBox/GoogleDrive/Box/ SugarSync/Copy/AmazonClo...

2017-08-02

686

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。