Linux服务器无权限安装caffe教程-低调大师

Linux服务器无权限安装caffe教程

2018-05-17 932

前言：服务器上没有root权限，不能使用sudo和apt-get无脑安装caffe需要的各种依赖，因此需要手动安装这些依赖库。核心就是将原来apt-get安装在/usr/include，/usr/lib等位置的库，手动安装在我们自己的路径下，即自定义路径安装依赖。
这些依赖由于版本，交叉依赖等问题，不小心的话会出现各种错误，比较经典的就是opencv和cuda9.0这种错误（下面有处理方法）。因此把我自己的安装流程记录下来，防止重复踩坑。
参考：https://github.com/yosinski/caffe/blob/jason_public/doc/linux-no-root-install-log.md
0.根目录下,终端依次执行：

mkdir temp
mkdir local

用途:以后所有步骤下载的源码都放在temp文件夹中，编译得到的库、头文件和可执行程序都放在local文件夹中。
PS:下面路径中的所有your_root_path都要替换为你自己的根目录路径。
1. 安装必备工具m4, autoconf, automake, libtool
安装m4

 cd temp
 wget http://ftp.gnu.org/gnu/m4/m4-1.4.18.tar.gz
 tar zxvf m4-1.4.18.tar.gz
 cd m4-1.4.18
 ./configure --prefix=/your_root_path/local
 make
 make install

安装autoconf

 cd temp
 wget http://ftp.gnu.org/gnu/autoconf/autoconf-2.69.tar.gz
 tar zxvf autoconf-2.69.tar.gz
 cd autoconf-2.69
 ./configure --prefix=/your_root_path/local
 make
 make install

安装automake

 cd temp
 wget http://ftp.gnu.org/gnu/automake/automake-1.16.1.tar.gz
 tar zxvf automake-1.16.1.tar.gz
 cd automake-1.16.1
 ./configure --prefix=/your_root_path/local
 make
 make install

安装libtool

 cd temp
 wget http://mirror.csclub.uwaterloo.ca/gnu/libtool/libtool-2.4.6.tar.gz
 cd libtool-2.4.6
 tar zxvf libtool-2.4.6.tar.gz
 ./configure --prefix=/your_root_path/local
 make
 make install

将它们的可执行程序路径写入环境变量中：

vim ~/.bashrc

点击i进入输入模式
将下列代码复制粘贴到文件最后:

export PATH="/your_root_path/local/bin:$PATH"
export LIBRARY_PATH="/your_root_path/local/lib:$LIBRARY_PATH"
export LD_LIBRARY_PATH="/your_root_path/local/lib:$LD_LIBRARY_PATH"

点ESC退出输入模式，输入:wq进行保存并退出。
命令行输入source ~/.bashrc激活环境变量。
可分别使用下面的命令进行版本查询并验证是否安装成功：

m4 --version
autoconf --version
automake --version
libtool --version

PS:本部分参考https://blog.csdn.net/qq_30549833/article/details/72955881

2.安装boost库
源码下载地址：https://www.boost.org/users/history/version_1_67_0.html
或使用wget下载。

cd temp
wget https://dl.bintray.com/boostorg/release/1.67.0/source/boost_1_67_0.tar.gz
tar zxvf boost_1_67_0.tar.gz
cd boost_1_67_0
./bootstrap.sh --prefix=/your_root_path/local
./b2 -j32
./b2 install

将boost库头文件路径写入环境变量：

vim ~/.bashrc

在最后复制粘贴下面代码：

export BOOST_INCLUDEDIR="/your_root_path/local/include:$BOOST_INCLUDEDIR"

点ESC退出输入模式，输入:wq进行保存并退出。
命令行输入source ~/.bashrc激活环境变量。

3.安装Glog
从github上下载源码：

git clone https://github.com/google/glog.git
cd glog
./autogen.sh
./configure --prefix=/your_root_path/local
 make
 make install

4.安装Gflags
从github上下载源码：

git clone https://github.com/gflags/gflags.git
cd gflags
mkdir build
cd build
CXXFLAGS="-fPIC" cmake -D CMAKE_INSTALL_PREFIX=/your_root_pat/local ..
make
make install

PS:这时如使用cmake编译caffe仍然是找不到gflags和glog的,需要将caffe_root_path/caffe/cmake/Modules/FindGFlags.cmake和FindGlog.cmake中的内容做一下修改，下面直接给出修改后的两个文件内容：

FindGFlags.cmake:

# - Try to find GFLAGS
#
# The following variables are optionally searched for defaults
#  GFLAGS_ROOT_DIR:            Base directory where all GFLAGS components are found
#
# The following are set after configuration is done:
#  GFLAGS_FOUND
#  GFLAGS_INCLUDE_DIRS
#  GFLAGS_LIBRARIES
#  GFLAGS_LIBRARYRARY_DIRS

include(FindPackageHandleStandardArgs)

set(GFLAGS_ROOT_DIR "" CACHE PATH "Folder contains Gflags")

# We are testing only a couple of files in the include directories
if(WIN32)
    # 增加代码
    find_path(GFLAGS_INCLUDE_DIR gflags/gflags.h
        PATHS ${GFLAGS_ROOT_DIR}/src/windows NO_DEFAULT_PATH)
    find_path(GFLAGS_INCLUDE_DIR gflags/gflags.h
        PATHS ${GFLAGS_ROOT_DIR}/src/windows)
else()
    # 增加代码
    find_path(GFLAGS_INCLUDE_DIR gflags/gflags.h
        PATHS ${GFLAGS_ROOT_DIR}/include
                NO_DEFAULT_PATH)
    find_path(GFLAGS_INCLUDE_DIR gflags/gflags.h
        PATHS ${GFLAGS_ROOT_DIR}/include)
endif()

if(MSVC)
    # 增加代码
    find_library(GFLAGS_LIBRARY_RELEASE
        NAMES libgflags
        PATHS ${GFLAGS_ROOT_DIR}
        PATH_SUFFIXES Release NO_DEFAULT_PATH)

    find_library(GFLAGS_LIBRARY_RELEASE
        NAMES libgflags
        PATHS ${GFLAGS_ROOT_DIR}
        PATH_SUFFIXES Release)
    # 增加代码
    find_library(GFLAGS_LIBRARY_DEBUG
        NAMES libgflags-debug
        PATHS ${GFLAGS_ROOT_DIR}
        PATH_SUFFIXES Debug NO_DEFAULT_PATH)

    find_library(GFLAGS_LIBRARY_DEBUG
        NAMES libgflags-debug
        PATHS ${GFLAGS_ROOT_DIR}
        PATH_SUFFIXES Debug)

    set(GFLAGS_LIBRARY optimized ${GFLAGS_LIBRARY_RELEASE} debug ${GFLAGS_LIBRARY_DEBUG})
else()
    find_library(GFLAGS_LIBRARY gflags PATHS ${GFLAGS_ROOT_DIR}/lib NO_DEFAULT_PATH)
    find_library(GFLAGS_LIBRARY gflags PATHS ${GFLAGS_ROOT_DIR}/lib)
endif()
find_package_handle_standard_args(GFlags DEFAULT_MSG GFLAGS_INCLUDE_DIR GFLAGS_LIBRARY)


if(GFLAGS_FOUND)
    set(GFLAGS_INCLUDE_DIRS ${GFLAGS_INCLUDE_DIR})
    set(GFLAGS_LIBRARIES ${GFLAGS_LIBRARY})
    message(STATUS "Found gflags  (include: ${GFLAGS_INCLUDE_DIR}, library: ${GFLAGS_LIBRARY})")
    mark_as_advanced(GFLAGS_LIBRARY_DEBUG GFLAGS_LIBRARY_RELEASE
                     GFLAGS_LIBRARY GFLAGS_INCLUDE_DIR GFLAGS_ROOT_DIR)
endif()

FindGlog.cmake:

# - Try to find Glog
#
# The following variables are optionally searched for defaults
#  GLOG_ROOT_DIR:            Base directory where all GLOG components are found
#
# The following are set after configuration is done:
#  GLOG_FOUND
#  GLOG_INCLUDE_DIRS
#  GLOG_LIBRARIES
#  GLOG_LIBRARYRARY_DIRS

include(FindPackageHandleStandardArgs)

# modified by guyadong
set(GLOG_ROOT_DIR "" CACHE PATH "Folder contains Google glog")
if(WIN32)
    # 增加代码
    find_path(GLOG_INCLUDE_DIR glog/logging.h
        PATHS ${GLOG_ROOT_DIR}/src/windows NO_DEFAULT_PATH)

else()
    # 增加代码
    find_path(GLOG_INCLUDE_DIR glog/logging.h
        PATHS ${GLOG_ROOT_DIR}/include
                NO_DEFAULT_PATH)
endif()

if(MSVC)
    find_library(GLOG_LIBRARY_RELEASE libglog_static
        PATHS ${GLOG_ROOT_DIR}/lib
        PATH_SUFFIXES Release NO_DEFAULT_PATH)

    find_library(GLOG_LIBRARY_DEBUG libglog_static
        PATHS ${GLOG_ROOT_DIR}/lib
        PATH_SUFFIXES Debug NO_DEFAULT_PATH)


    set(GLOG_LIBRARY optimized ${GLOG_LIBRARY_RELEASE} debug ${GLOG_LIBRARY_DEBUG})
else()
    # 增加代码
    find_library(GLOG_LIBRARY glog
        PATHS ${GLOG_ROOT_DIR}/lib
                NO_DEFAULT_PATH)
endif()

find_package_handle_standard_args(Glog DEFAULT_MSG GLOG_INCLUDE_DIR GLOG_LIBRARY)

if(GLOG_FOUND)
  set(GLOG_INCLUDE_DIRS ${GLOG_INCLUDE_DIR})
  set(GLOG_LIBRARIES ${GLOG_LIBRARY})
  message(STATUS "Found glog    (include: ${GLOG_INCLUDE_DIR}, library: ${GLOG_LIBRARY})")
  mark_as_advanced(GLOG_ROOT_DIR GLOG_LIBRARY_RELEASE GLOG_LIBRARY_DEBUG
                                 GLOG_LIBRARY GLOG_INCLUDE_DIR)
endif()

这时再使用cmake编译caffe即可找到glog和gflag。具体原因参见：
https://blog.csdn.net/10km/article/details/72967656

5.安装protobuf
从网址下载：https://github.com/google/protobuf/releases
或wget下载。

cd temp
wget https://github.com/google/protobuf/releases/download/v3.5.1/protobuf-cpp-3.5.1.tar.gz
tar zxvf protobuf-cpp-3.5.1.tar.gz
cd protobuf-3.5.1
./autogen.sh
./configure --prefix=/your_root_path/local
 make
 make install

6.安装hdf5

cd temp
wget https://support.hdfgroup.org/ftp/HDF5/current/src/hdf5-1.10.1.tar
tar xvf hdf5-1.10.1.tar
cd hdf5-1.10.1
./autogen.sh
./configure --prefix=/your_root_path/local
make -j32
make check
make install
make check-install

PS:用cmake编译caffe时，寻找hdf5的路径有bug,至今没弄明白其原因。尽管设定DHDF5_ROOT=/your_root_path/local，仍然会提示找不到hdf5的头文件：

Could NOT find HDF5 (missing: HDF5_INCLUDE_DIRS) (found version "1.10.1")

1

对于这个问题我很绝望，我的解决方法有两个：一个是找公司管理员要权限，apt-get在默认路径装hdf5，这样cmake在调用其FindHDF5.cmake时就能找到。第二个方法是给cmake降级，我删除了我的3.11.1的cmake，使用2.8.12版本的cmake来编译caffe，同样能找到hdf5。不是很懂为什么高等级的cmake不行而低等级的可以。希望有其他解决方法的朋友可以告诉我。

7.安装snappy

cd temp
git clone https://github.com/google/snappy.git
cd snappy
mkdir build
cd build
cmake -D CMAKE_INSTALL_PREFIX=/your_root_path/local ..
make -j32
make install

PS:snappy在cmake时要求cmake版本大于3.4，因此如果之前装hdf5时采用cmake降级的方法，这里没法通过，因此要再升回去。。辛苦辛苦。

8.安装lapack
（要在装opencv之前装，这时opencv必须的库，不然装opencv会报错）
官网手动下载http://www.netlib.org/lapack/
或wget下载

cd temp
wget http://www.netlib.org/lapack/lapack-3.8.0.tar.gz
tar zxvf lapack-3.8.0.tar.gz
cd lapack-3.8.0
mkdir build
cd build
cmake -D CMAKE_INSTALL_PREFIX=/your_root_path/local ..
make -j32
make install

9.安装openblas

cd temp
git clone https://github.com/xianyi/OpenBLAS.git
cd OpenBLAS
make
make install PREFIX=/your_root_path/local

也可以用cmake,和之前的其他库的安装方法相同。

10.安装opencv3.2.0
这里我安装的时3.2.0版本，因为公司都用这个版本。

cd temp
wget https://github.com/opencv/opencv/archive/3.2.0.zip
unzip 3.2.0
cd opencv-3.2.0
mkdir build
cd build
cmake -D CMAKE_BUILD_TYPE=RELEASE -D CMAKE_INSTALL_PREFIX=/your_root_path/local ..
make 
make install

注意，这里在cmake或者make时可能会出现几个问题，会报错，具体如下：
a) 如果你的cuda版本是9.0及以上，是一定会报错的，因为cuda9不再支持2.0架构。
报错如下：

CMake Error: The following variables are used in this project, but they are set to NOTFOUND.
Please set them or make sure they are set and tested correctly in the CMake files:
CUDA_nppi_LIBRARY (ADVANCED)
    linked by target "opencv_cudev" in directory /home/jiajinrang/temp/opencv-3.2.0/modules/cudev
    linked by target "opencv_cudev" in directory /home/jiajinrang/temp/opencv-3.2.0/modules/cudev
    .....

解决方式请看链接：https://blog.csdn.net/u014613745/article/details/78310916

b)在解决了问题a)之后，cmake会可以通过，然而在make -j32是可能还会报如下面的错：

nvcc fatal   : Unsupported gpu architecture 'compute_20'
CMake Error at cuda_compile_generated_gpu_mat.cu.o.cmake:208 (message):

解决方法是使用下面的语句重新cmake：

cmake -D CMAKE_BUILD_TYPE=RELEASE -D CMAKE_INSTALL_PREFIX=/your_root_path/local -D CUDA_GENERATION=Kepler ..

c) 不要盲目为了加速而使用make -j32代替make,多核同时编译opencv有时会报错，我猜是因为库编译的先后顺序不对。因此如果你使用make -j32报库相关的错并且你确定这个库你已经正确安装了的话，那还是老实儿用make慢慢来吧。

4）make或make install时报如下错误：

 fatal error: LAPACKE_H_PATH-NOTFOUND/lapacke.h: No such file or directory #include "LAPACKE_H_PATH-NOTFOUND/lapacke.h"

解决方式：
将opencv的build目录下的opencv_lapack.h文件打开，将其中的第二行#include "LAPACKE_H_PATH-NOTFOUND/lapacke.h"改成#include "lapacke.h"或你之前安装的lapacke.h的路径。一般来说在openblas的头文件路径下也会有lapacke.h，这种情况久可以改成“`#include “openblas/lapacke.h”

11.安装cudnn
cudnn不需要编译，直接下载后解压，然后将对应的文件拷贝到local目录下对应的文件夹里就行了。下载cudnn注意和自己的cuda版本相对应。官网下载需要注册账号。
cudnn下载地址（官网）：https://developer.nvidia.com/rdp/cudnn-archive
之后解压，复制到local对应文件夹即可。

12.安装lmdb

cd temp
git clone https://gitorious.org/mdb/mdb.git
make
make prefix=/your_root_path/local install

PS：这里我没装leveldb，因为lmdb和leveldb功能相似，有一个就行了。所以要将caffe根目录下的CMakeLists.txt中

caffe_option(USE_LEVELDB "Build with levelDB" ON)

改为

caffe_option(USE_LEVELDB "Build with levelDB" OFF)

终于所需要的依赖都装完了，上面所有步骤可以因人而异，不需要的库可以不装，只要在CMakeList.txt把对应的ON改成OFF即可。

下面进入caffe根目录：

mkdir build
cd build
cmake .. -G "Unix Makefiles" -DGLOG_ROOT_DIR=/home/jiajinrang/local -DGFLAGS_ROOT_DIR=/home/jiajinrang/local  -DCMAKE_PREFIX_PATH=/home/jiajinrang/local  -DBLAS=open
make all -j8
make install

ok，希望大家不要再报错了。。

微信关注我们

原文链接：https://www.centoschina.cn/course/install/10677.html

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Linux系统管理命令

<1>查看当前日历：cal cal命令用于查看当前日历，-y显示整年日历： <2>显示或设置时间：date 设置时间格式（需要管理员权限）： date [MMDDhhmm[[CC]YY][.ss]] +format CC为年前两位yy为年的后两位，前两位的mm为月，后两位的mm为分钟，dd为天，hh为小时，ss为秒。如： date 010203042016.55。显示时间格式（date ‘+%y,%m,%d,%H,%M,%S’）： format格式含义 %Y，%y 年 %m 月 %d 日 %H 时 %M 分 %S 秒 <3>查看进程信息：ps 进程是一个具有一定独立功能的程序，它是操作系统动态执行的基本单元。 ps命令可以查看进程的详细状况，常用选项(选项可以不加“-”)如下：选项含义 -a 显示终端上的所有进程，包括其他用户的进程 -u 显示进程的详细状态 -x 显示没有控制终端的进程 -w 显示加宽，以便显示更多的信息 -r 只显示正在运行的进程 <4>动态显示进程：top top命令用来动态显示运行中的进程。top命令能够在...

2018-05-17

924

linux下常用的关机命令有：shutdown、halt、poweroff、init；重启命令有：reboot。下面本文就主要介绍一些常用的关机命令以及各种关机命令之间的区别和具体用法。首先来看一下linux下比较常用的一些关机命令关机命令： 1、halt 立刻关机 2、poweroff 立刻关机 3、shutdown -h now 立刻关机(root用户使用) 4、shutdown -h 10 10分钟后自动关机如果是通过shutdown命令设置关机的话，可以用shutdown -c命令取消重启重启命令： 1、reboot 2、shutdown -r now 立刻重启(root用户使用) 3、shutdown -r 10 过10分钟自动重启(root用户使用)4、shutdown -r 20:35 在时间为20:35时候重启(root用户使用) 如果是通过shutdown命令设置重启的话，可以用shutdown -c命令取消重启下面我们来看看linux的这些具体的关机命令之间的区别和各自的用法 1.shutdown 安全的关机命令对于shutdown命令，它是大家都推荐的...

2018-05-17

919

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。