Ubuntu 离线编译 Julia

woclass · 2019 年1 月 29 日 12:50

理论上 *nix 系统都能这样。没做什么特别的 hack，流程挺顺利的。
就是编译的有点慢，编译 LLVM 可能占了大头。

主要参考

Required Build Tools and External Libraries - julia@github

版本信息

Julia v1.0.3 Tarball with dependencies

Ubuntu 及依赖的版本

Ubuntu

$ lsb_release -a
No LSB modules are available.
Distributor ID:	Ubuntu
Description:	Ubuntu 16.04.5 LTS
Release:	16.04
Codename:	xenial

$ uname -a
Linux virtual-machine 4.15.0-43-generic #46~16.04.1-Ubuntu SMP Fri Dec 7 13:31:08 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux

其他依赖
直接用 sudo apt install 安装的版本就行

$ gcc -v
Using built-in specs.
COLLECT_GCC=gcc
COLLECT_LTO_WRAPPER=/usr/lib/gcc/x86_64-linux-gnu/5/lto-wrapper
Target: x86_64-linux-gnu
Configured with: ../src/configure -v --with-pkgversion='Ubuntu 5.4.0-6ubuntu1~16.04.11' --with-bugurl=file:///usr/share/doc/gcc-5/README.Bugs --enable-languages=c,ada,c++,java,go,d,fortran,objc,obj-c++ --prefix=/usr --program-suffix=-5 --enable-shared --enable-linker-build-id --libexecdir=/usr/lib --without-included-gettext --enable-threads=posix --libdir=/usr/lib --enable-nls --with-sysroot=/ --enable-clocale=gnu --enable-libstdcxx-debug --enable-libstdcxx-time=yes --with-default-libstdcxx-abi=new --enable-gnu-unique-object --disable-vtable-verify --enable-libmpx --enable-plugin --with-system-zlib --disable-browser-plugin --enable-java-awt=gtk --enable-gtk-cairo --with-java-home=/usr/lib/jvm/java-1.5.0-gcj-5-amd64/jre --enable-java-home --with-jvm-root-dir=/usr/lib/jvm/java-1.5.0-gcj-5-amd64 --with-jvm-jar-dir=/usr/lib/jvm-exports/java-1.5.0-gcj-5-amd64 --with-arch-directory=amd64 --with-ecj-jar=/usr/share/java/eclipse-ecj.jar --enable-objc-gc --enable-multiarch --disable-werror --with-arch-32=i686 --with-abi=m64 --with-multilib-list=m32,m64,mx32 --enable-multilib --with-tune=generic --enable-checking=release --build=x86_64-linux-gnu --host=x86_64-linux-gnu --target=x86_64-linux-gnu
Thread model: posix
gcc version 5.4.0 20160609 (Ubuntu 5.4.0-6ubuntu1~16.04.11) 

$ python -V
Python 2.7.12

$ gfortran -v
Using built-in specs.
COLLECT_GCC=gfortran
COLLECT_LTO_WRAPPER=/usr/lib/gcc/x86_64-linux-gnu/5/lto-wrapper
Target: x86_64-linux-gnu
Configured with: ../src/configure -v --with-pkgversion='Ubuntu 5.4.0-6ubuntu1~16.04.11' --with-bugurl=file:///usr/share/doc/gcc-5/README.Bugs --enable-languages=c,ada,c++,java,go,d,fortran,objc,obj-c++ --prefix=/usr --program-suffix=-5 --enable-shared --enable-linker-build-id --libexecdir=/usr/lib --without-included-gettext --enable-threads=posix --libdir=/usr/lib --enable-nls --with-sysroot=/ --enable-clocale=gnu --enable-libstdcxx-debug --enable-libstdcxx-time=yes --with-default-libstdcxx-abi=new --enable-gnu-unique-object --disable-vtable-verify --enable-libmpx --enable-plugin --with-system-zlib --disable-browser-plugin --enable-java-awt=gtk --enable-gtk-cairo --with-java-home=/usr/lib/jvm/java-1.5.0-gcj-5-amd64/jre --enable-java-home --with-jvm-root-dir=/usr/lib/jvm/java-1.5.0-gcj-5-amd64 --with-jvm-jar-dir=/usr/lib/jvm-exports/java-1.5.0-gcj-5-amd64 --with-arch-directory=amd64 --with-ecj-jar=/usr/share/java/eclipse-ecj.jar --enable-objc-gc --enable-multiarch --disable-werror --with-arch-32=i686 --with-abi=m64 --with-multilib-list=m32,m64,mx32 --enable-multilib --with-tune=generic --enable-checking=release --build=x86_64-linux-gnu --host=x86_64-linux-gnu --target=x86_64-linux-gnu
Thread model: posix
gcc version 5.4.0 20160609 (Ubuntu 5.4.0-6ubuntu1~16.04.11) 

$ perl -v
This is perl 5, version 22, subversion 1 (v5.22.1) built for x86_64-linux-gnu-thread-multi
(with 73 registered patches, see perl -V for more detail)

$ wget --version
GNU Wget 1.17.1 在 linux-gnu 上编译。

$ m4 --version
m4 (GNU M4) 1.4.17

$ awk -W version
mawk 1.3.3 Nov 1996, Copyright (C) Michael D. Brennan

$ patch -v
GNU patch 2.7.5

$ cmake --version
cmake version 3.5.1

$ pkg-config --version
0.29.1

编译安装步骤

TL；DR / 浓缩版

  # 1. Install Build Tools
  # You may need to download `.deb` pkg and install
# sudo apt-get install build-essential libatomic1 python gfortran perl wget m4 cmake pkg-config  

  # 2. Download
wget https://github.com/JuliaLang/julia/releases/download/v1.0.3/julia-1.0.3-full.tar.gz
# wget https://mirrors.ustc.edu.cn/julia/releases/v1.0/julia-1.0.3-full.tar.gz  # USTC mirrors

  # 3. configure & complie
  ## unzip
tar -xzvf julia-1.0.3-full.tar.gz
cd julia-1.0.3/
  ## configure
echo 'NO_GIT:=1' > Make.user
echo 'OPENBLAS_TARGET_ARCH:=HASWELL' >> Make.user
  ## complie
make -C deps -j 4
make -j 4
# export PATH="$(pwd)/julia:$PATH"  # Add julia to $PATH

  # 4. test
./julia -e 'using InteractiveUtils; versioninfo()'
./julia  # Enjoy julia REPL

1. 安装普通的依赖 (无 patch)

下载 .deb 离线安装，下源码慢慢编译也行。没什么特别的要求。

附

找 .deb 的网站：分享|5 个找到 deb 软件包的好地方
具体的版本要求见 ref-1

这里我偷懒了。直接~~联网、sudo apt install、断网一把梭~~
sudo apt-get install build-essential libatomic1 python gfortran perl wget m4 cmake pkg-config

2. 下载带依赖的安装包(包含 patch)

离线安装必须下载 Tarball with dependencies。
下载其他的包，安装时需要联网现下依赖。

github release: v1.0.3 Tarball with dependencies
镜像源：USTC

3. 配置及编译

解压

tar -xzvf julia-1.0.3-full.tar.gz
cd julia-1.0.3/

Note: 以下命令均在 julia-1.0.3/ 文件夹根目录下进行

添加用户配置
在源代码的根目录下新建文件 Make.user

内容

NO_GIT:=1
OPENBLAS_TARGET_ARCH:=HASWELL

这里还可以加: prefix=/usr/local 用于设置安装路径，默认是放在源文件夹下。
不建议加入: USE_SYSTEM_**** 也就是不要用系统自带的包。
Julia 的很多 external libraries 都是打过 patch 的。
—— Platform-Specific Build Notes

编译依赖
make -C deps -j 4

这里如果报错，输出过多可以调整成 make -C deps -j 1
然后仔细看看报错，有可能是少第一步中的依赖。

编译 julia
make -j 4

4. 编译完成

编译成功，根目录下应该有一个 julia 的符号链接 julia -> usr/bin/julia*

测试一下。执行：./julia -e 'using InteractiveUtils; versioninfo()'
有类似以下输出就应该是编译成功了。

$ ./julia -e 'using InteractiveUtils; versioninfo()'
Julia Version 1.0.3
Commit 099e826241* (2018-12-18 01:34 UTC)
Platform Info:
  OS: Linux (x86_64-linux-gnu)
  CPU: Intel(R) Core(TM) i7-5600U CPU @ 2.60GHz
  WORD_SIZE: 64
  LIBM: libopenlibm
  LLVM: libLLVM-6.0.0 (ORCJIT, broadwell)

另外可以把 julia 添加到环境变量中 export PATH="$(pwd)/julia:$PATH"

编译完整个 julia-1.0.3 文件夹共 2.7G。
其中依赖 julia-1.0.3/deps 1.8G，编译生成的 julia-1.0.3/usr 680~M。