JavaCPP快速入門(官方demo增強版)

  • 2021 年 10 月 22 日
  • 筆記

歡迎訪問我的GitHub

//github.com/zq2599/blog_demos

內容:所有原創文章分類匯總及配套源碼,涉及Java、Docker、Kubernetes、DevOPS等;

關於JavaCPP

  • JavaCPP 使得Java 應用可以在高效的訪問本地C++方法,JavaCPP底層使用了JNI技術,可以廣泛的用在Java SE應用中(也包括安卓),以下兩個特性是JavaCPP的關鍵,稍後咱們會用到:
  1. 提供一些註解,將Java代碼映射為C++代碼
  2. 提供一個jar,用java -jar命令可以將C++代碼轉為java應用可以訪問的動態鏈接庫文件;
  • 目前JavaCPP團隊已經用JavaCPP為多個著名C++項目生成了完整的接口,這意味着咱們的java應用可以很方便的使用這些C++庫,這裡截取部分項目如下圖,更詳細的列表請訪問://github.com/bytedeco/javacpp-presets

在這裡插入圖片描述

本篇概覽

  • 今天咱們先寫C++函數,再寫Java類,該Java類用JavaCPP調用C++函數;

  • 提前小結JavaCPP開發的基本步驟如下圖,稍後就按這些步驟去做:

在這裡插入圖片描述

與官方demo的差異

  • 聰明的您應該會想到:入門demo,JavaCPP官方也有啊(//github.com/bytedeco/javacpp),難道欣宸還能比官方的好?

  • 官方的入門demo一定是最好的,這個毋庸置疑,我這裡與官方的不同之處,是添加了下面這些官方沒提到的內容,更符合自己的開發習慣(官方沒有這些的原因,我覺得應該是更關注JavaCPP本身,而不是一些其他的細枝末節):

  1. 如下圖,官方的C++代碼只有一個NativeLibrary.h文件,函數功能也在這個文件中,最終生成了一個jni的so文件,而實際上,應該是頭文件與功能代碼分離,因此本文中的頭文件和C++函數的源碼是分開的,先生成函數功能的so,再在java中生成jni的so,一共會有兩個so文件,至於這兩個so如何配置和訪問,也是本文的重點之一:

在這裡插入圖片描述

  1. 官方demo的java源碼如下圖,是沒有package信息的,而實際java工程中都會有package,由此帶來的路徑問題,例如頭文件放哪裡?編譯和生成so文件時的命令行怎麼處理package信息,等等官方並沒有提到,而在本篇咱們的java類是有package的,與之相關的路徑問題也會解決:

在這裡插入圖片描述

  1. 官方demo在運行時使用的依賴庫是org.bytedeco:javacpp:1.5.5,運行時會輸出以下警告信息,本篇會解決這個告警問題:
Warning: Could not load Loader: java.lang.UnsatisfiedLinkError: no jnijavacpp in java.library.path

環境信息

  • 這裡給出我的環境信息,您可以作為參考:
  1. 操作系統:Ubuntu 16.04.5 LTS (server版,64位)
  2. g++:(Ubuntu 5.4.0-6ubuntu1~16.04.10) 5.4.0 20160609
  3. JDK:1.8.0_291
  4. JavaCPP:1.5.5
  5. 操作賬號:root

javacpp-1.5.5.jar文件下載

  • 本篇不會用到maven或者gradle,因此所需的jar文件需要自行準備,您可以從官網、maven中央倉庫等地方下載,也可以從下面兩個地方任選一個下載:
  1. CSDN(不用積分)://download.csdn.net/download/boling_cavalry/20189395
  2. GitHub://raw.githubusercontent.com/zq2599/blog_download_files/master/files/javacpp-1.5.5.jar

完整源碼和相關文件下載

  • 本次實戰的所有源碼以及相關文件,我這裡都按照實戰的目錄位置打包上傳到服務器,如果有需要,您可以從下面兩個地方任選一個下載,用以參考,
  1. CSDN(不用積分)://download.csdn.net/download/boling_cavalry/20189692

  2. GitHub://raw.githubusercontent.com/zq2599/blog_download_files/master/files/javacpp-project.tar

  • 接下進入實戰環節

C++開發

  • 新建一個文件夾,我這邊是/root/javacpp/cpp,C++開發都在此文件夾下進行
  • C++部分總共要寫三個文件,分別是:
  1. C++函數的源碼:NativeLibrary.cpp
  2. 頭文件:NativeLibrary.h
  3. 測試函數功能的文件:test.cpp(該文件僅用於測試C++函數是否正常可用,與JavcCPP無關)
  • 接下來分別編寫,首先是NativeLibrary.cpp,如下,僅有加法的方法:
#include "NativeLibrary.h" 

namespace NativeLibrary { 

    int MyFunc::add(int a, int b) {
        return a + b;
    }
}
  • 頭文件:
#include<iostream>

namespace NativeLibrary {

	class MyFunc{
	public:
		MyFunc(){};
		~MyFunc(){};
		int add(int a, int b);
	};
}
  • 測試文件test.cpp,可見是驗證MyFunc類的方法是否正常:
#include<iostream>
#include"NativeLibrary.h"

using namespace NativeLibrary;

int main(){
	MyFunc myFunc;
	int value = myFunc.add(1, 2);
	std::cout << "add value " << value << std::endl;
	return 0;
}
  • 執行以下命令,編譯NativeLibrary.cpp,得到so文件libMyFunc.so
g++ -std=c++11 -fPIC -shared NativeLibrary.cpp -o libMyFunc.so
  • 執行以下命令,編譯和鏈接test.cpp,得到可執行文件test
g++ test.cpp -o test ./libMyFunc.so
  • 運行可執行文件試試,命令是./test
root@docker:~/javacpp/cpp# ./test
add value 3
  • libMyFunc.so文件複製到/usr/lib/目錄下
  • test的執行結果符合預期,證明so文件創建成功,記住下面兩個關鍵信息,稍後會用到:
  1. 頭文件是NativeLibrary.h
  2. so文件是libMyFunc.so
  • 接下來是java部分

Java開發

  • 簡單起見,咱們手寫java文件,不創建maven工程
  • 新建一個文件夾,我這邊是/root/javacpp/java,java開發都在此文件夾下進行
  • 將文件javacpp-1.5.5.jar複製到/root/javacpp/java/目錄下
  • 出於個人習慣,喜歡將java類放在packgage下,因此建好package目錄,我這裡是com/bolingcavalry/javacppdemo,在我這裡的絕對路徑就是/root/javacpp/java/com/bolingcavalry/javacppdemo
  • 將文件NativeLibrary.h複製到com/bolingcavalry/javacppdemo目錄下
  • com/bolingcavalry/javacppdemo目錄下新建Test.java,有幾處要注意的地方稍後會提到:
package com.bolingcavalry.javacppdemo;

import org.bytedeco.javacpp.*;
import org.bytedeco.javacpp.annotation.*;

@Platform(include="NativeLibrary.h",link="MyFunc")
@Namespace("NativeLibrary")
public class Test {
    public static class MyFunc extends Pointer {
        static { Loader.load(); }
        public MyFunc() { allocate(); }
        private native void allocate();

        // to call add functions
        public native int add(int a, int b);
    }

    public static void main(String[] args) {
        MyFunc myFunc = new MyFunc();
        System.out.println(myFunc .add(111,222));
    }
}
  • Test.java有以下幾處需要注意:
  1. Namespace註解的值是命名空間,要與前面C++代碼保持一致
  2. 靜態類名為MyFunc,這個要和C++中聲明的類保持一致
  3. Platform註解的include屬性是NativeLibrary.h,作用是指定頭文件
  4. Platform註解的link屬性的值是MyFunc,和so文件名libMyFunc.so相比,少了前面的lib前綴,以及so後綴,這是容易出錯的地方,要千萬小心,需要按照這個規則來設置link屬性的值
  5. 對so中的add方法,通過native關鍵字做聲明,然後就可以使用了
  • 現在開發工作已經完成,接下來開始編譯和運行

編譯和運行

  • 首先是編譯java文件,進入目錄/root/javacpp/java,執行以下命令,即可生成class文件:
javac -cp javacpp-1.5.5.jar com/bolingcavalry/javacppdemo/Test.java
  • 接下來要用javacpp-1.5.5.jar完成c++文件的創建和編譯,生成linux下的so文件:
java \
-jar javacpp-1.5.5.jar \
com/bolingcavalry/javacppdemo/Test.java
  • 控制台輸出以下信息,表名so文件已經生成,並且清理掉了中間過程產生的臨時文件:
root@docker:~/javacpp/java# java \
> -jar javacpp-1.5.5.jar \
> com/bolingcavalry/javacppdemo/Test.java
Info: javac -cp javacpp-1.5.5.jar:/root/javacpp/java com/bolingcavalry/javacppdemo/Test.java 
Info: Generating /root/javacpp/java/jnijavacpp.cpp
Info: Generating /root/javacpp/java/com/bolingcavalry/javacppdemo/jniTest.cpp
Info: Compiling /root/javacpp/java/com/bolingcavalry/javacppdemo/linux-x86_64/libjniTest.so
Info: g++ -I/usr/lib/jvm/jdk1.8.0_291/include -I/usr/lib/jvm/jdk1.8.0_291/include/linux /root/javacpp/java/com/bolingcavalry/javacppdemo/jniTest.cpp /root/javacpp/java/jnijavacpp.cpp -march=x86-64 -m64 -O3 -s -Wl,-rpath,$ORIGIN/ -Wl,-z,noexecstack -Wl,-Bsymbolic -Wall -fPIC -pthread -shared -o libjniTest.so -lMyFunc 
Info: Deleting /root/javacpp/java/com/bolingcavalry/javacppdemo/jniTest.cpp
Info: Deleting /root/javacpp/java/jnijavacpp.cpp
  • 此時的com/bolingcavalry/javacppdemo目錄下新增了一個名為linux-x86_64的文件夾,裏面的libjniTest.so是javacpp-1.5.5.jar生成的

  • 您可以將/usr/lib/目錄下的libMyFunc.so文件移動到linux-x86_64目錄下(不移動也可以,只是個人覺得業務so文件放在/usr/lib/這種公共目錄下不太合適)

  • 將java應用運行起來:

java -cp javacpp-1.5.5.jar:. com.bolingcavalry.javacppdemo.Test
  • 控制台輸出的信息如下所示,333表示調用so中的方法成功了:
root@docker:~/javacpp/java# java -cp javacpp-1.5.5.jar:. com.bolingcavalry.javacppdemo.Test
Warning: Could not load Loader: java.lang.UnsatisfiedLinkError: no jnijavacpp in java.library.path
333
  • 最後,將我這裡c++和java的文件夾和文件的信息詳細列出來,您可以參考:
root@docker:~# tree /root/javacpp
/root/javacpp
├── cpp
│   ├── libMyFunc.so
│   ├── NativeLibrary.cpp
│   ├── NativeLibrary.h
│   ├── test
│   └── test.cpp
└── java
    ├── com
    │   └── bolingcavalry
    │       └── javacppdemo
    │           ├── linux-x86_64
    │           │   ├── libjniTest.so
    │           │   └── libMyFunc.so
    │           ├── NativeLibrary.h
    │           ├── Test.class
    │           ├── Test.java
    │           └── Test$MyFunc.class
    └── javacpp-1.5.5.jar

6 directories, 12 files

一點小問題

  • 咱們回顧一下java應用的輸出,如下所示,其中有一段告警信息:
root@docker:~/javacpp/java# java -cp javacpp-1.5.5.jar:. com.bolingcavalry.javacppdemo.Test
Warning: Could not load Loader: java.lang.UnsatisfiedLinkError: no jnijavacpp in java.library.path
333
  • 上述告警信息不會影響功能,如果想消除掉,就不能只用org.bytedeco:javacpp:1.5.5這一個庫,而是org.bytedeco:javacpp-platform:1.5.5以及它的依賴庫

  • 由於本篇沒有用到maven或者gradle,因此很難將org.bytedeco:javacpp-platform:1.5.5及其依賴庫集齊,我這裡已經將所有jar文件打包上傳,您可以選擇下面任意一種方式下載:

  1. CSDN(不用積分)://download.csdn.net/download/boling_cavalry/20188764
  2. GitHub://raw.githubusercontent.com/zq2599/blog_download_files/master/files/javacpp-platform155.tar
  • 下載下來後解壓,是個名為lib的文件夾,將此文件夾放在/root/javacpp/java/目錄下

  • lib文件夾下的jar只是在運行時用到,編譯時用不上,因此現在可以再次運行java應用了,命令如下:

java -cp lib/*:. com.bolingcavalry.javacppdemo.Test
  • 在看控制台輸出如下圖,這次沒有告警了:

在這裡插入圖片描述

  • 本次實戰最終所有文件與目錄信息如下,供您參考:
root@docker:~/javacpp# tree /root/javacpp
/root/javacpp
├── cpp
│   ├── libMyFunc.so
│   ├── NativeLibrary.cpp
│   ├── NativeLibrary.h
│   ├── test
│   └── test.cpp
└── java
    ├── com
    │   └── bolingcavalry
    │       └── javacppdemo
    │           ├── linux-x86_64
    │           │   ├── libjniTest.so
    │           │   └── libMyFunc.so
    │           ├── NativeLibrary.h
    │           ├── Test.class
    │           ├── Test.java
    │           └── Test$MyFunc.class
    ├── javacpp-1.5.5.jar
    └── lib
        ├── javacpp-1.5.5-android-arm64.jar
        ├── javacpp-1.5.5-android-arm.jar
        ├── javacpp-1.5.5-android-x86_64.jar
        ├── javacpp-1.5.5-android-x86.jar
        ├── javacpp-1.5.5-ios-arm64.jar
        ├── javacpp-1.5.5-ios-x86_64.jar
        ├── javacpp-1.5.5.jar
        ├── javacpp-1.5.5-linux-arm64.jar
        ├── javacpp-1.5.5-linux-armhf.jar
        ├── javacpp-1.5.5-linux-ppc64le.jar
        ├── javacpp-1.5.5-linux-x86_64.jar
        ├── javacpp-1.5.5-linux-x86.jar
        ├── javacpp-1.5.5-macosx-arm64.jar
        ├── javacpp-1.5.5-macosx-x86_64.jar
        ├── javacpp-1.5.5-windows-x86_64.jar
        ├── javacpp-1.5.5-windows-x86.jar
        └── javacpp-platform-1.5.5.jar

7 directories, 29 files
  • 至此,JavaCPP入門體驗已經完成,接下來做個小結,將關鍵點列出來

關鍵點小結

  • 今天的實戰,咱們藉助JavaCPP,在java應用中使用c++的函數,有以下幾處需要重點關註:
  1. 在Java代碼中,要有與C++中同名的靜態類
  2. 注意Java代碼中Namespace註解和C++中的namespace一致
  3. C++的頭文件要和Java類放在同一個目錄下
  4. 使用so庫的時候,庫名為libMyFunc.so,Platform註解的link參數的值就是庫名去掉lib前綴和.so後綴
  5. C++函數的so文件可以放在/usr/lib目錄,也可以移至linux-x86_64目錄
  • 至此,JavaCPP快速入門就完成了,如果您正在學習JavaCPP技術,希望本篇能給您一些參考;

你不孤單,欣宸原創一路相伴

  1. Java系列
  2. Spring系列
  3. Docker系列
  4. kubernetes系列
  5. 數據庫+中間件系列
  6. DevOps系列

歡迎關注公眾號:程序員欣宸

微信搜索「程序員欣宸」,我是欣宸,期待與您一同暢遊Java世界…
//github.com/zq2599/blog_demos