用于数据科学的顶级 C/C++ 机器学习库整理

• 2022 年 11 月 9 日
• 筆記

用于数据科学的顶级 C/C++ 机器学习库整理

介绍和动机——为什么选择 C++

C++ 非常适合 动态负载平衡、 自适应缓存以及开发大型大数据框架 和库。Google 的MapReduce、MongoDB以及 下面列出 的大多数 深度学习库都是使用 C++ 实现的。 Scylla 以其 超低延迟 和 极高 吞吐量而闻名，它 使用 C++ 进行编码，作为 Apache Cassandra 和 Amazon DynamoDB的替代品。

凭借 C++ 作为编程语言的 一些独特优势（包括内存管理、 性能特征和 系统编程），它无疑是开发快速可扩展的数据科学和大数据库的最有效工具之一。

此外， Julia （一种 由MIT开发的编译型 和 交互式 语言）正在成为 Python 在科学计算和数据处理领域的潜在竞争对手。它的快速处理速度、并行性、静态以及用于插入库的动态类型和 C++ 绑定，简化了开发人员/数据科学家集成和使用 C++ 作为数据科学和大数据库的工作。

让我们仔细研究一下不同的 C++ 库，这些库对于传统和深度学习模型的每位数据科学家来说都很有用。

1.来自 Google AI 的 TensorFlow

由 Google 开发的流行深度学习库，拥有自己的工具、库和社区资源生态系统，可让研究人员和开发人员轻松构建和部署基于 ML 的应用程序

//www.tensorflow.org/lite/microcontrollers/library//github.com/tensorflow/serving

2.来自伯克利的 Caffe

用于快速特征嵌入或 Caffe 的卷积架构是用 C++ 编写的，用于深度学习框架，由伯克利视觉和学习中心开发。

//github.com/intel/caffe

3.微软认知工具包（CNTK）

Microsoft Cognitive Toolkit 是一个统一的深度学习工具包，有助于通过有向图将神经网络转换为一系列计算步骤。

4.mlpack 库

mlpack：它是一个快速、灵活的机器学习库，用 C++ 编写。它提供了具有 Python 绑定、Julia 绑定和 C++ 类的尖端机器学习算法。

5.DyNet

Dynamic Neural Network Toolkit （支持动态计算图）或 DyNet 是一个用 C++（在 Python 中绑定）编写的高性能神经网络库，可在 CPU 或 GPU 上高效运行。它支持自然语言处理、图结构、强化学习等。

6.Shogun

Shogun 是一个开源机器学习库，它提供了广泛的高效和统一的机器学习方法，例如多种数据表示、算法类和通用工具的组合，用于数据管道的快速原型设计。

7. FANN

快速人工神经 网络 是 C 语言中的多层人工神经网络，支持全连接和稀疏连接网络。它支持定点和浮点的跨平台执行。此外，它还支持进化的基于拓扑的训练和基于反向传播的 DL 模型训练。

8.OpenNN

开放神经网络 (OpenNN) 是用于高级分析的开源 (C/C++) 神经网络高性能库，支持分类、回归、预测等。

9.SHARK Library

Shark 是一个快速、模块化、通用的开源机器学习库 (C/C++)，用于应用和研究，支持线性和非线性优化、基于内核的学习算法、神经网络和各种其他机器学习技术。

10. Armadillo

Armadillo 是一个线性代数 (C/C++) 库，其功能类似于 Matlab。该库以将研究代码快速转换为生产环境而闻名，用于模式识别、计算机视觉、信号处理、生物信息学、统计学、计量经济学等。

11.Faisis

faiss：这个库（C/C++）用于高效的相似性搜索和密集向量的聚类。它包含在任意大小的向量集中搜索的算法，直到那些可能不适合 RAM 的向量。它还支持通过 CUDA 提供的可选 GPU，以及可选的 Python 接口。

12.随机森林

//github.com/zhufangzhou/RandomForest
//github.com/bjoern-andres/random-forest

13.Boosting

XGBoost – 一个并行优化的通用梯度提升库。

ThunderGBM – GPU 上用于 GBDT 和随机森林的快速库。

LightGBM—— 微软基于决策树算法的快速、分布式、高性能梯度提升（GBDT、GBRT、GBM 或 MART）框架，用于排名、分类和许多其他机器学习任务。

CatBoost – 具有开箱即用的分类特征支持的决策树库的通用梯度提升。它易于安装，包含快速推理实现，并支持 CPU 和 GPU（甚至多 GPU）计算。

14.推荐系统

Recommender – 使用协同过滤 (CF) 的产品推荐/建议的 AC 库。

混合推荐系统 ——基于 scikit-learn 算法的混合推荐系统

15.自然语言处理

BLLIP Parser – BLLIP 自然语言解析器（也称为 Charniak-Johnson 解析器）。

colibri-core – C++ 库、命令行工具和 Python 绑定，用于以快速且节省内存的方式提取和处理基本语言结构，例如 n-gram 和skiagram。

CRF++ – 条件随机场 (CRF) 的开源实现，用于分割/标记顺序数据和其他自然语言处理任务。[已弃用]

CRFsuite – CRFsuite 是用于标记顺序数据的条件随机字段 (CRF) 的实现。[已弃用]

CRF 模型 -不同的基于深度学习的 CRF models.frog – 为荷兰语开发的基于内存的 NLP 套件：PoS 标记器、词形还原器、依赖解析器、NER、浅解析器、形态分析器。

MeTA – ModErn Text Analysis 是一个 C++ 数据科学工具包，可促进大文本数据的挖掘，包括文本标记化，包括解析树、主题模型、分类算法、图形算法、语言模型、多线程算法等深度语义特征。

MIT Information Extraction Toolkit – 用于命名实体识别和关系提取的 C、C++ 和 Python 工具

ucto – Unicode 感知的基于正则表达式的各种语言的标记器。工具和 C++ 库。支持 FoLiA 格式。

16.流的数据挖掘

StreamDM ：对挖掘大数据流很有用，它支持以下算法

SGD 学习器和感知器：

• Naive Bayes
• CluStream
• Hoeffding Decision Trees
• Bagging
• Stream KM++
• Data Generators

HyperplaneGenerator

• RandomTreeGenerator
• RandomRBFGenerator
• RandomRBFEventsGenerato

17.数据结构/图/动态规划算法

//github.com/TheAlgorithms/C-Plus-Plus

18.通用机器学习

Darknet – Darknet 是一个用 C 和 CUDA 编写的开源神经网络框架，支持 CPU 和 GPU 计算。

cONNXr – ONNX 运行时是用纯 C (99) 编写的，零依赖于小型嵌入式设备。无论您使用哪种框架进行训练，都可以对您的机器学习模型进行推理。易于在任何地方安装和编译，即使在非常旧的设备中也是如此。

BanditLib – 一个简单的多臂 Bandit 库。 [已弃用]

CUDA – 这是卷积深度学习的快速 C++/CUDA 实现

DeepDetect – 用 C++11 编写的机器学习 API 和服务器。它使最先进的机器学习易于使用并集成到现有应用程序中。

分布式机器学习工具包 (DMTK) – Microsoft 的分布式机器学习（参数服务器）框架。启用跨多台机器的大型数据集训练模型。当前与之捆绑的工具包括：LightLDA 和分布式（Multisense）词嵌入。

DLib – 一套 ML 工具，旨在轻松嵌入其他应用程序。

DSSTNE – 亚马逊创建的一个软件库，用于使用 GPU 训练和部署深度神经网络，强调速度和规模而不是实验灵活性。

DyNet – 一个动态神经网络库，可以很好地与具有随每个训练实例变化的动态结构的网络一起工作。用 C++ 编写，在 Python 中绑定。

Fido – 用于嵌入式电子和机器人技术的高度模块化 C++ 机器学习库。

igraph – 通用图形库。

Intel(R) DAAL – 由英特尔开发并针对英特尔架构进行了优化的高性能软件库。库为数据分析的所有阶段提供算法构建块，并允许以批处理、在线和分布式模式处理数据。

libfm – 一种通用方法，允许通过特征工程模拟大多数分解模型。

MLDB—— 机器学习数据库是专为机器学习而设计的数据库。通过 RESTful API 向其发送命令以存储数据，使用 SQL 进行探索，然后训练机器学习模型，并将它们作为 API 公开。

mlpack – 一个可扩展的 C++ 机器学习库。

MXNet – 轻量级、便携、灵活的分布式/移动深度学习，具有动态、突变感知数据流 Dep 调度器；适用于 Python、R、Julia、Go、Javascript 等。

proNet-core – 通用网络嵌入框架：成对表示优化网络编辑。

PyCUDA – CUDA 的 Python 接口

ROOT – 一个模块化的科学软件框架。它提供了处理大数据处理、统计分析、可视化和存储所需的所有功能。

Shark – 一个快速、模块化、功能丰富的开源 C++ 机器学习库。

Shogun – Shogun 机器学习工具箱。

sofia-ml – 快速增量算法套件。Stan – 一种概率编程语言，使用哈密顿蒙特卡罗采样实现完整的贝叶斯统计推断。

Timbl – 一个软件包/C++ 库，实现了几种基于内存的学习算法，其中 IB1-IG 是 k 最近邻分类的实现，IGTree 是 IB1-IG 的决策树近似。常用于自然语言处理。

Vowpal Wabbit (VW) – 一种快速的核外学习系统。Warp-CTC – 在 CPU 和 GPU 上快速并行实现连接主义时间分类 (CTC)。

ThunderSVM – GPU 和 CPU 上的快速 SVM 库。

LKYDeepNN – 一个只有头文件的 C++11 神经网络库。低依赖，原生繁体中文文档。

xLearn – 一个高性能、易于使用且可扩展的机器学习包，可用于解决大规模机器学习问题。xLearn 对于解决大规模稀疏数据上的机器学习问题特别有用，这在在线广告和推荐系统等互联网服务中非常常见。

Featuretools – 用于自动化特征工程的库。它擅长使用可重用的特征工程“原语”将事务和关系数据集转换为用于机器学习的特征矩阵。

skynet – 用于学习神经网络的库，具有 C 接口，网络设置为 JSON。用 C++ 编写，绑定了 Python、C++ 和 C#。

Feast – 用于管理、发现和访问机器学习功能的功能商店。Feast 为模型训练和模型服务提供了一致的特征数据视图。

Hopsworks – 具有业界首个开源功能存储的 AI 数据密集型平台。Hopsworks Feature Store 提供了一个基于 Apache Hive 的用于训练和批处理的特征仓库和一个基于 MySQL Cluster 的特征服务数据库，用于在线应用程序。

Polyaxon – 可重复和可扩展的机器学习和深度学习平台。

sara – C++ 计算机视觉库，具有易于理解和高效的计算机视觉算法实现。[Mozilla 公共许可证 2.0 版]

ANNetGPGPU – 基于 GPU (CUDA) 的人工神经网络库。[LGPL]

btsk – 游戏行为树入门工具包。[zlib]

Evolving Objects – 一个基于模板的 ANSI-C++ 进化计算库，可帮助您快速编写自己的随机优化算法。[LGPL]

frugally-deep – 仅用于在 C++ 中使用 Keras 模型的标头库。[麻省理工学院]

Genann – C 中的简单神经网络库。 [zlib]

MXNet – 轻量级、便携、灵活的分布式/移动深度学习，具有动态、突变感知数据流 Dep 调度器；适用于 Python、R、Julia、Scala、Go、Javascript 等。

PyTorch – Python 中的张量和动态神经网络，具有强大的 GPU 加速功能。

website Recast/Detour – (3D) 导航网格生成器和探路者，主要用于游戏。[zlib]

tiny-dnn – C++11 中的仅标头、无依赖的深度学习框架。[BSD]

Veles – 用于快速深度学习应用程序开发的分布式平台。[阿帕奇]

Kaldi – 语音识别工具包。[阿帕奇]

19.计算机视觉

CCV – 基于 C/缓存/核心的计算机视觉库，现代计算机视觉库。

VLFeat – VLFeat 是一个开放且可移植的计算机视觉算法库，它具有 Matlab 工具箱。

DLib – DLib 具有用于人脸检测和训练通用对象检测器的 C++ 和 Python 接口。

EBLearn – Eblearn 是一个面向对象的 C++ 库，可实现各种机器学习模型 [已弃用]

OpenCV – OpenCV 具有 C++、C、Python、Java 和 MATLAB 接口，并支持 Windows、Linux、Android 和 Mac OS。

VIGRA – VIGRA 是一个通用的跨平台 C++ 计算机视觉和机器学习库，用于与 Python 绑定的任意维度卷。

Openpose – 用于身体、面部、手部和足部估计的实时多人关键点检测库。来自 Facebook 研究的手电筒。

20.来自 Facebook Research 的 FlashLight

flashlight 是一个快速、灵活的机器学习库，由 Facebook AI Research Speech 团队和 Torch 和 Deep Speech 的创建者完全用 C++ 编写。

21.来自阿里巴巴的移动神经网络

MNN 是一个高效、轻量级的深度学习框架。它支持深度学习模型的推理和训练，并具有行业领先的设备推理和训练性能。

22.来自 Facebook Research 的 Habitat-SIM

habitat-sim (C++) 库支持在高度逼真和高效的3D 模拟器 中训练具身 AI 代理（虚拟机器人），然后将学习到的技能转化为现实。它使用带有 AI 的静态数据集（例如ImageNet、COCO、VQA），其中代理通过从中学习在现实环境中行动。

参考
//analyticsindiamag.com/top-10-libraries-in-c-c-for-machine-learning/
//github.com/topics/ml?l=c%2B%2B
//dzone.com/articles/progressive-tools10-best-frameworks-and-libraries