CANN/ge ACL BLAS int8矩阵向量乘法API

aclblasS8gemv【免费下载链接】geGEGraph Engine是面向昇腾的图编译器和执行器提供了计算图优化、多流并行、内存复用和模型下沉等技术手段加速模型执行效率减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge产品支持情况Ascend 950PR/Ascend 950DT不支持Atlas A3 训练系列产品/Atlas A3 推理系列产品支持Atlas A2 训练系列产品/Atlas A2 推理系列产品支持Atlas 200I/500 A2 推理产品支持Atlas 推理系列产品支持Atlas 训练系列产品支持IPV350不支持功能说明执行矩阵-向量的乘法y αAx βy输入数据的数据类型为int8_t输出数据的数据类型为int32_t。异步接口。函数原型aclError aclblasS8gemv(aclTransType transA, int m, int n, const int32_t *alpha, const int8_t *a, int lda, const int8_t *x, int incx, const int32_t *beta, int32_t *y, int incy, aclComputeType type, aclrtStream stream)参数说明参数名输入/输出说明transA输入A矩阵是否转置的标记。类型定义请参见aclTransType。m输入矩阵A的行数存储矩阵乘数据时行优先。n输入矩阵A的列数。alpha输入用于执行乘操作的标量α的指针。a输入矩阵A的指针。lda输入A矩阵的主维此时选择转置按行优先则lda为A的列数。预留参数当前只能设置为-1。x输入向量x的指针。incx输入x连续元素之间的步长。预留参数当前只能设置为-1。beta输入用于执行乘操作的标量β的指针。y输入输出向量y的指针。incy输入y连续元素之间的步长。预留参数当前只能设置为-1。type输入计算精度默认高精度。类型定义请参见aclComputeType。stream输入执行算子所在的Stream。类型定义请参见aclrtStream。返回值说明返回0表示成功返回其他值表示失败请参见aclError。【免费下载链接】geGEGraph Engine是面向昇腾的图编译器和执行器提供了计算图优化、多流并行、内存复用和模型下沉等技术手段加速模型执行效率减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考