AISBench训练负载仓库,包含了用于接入AISBench Stubs通用包的,来自各企业贡献者与个人贡献者贡献的训练负载代码。
AISBench推理负载仓库,包含了用于接入AISBench Stubs通用包的,来自各企业贡献者与个人贡献者贡献的推理负载代码。
AISBench 分布式运行组件,为集群训练提供便利的同步文件传输和命令执行方式
AISBench打点组件logging提供标准化接口,用于在模型负载中进行打点,记录模型运行数据。并且提供汇总上报功能,将多卡数据汇总上报stubs程序。logging工具可以和stubs搭配使用,也可以单独用于脚本中的打点
AISBench大模型精度评测工具evaluate(后简称evaluate工具)提供接口,用于全流程大模型评测以及生成式大模型结果多维分析。