人工智能大模型
ModeIRT是一款功能强大的大模型推理平台,可将大模型训练平台上训练好的模型以及纳管的第三方模型发布服务,用户通过调用API接口,实现模型的落地应用。
支持大模型训练平台上训练好的模型以及纳管的第三方模型发布服务,以RESTful API接口的方式对外提供服务。
支持对发布的模型服务进行在线测试,通过输入预测数据,输出推理结果。