TensorFlow Serving是一种灵活的高性能服务系统,适用于机器学习模型,专为生产环境而设计。 TensorFlow服务可以轻松部署新算法和实验,同时保持相同的服务器架构和API。 TensorFlow Serving提供与TensorFlow模型的开箱即用集成,但可以轻松扩展以提供其他类型的模型和数据。
如何用Kubernetes Kustomize紧凑地存储共享配置?
首先,我不确定这个问题在Stack Overflow上是否足够具体。如果有人有什么建议,很乐意删除或修改。我们使用Kubernetes来协调我们的服务器端代码,并有 ...
Tensorflow服务器是否支持非基于tensorflow的库,比如scikit-learn?
其实我们正在创建一个平台,能够将AI用例投入生产。TFX是首选,但如果我们想使用非基于tensorflow的库,如scikit learn等,想 ...
升级Tensorflow模型或重新训练SavedModel。
我在2017年关注了 "Tensorflow for poets",并重新训练了自己的图像集合,并创建了 "retrained_graph.pb "和 "retrained_labels.txt "今天我需要在Tensorflow Serving上运行这个模型。...
我正在使用docker进行Tensorflow服务。我使用了TensorFlow官方文档中提到的代码,如下所示(使用Windows PowerShell)docker pull tensorflowserving git clone https:/...。
我正在实验字符_rnn的文本分类(https:/github.comtensorflowtensorflowblob671baf080238025da9698ea980cd9504005f727ctensorflowexampleslearn ...
TensorRTTensorflow2.0转换在__saved_model_init_op上失败。
我希望将我的模型转换为tensorrt优化模型为tensorflow服务,但是我得到了以下错误,我如何能固定这个?得到了一个包含非Tensor值的字典None的键......
如何在Google Clound AI平台中用Base64服务Tensorflow2图像分割模型。
我通过下面的代码成功地将一个TF2图像分割模型保存并部署到AI平台。@tf.function(input_signature=[tf.TensorSpec(shape=(None), dtype=tf.string)]) def ...
{ "error": "Malformed request. POST v1modelstext_model POST v1modelstext_model" }。Tensorflow服务
我正在使用Colab进行文本分类,它是多标签文本分类模型导入json # inputFeature1 inputFeature1="¿Tiene el arte que gustar a todos? Pues no" #inputFeature2 ...
如何用docker运行包括其模型在内的tensorflow-serving?
问题是,我想用docker运行包括模型在内的tensorflow-serving,但似乎docker会使tensorflow-serving无法加载文件夹。在容器本身,它可以加载...
TF2 Keras - 通过Tensorflow Serving在Keras保存的模型中进行特征工程设计。
Tensorflow 2关于在Keras模型上进行特征工程预处理的文档似乎很混乱,而且不是很友好。目前我有一个简单的Keras N层模型,TF ...
RuntimeError: 无法在另一个循环运行时运行事件循环,试图在我的本地设置tensorflow_federated。所有的导入版本都是正确的,CUDA = 10.1, python = 3.6.9, tensorflow_federated。CUDA = 10.1, python = 3.6.9, tensorflow = 2...。
导出Keras LSTM,没有用于Tensorflow / serving的Dropout层
我注意到,当使用tensorflow / serving docker容器部署Keras LSTM模型时,对model:predict的调用将为相同的输入返回不一致的值。经过一番研究,似乎...
TF2 Keras-通过Tensorflow服务在Keras保存的模型中进行特征工程
用于Keras模型的预处理/特征工程的Tensorflow 2文档似乎很混乱,也不是很友好。目前,我有一个简单的Keras N层模型,带TF ...
Java Tensorflow + Keras等效于model.predict()
在python中,您可以简单地将numpy数组传递给predict(),以从模型中获取预测。 Java与SavedModelBundle一起使用的等效条件是什么? Python模型= tf.keras.models.Sequential([#...
我在TensorFlow服务服务器上使用“回归” API时遇到麻烦。请参阅下面的要点链接以更舒适地阅读。 https://gist.github.com/krikit/32c918cc03b52315ade562267a91fa6b我做了一个简单的...
我正在加载一个tensorflow保存的模型,并尝试推断已加载的模型。它以灰度图像作为输入,并输出相同大小的灰度图像。导入tensorflow为tf导入numpy为np从...
[当我在tensorflow中运行代码时,出现一个错误,名称为“ conv_layer name not defined”。我是新手,这是我的jupyter笔记本!
tensorflow服务REST API错误:找不到可服务模型的基本路径/ models / model
我是tensorflow服务和docker的新手,我经历了多个教程,并希望在经过重新训练的模型上进行尝试。当我运行以下代码时,出现以下错误:找不到基...
tensorflow_model_server:错误“填充的第一维必须是输入[4,2]的等级...”]]
我正在使用tensorflow_model_server提供SavedModel。我不断收到此响应代码400和以下错误:{“ error”:“填充的第一维必须是输入的等级[4,2] [1,1,1,...
Tensorflow-Serving:requests.exceptions.HTTPError:400 Client
我已经为我的自定义模型提供了基于预先训练模型的手机对象检测API。因此,我想向服务发送请求:http:// localhost:8501 / v1 / models / cellphone:predict The ...