tensorflow-serving 相关问题

TensorFlow Serving是一种灵活的高性能服务系统,适用于机器学习模型,专为生产环境而设计。 TensorFlow服务可以轻松部署新算法和实验,同时保持相同的服务器架构和API。 TensorFlow Serving提供与TensorFlow模型的开箱即用集成,但可以轻松扩展以提供其他类型的模型和数据。

在Tensorflow-Serving中,是否可以仅获得前k个预测结果?

使用https://www.tensorflow.org/serving中的代码但使用DNNClassifier Estimator模型时,curl / query请求将返回所有可能的标签类及其相关分数。用一个 ...

回答 2 投票 2

可以使用“不支持节点名称的地址系列”警告阻止正常服务吗?

我设法将用于分段的Keras模型导出到张量流/服务:基于1.10.0-gpu的容器中。但是,在启动时,我会在事件循环开始之前注意到docker日志中的警告:[...

回答 1 投票 0

从现有检查点创建集线器模块

是否可以在不链接培训代码的情况下从现有检查点创建集线器模块?

回答 1 投票 1

如何在tensorflow_model_server上查询REST API运行?

我试图运行简单的TensorFlow估算器示例:官方Iris分类问题和使用本教程实现的代码保存的模型。 TensorFlow为...提供命令行工具

回答 1 投票 0

在model_config_file中分配版本标签失败

我有一个模型的版本1和2,我正在尝试按照https://www.tensorflow.org/serving/serving_config#上的说明为它们分配标签...

回答 1 投票 4

用于多张量流服务模型的Docker命令?

我正在尝试使用tf_serving的docker版本执行这个正常的tf_serving命令(它可以正常工作)。我不确定为什么它不起作用..有什么建议吗?我是Docker的新手!正常tf_serving ...

回答 1 投票 0

如何使用Tensorflow导出用于图像分类的简单保存模型图?

我现在有以下代码,但它不起作用。我试图接受一个图像输入,分类器将输出一些标签。培训正在输出图表,但......

回答 1 投票 1

如何使用TensorFlow图像分类模型调用Google AI Platform API

我刚刚将saved_model.pb上传到Google AI平台,它是一个图像分类模型。当我在命令行中测试模型时,它工作正常。但如果我尝试调用API,我会继续...

回答 1 投票 0

无法将docker镜像推送到gcp-cluster

所以我做了一个基于tensorflow-servings和Kubernetes的教程。除了推送到群集的docker镜像之外,所有步骤都正常工作。这是我尝试过的教程。 https://开头WWW ....

回答 3 投票 0

Tensorflow使用XLA服务

在使用Tensorflow服务进行推理时是否可以启用XLA编译? (我希望这只是一个无证件配置的问题,我可以避免实现自定义Servable)。

回答 1 投票 2

如何导出急切的执行模型?

完成我的模型后,我现在希望按照TensorFlow网站上的本教程导出和部署它。但是,没有迹象表明如何在急切的执行中做到这一点,我无法......

回答 1 投票 2

将模型加载到Tensorflow服务容器中,并使用protobufs与其进行通信

我知道如何将模型加载到tensorflow服务容器中并通过http请求与它通信但我对如何使用protobufs感到有点困惑。使用protobufs有哪些步骤? ...

回答 1 投票 1

将模型热负载到tensorflow服务容器中

我知道如何将模型加载到容器中,并且我知道我们可以创建一个静态配置文件,当我们运行tensorflow服务容器时将其传递给容器,然后使用一个模型...

回答 1 投票 1

为TensorFlow服务REST API生成实例或输入

我准备基于保存的模型尝试我的TensorFlow服务REST API,并想知道是否有一种简单的方法来生成我需要发送的JSON实例(基于行)或输入(柱状)...

回答 2 投票 1

Tensorflow服务:在服务时改变张量尺寸

问题我不熟悉使用Tensorflow(事实上这是我服务的第一个模型!)所以如果答案显而易见,我道歉!我正在使用此图像在docker上托管Tensorflow模型。 ......

回答 1 投票 1

使用Tensorflow进行推理使用Java进行服务

我们正在转换现有的Java生产代码,以使用Tensorflow服务(TFS)进行推理。我们已经重新训练了我们的模型并使用新的SavedModel格式保存它们(不再...

回答 1 投票 1

Tensorflow服务预测REST API'未正确格式化为base64数据'错误

我保存了Tensorflow模型并使用Tensorflow服务(tensorflow / serving:1.12.0和tensorflow / serving:1.12.0-gpu)服务它。我想使用Predict REST API,但调用失败了......

回答 1 投票 3

我可以自定义Tensorflow服务吗?

我正在研究Tensorflow服务。我对Tensorflow不熟悉并且遇到很多困难,但我正在通过谷歌文档或其他文档进行研究。例如,下载后......

回答 1 投票 0

如何使用tensorflow-serving使用我自己的自定义函数导出模型?

当使用tensorflow-serve导出我的模型时,我有一个新的要求,如果我只需要知道输入图像上的数字而不是用大的测试数据测试这个模型怎么办?什么 ...

回答 1 投票 0

使用REST和mnist来提取图像

我正在尝试使用REST api从mnist服务器中提取图像,类似于在以下网站的示例部分中使用数字示例(halft plus two)。简而言之:我正在努力......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.