我想知道如何在生产中使用ExampleGen ?我知道他们的输出可以馈送到TFX的TFDV组件中,以验证模式、倾斜和其他。
但是我迷路了,因为ExampleGen生成了一个火车&eval拆分,我不明白为什么要将生产中的数据拆分为train & &;eval。
据我所知,TFX更适合将模型部署到生产中,如果我要制作一个非生产性模型,也许只使用Tensorflow就可以工作。
所以我的问题是:
是TFX用于建模/开发部分?例如,在部署模型之前。
是否适合在Tensorflow中开发模型,然后将其迁移到TFX用于生产部分?
谢谢!
ExampleGen TFX Pipeline组件将数据摄取到TFX管道中。
简而言之,ExampleGen从外部数据源(如CSV, TFRecord, Avro, Parquet和BigQuery)获取数据并生成tf。Example和tf。SequenceExample记录可以被其他TFX组件读取。更多信息,请参考ExampleGen TFX Pipeline Component
TFX可以用于建模、培训、服务推理和管理在线、本地移动和JavaScript目标的部署。一旦您的模型在TFX上进行了训练,您就可以使用TF服务和其他部署目标来部署您的模型。TFX是否用于建模/开发部分?例如,在部署模型之前。
是否适合在Tensorflow中开发模型,然后将其迁移到TFX用于生产部分?
一旦你使用TFX管道开发和训练了一个模型,你就可以使用TF服务系统来部署它。您还可以使用TF服务来提供tensorflow模型。请参考服务TensorFlow模型