TFRecorder用于将PadasDataFrame或CSV文件转换为TFRecord。TFRecord是一种简单的二进制文件格式。
目前,TFRecorder支持以“图像csv格式”存储的数据,类似于GCPAutoMLVisio。
用法示例FromPadasDataFrame本地运行
importpadasaspdimporttfrecorderdf=pd.read_csv(...)df.tesorflow.to_tfr(output_dir='gs://my/bucket')在CloudDataflow运行
importpadasaspdimporttfrecorderdf=pd.read_csv(...)df.tesorflow.to_tfr(output_dir='gs://my/bucket',ruer='DataFlowRuer',project='my-project',regio='us-cetral1')FromCSV使用Pytho解释器
importtfrecordertfrecorder.create_tfrecords(iput_data='/path/to/data.csv',output_dir='gs://my/bucket')使用命令行
tfrecordercreate-tfrecords\--iput_data=/path/to/data.csv\--output_dir=gs://my/bucket
评论