授权协议: Apache-2.0
开发语言: Python 查看源码 »
操作系统: 跨平台
开发厂商: Google
收录时间: 2020-08-11
提 交 者: xplanet

TFRecorder 用于将 Pandas DataFrame 或 CSV 文件转换为 TFRecord。TFRecord 是一种简单的二进制文件格式。

目前,TFRecorder 支持以“图像 csv 格式”存储的数据,类似于 GCP AutoML Vision。

用法示例

From Pandas DataFrame

本地运行

import pandas as pd
import tfrecorder

df = pd.read_csv(...)
df.tensorflow.to_tfr(output_dir='gs://my/bucket')

在 Cloud Dataflow 运行

import pandas as pd
import tfrecorder

df = pd.read_csv(...)
df.tensorflow.to_tfr(
    output_dir='gs://my/bucket',
    runner='DataFlowRunner',
    project='my-project',
    region='us-central1')

From CSV

使用 Python 解释器

import tfrecorder

tfrecorder.create_tfrecords(
    input_data='/path/to/data.csv',
    output_dir='gs://my/bucket')

使用命令行

tfrecorder create-tfrecords \
    --input_data=/path/to/data.csv \
    --output_dir=gs://my/bucket
 
展开阅读全文

代码

的 Gitee 指数为
超过 的项目

TFRecorder 的相关博客

【TF前沿】TensorFlow Recorder 现已开源!

文 / AI 工程师 Mike Bernico 和 Carlos Ezequiel,Google Cloud 在训练计算机视觉机器学习模型时,数据加载是一种常见的性能...

字节跳动秋招6千多应届生;俄罗斯黑客利用恶意软件攻击Linux | AI一周资讯

编辑 | 李冬梅 NSA 和 FBI 联合曝光俄罗斯黑客利用恶意程序攻击 Linux;特朗普:要求字节跳动出售 TikTok 的时间限制改为 90...

特斯拉开发 Dojo 神经网络训练计算机;CMU 新实验改善机器人知觉

开发者社区行业周刊又和大家见面了,快来看看这周有哪些值得我们开发者关注的重要新闻吧。 特斯拉开发 Dojo 神经网络训练计算...

人工智能技术问答之五

图书销售以来读者交流群十分活跃,小编截取一部分问答共享给深度学习爱好者。 读者 请问一下,tensorflow发展很快,最新的版本...

推荐5个实用的Pandas技巧

介绍 效率已成为及时完成工作的关键因素。一个人不应该花超过合理的时间去完成事情。尤其是当任务涉及基本编码时。使用Panda...

代码优化实战:我又优化了一百个 if else

事情是这样的,前段时间做代码review的时候,发现项目中有一个方法代码量超鸡儿多,而且大部分都是写的参数校验的代码,各种i...

【20200916期AI简报】AI开源工具、5TOPS的旭日3 AIoT芯片,更多精彩点我!

导读:本期为 AI 简报 20200916 期,将为您带来过去一周关于 AI 新闻 10 条,其他互联网圈内新闻 2 条,希望对您有所帮助~ 有...

TensorFlow非常出色的30个机器学习数据集

本文转自雷锋网,如需转载请至雷锋网官网申请授权。 TensorFlow是由谷歌大脑的研究人员创建、最大的机器学习和数据科学的开源...

TFRecorder 的相关问答

还没有任何问答,马上提问

评论 (0)

加载中
更多评论
0 评论
8 收藏
分享
在线直播报名
返回顶部
顶部