TensorFlow I/O 0.15.0数据扩展包
TensorFlow 的 IO 扩展包tensorflow_io-0.15.0-cp38-win_amd64.whl
挺实用的,适合搞深度学习的你,想省点事儿搞定各种数据输入输出。这个版本是给 Windows 上的 Python 3.8 用户用的,装上就能直接对接不少非标准格式的数据源,比如 Parquet、Kafka、HDFS 那种,数据流程顺多了。
数据流图的机制配合tf.io
模块,嗯,就像接插头一样灵活,哪里有数据哪里接,不用老是手写各种转换逻辑。是训练模型前的数据预,那真的是一大块时间,现在可以轻松搞定。
并行计算这块也有优势,IO 速度跟得上 GPU 的训练速度,不容易拖后腿。你要是在做那种超大数据集的训练任务,比如视频帧识别或者日志,这个包还是蛮值得一试的。
不过要注意,这个.whl
文件是特定环境的,也就是 Python 3.8 + Windows 64 位。别一股脑装,先确认下环境,不然装不上白折腾。你可以用pip install tensorflow_io-0.15.0-cp38-win_amd64.whl
手动装,响应也快。
如果你之前对TensorFlow
的 IO 有点头疼,或者老觉得tf.data
不够灵活,那这个包可以救你一命。搭配参考文章比如TensorFlow 高性能计算库这种,了解得更透。
16.2MB
文件大小:
评论区