python-Google colaboratory和Google Cloud之间的接口
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了python-Google colaboratory和Google Cloud之间的接口，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2012字，纯文字阅读大概需要3分钟。
内容图文
从Google colaboratory,如果我想读/写到在Google Cloud中创建的给定存储桶中的文件夹,我该如何实现？
我创建了一个存储桶,存储桶中的文件夹,并将一堆图像上传到其中.现在从colaboratory,使用jupyter笔记本,想要创建多个子目录,以将这些图像组织到训练,验证和测试文件夹中.
随后访问相应的文件夹以进行训练,验证和测试模型.
使用Google驱动器后,我们只需在身份验证后使用以下命令更新路径即可直接定向到特定目录.
import sys
sys.path.append('drive/xyz')
我们也在台式机版本上做类似的事情
import os
os.chdir(local_path)
Google Cloud Storage是否存在类似的东西？
我喜欢常见问题解答,它有读写单个文件的过程,在这里我们需要设置整个路径.将主目录重新组织成子目录并分别访问它们将很繁琐.
解决方法:
通常,尝试将GCS存储桶安装在本地计算机上不是一个好主意(这将使您可以使用它,如前所述).从Connecting to Cloud Storage buckets开始：
Note: Cloud Storage is an object storage system that does not have the
same write constraints as a 07001 file system. If you write data
to a file in Cloud Storage simultaneously from multiple sources, you
might unintentionally overwrite critical data.
假设无论警告如何,您都希望继续操作,如果您使用的是Linux操作系统,则可以使用Cloud Storage FUSE适配器安装它.参见相关的How to mount Google Bucket as local disk on Linux instance with full access rights.
从python应用程序访问GCS的推荐方法是使用Cloud Storage Client Libraries,但是访问文件会有所不同
比您的摘要中.您可以在Python Client for Google Cloud Storage找到一些示例：
from google.cloud import storage
client = storage.Client()
# https://console.cloud.google.com/storage/browser/[bucket-id]/
bucket = client.get_bucket('bucket-id-here')
# Then do other things...
blob = bucket.get_blob('remote/path/to/file.txt')
print(blob.download_as_string())
blob.upload_from_string('New contents!')
blob2 = bucket.blob('remote/path/storage.txt')
blob2.upload_from_filename(filename='/local/path.txt')
更新：
协作文档基于Google API Client Library for Python推荐了另一种我忘记的方法,但是请注意,它也不能像常规文件系统那样工作,它使用本地文件系统上的中间文件：
> uploading files to GCS
> downloading files from GCS：
内容总结
以上是互联网集市为您收集整理的python-Google colaboratory和Google Cloud之间的接口全部内容，希望文章能够帮你解决python-Google colaboratory和Google Cloud之间的接口所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。