python - 无需下载即可访问 Blob 存储中的数据

Question

我们的客户正在使用 Azure 的 blob 存储服务来保存大文件，以便我们可以使用 Azure 在线服务来处理它们。

我们希望使用 Azure 直接获取的计算资源来读取和使用这些文件，而不是将它们下载到另一个 Azure 服务(例如 Azure 机器学习工作室)中。

到目前为止，如果不将 Blob 存储中的数据下载到 Azure 机器学习工作室中进行使用，我们就无法访问它们。

此外，我们想要读取的文件都不是以下类型:

但是，可以借助 python 扩展来读取它们。

我们如何在不事先下载的情况下访问 Blob 存储中的数据？
是否可以使用 Azure 将 Blob 存储安装到机器学习工作室？
供您引用:我们不需要使用 Azure 机器学习工作室，而是使用具有计算资源的 Azure 在线服务。

此问题与以下 StackOverflow 问题相关:
Azure Blob - Read using Python
read file from azure blob storage in python

Answer 1

这是对我们有用的解决方法之一

import os, uuid, sys
from azure.storage.blob import BlockBlobService, PublicAccess
import pandas as pd

blobfile = "<Your BloB Name>"
container = "<Your Container Name>"
blob_account_name = "<Your storage Account>"
sas_token="<Your SAS Token>"

block_blob_service = BlockBlobService(account_name=blob_account_name, sas_token=sas_token)

print("\n File Content")
blob1 = block_blob_service.get_blob_to_text(container, blobfile)
print(blob1.content);

以下是屏幕截图供您引用:-

注意:- 确保安装 2.1.0 版本的 azure-storage-blob，即 pip install azure-storage-blob==2.1。 0

这也可以通过 Azure Databricks 实现。尝试检查Accessing Azure Blob Storage from Azure Databricks