在VS-Cod中调用python脚本中的ADLS数据

Question

我已经在VS代码中安装了ADL扩展，现在我正在编写一个Python脚本，我需要读取azuredatalake存储（adlsgen1）中的csv文件。 对于本地文件，以下代码正在工作：

df = pd.read_csv(Path('C:\\Users\\Documents\\breslow.csv')) 
print (df)

如何从ADLS读取数据？ 即使在成功安装和连接（使用我的Azure帐户）ADL扩展之后，我还需要创建一个范围和秘密等等？在

Answer 1

我试图编写一个示例代码，将azuredatalake中的csv文件中的数据读取到pandas中的dataframe。在

下面是我的示例代码。在

from azure.datalake.store import core, lib, multithread
import pandas as pd

tenant_id = '<your Azure AD tenant id>'
username = '<your username in AAD>'
password = '<your password>'
store_name = '<your ADL name>'
token = lib.auth(tenant_id, username, password)
# Or you can register an app to get client_id and client_secret to get token
# If you want to apply this code in your application, I recommended to do the authentication by client
# client_id = '<client id of your app registered in Azure AD, like xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxx'
# client_secret = '<your client secret>'
# token = lib.auth(tenant_id, client_id=client_id, client_secret=client_secret)

adl = core.AzureDLFileSystem(token, store_name=store_name)
f = adl.open('<your csv file path, such as data/test.csv in my ADL>')
df = pd.read_csv(f)

注意：如果您使用client_id&；client_secret进行身份验证，则必须为至少在Azure AD中具有Reader角色的应用添加必要的访问权限，如下图所示。有关访问安全性的详细信息，请参阅正式文档^{}。同时，关于如何在azuread中注册应用程序，你可以参考我对另一个SO线程How to get an AzureRateCard with Java?的回答。在

有任何问题，请随时告诉我。在