Sean Yu

IoT Specialty/Microsoft MVP/MCT

All Posts


Azure Databricks 创建外部表

本文介绍如何在Azure data bricks中创建外部表。 本例子使用新建的Azure databricks。   新建如下资源: Azure databricks; Azure storage account 并开启分层命名空间; Azure Databricks 的访问连接器(这个是用来配置 databricks 链接 datalake的 managed identity),图标如下图所示;   在存储账户中,将 Azure databricks的访问连接器配置为存储账户的 blob数据所有者或者参与者;     接下来的步骤: 创建元存储(metastore)-> 创建 Unity Catalog->   1. 在accounts.azuredatabricks.net  中的data 页面创建 metastore; 2.为创建的metastore 分配 workspace; …

Azure Videos Data Databricks

Azure Databricks 读写 Azure storage account gen2

本文介绍Databricks 读写 Storage Account Gen 2 用到的链接: DBFS目录下的文件: https://learn.microsoft.com/zh-cn/azure/databricks/dbfs/root-locations 链接Data lake 的脚本: https://learn.microsoft.com/zh-cn/azure/databricks/getting-started/connect-to-azure-storage#--step-6-connect-to-azure-data-lake-storage-gen2-using-python 配置链接datalake gen2 service_credential = dbutils.secrets.get(scope="key-vault-scope",key="sp-key") …

Video Storage Account Data Databricks

D365试用账号注册

根据我们收集的信息,很多同学在学习D365的时候都被困在第一步申请账号和订阅上,为了降低大家学习前的准备成本,我们特意开发了一个免费提供D365 30天试用账号的工具。 30天过期后,可重新申请新的账号。 注意,此账号仅可用来学习D365,账号过期后,后台会自动删除账号,不要存放任何商业数据。   1.提交信息步骤: 填写如下表单: https://forms.office.com/Pages/ResponsePage.aspx?id=GxAjwA2-A0qZGoJPkDJGmrC23bDl0h9Cjfs6Tx0QsnZUQ0c1T1FOUk9JMTBJVVQ4QjdFRlJJMkVPVC4u 或扫码填写: 填写姓名/登录账号/个人邮箱,点击提交按钮即可。   2. 查收账号密码,登录开始开发吧 查收你的邮箱,检查主题为“Dynamics 365学习账号创建成功”的邮件。       …


Storage Account File Share 文件共享上传大于4M文件报错

上传大于4M文件时报错,参考文档:https://learn.microsoft.com/zh-cn/troubleshoot/azure/general/request-body-large   处理方法: // See https://aka.ms/new-console-template for more information using Azure; using Azure.Storage.Files.Shares; Console.WriteLine("Hello, World!"); string connectionString = ""; // Name of the share, directory, and file we'll create string shareName = "sharelabeled"; string dirName = " …

Azure Files Storage Account


Azure Machine Learning 入门(7)Azure Machine Learning 将conda 环境导入到计算实例或者DSVM中并集成到Notebook

Azure Machine Learning 入门(7)Azure Machine Learning  将conda 环境导入到计算实例或者DSVM中并集成到Notebook     关键代码: conda env create -f azureml_py38.yaml python=3.8 conda env list conda activate custom_azureml_py38 conda install -y pip conda install -y ipykernel python -m ipykernel install --user --name custom_azureml_py38 --display-name "(custom_azureml_py38)" https://videos.51azure.cloud/azure/azure- …

Azure Video Machine Learning AML