在Azure数据工厂中使用没有DataBricks的Jupyter笔记本吗? - python

我从文档中收集到,我们只能将Jupyter笔记本与Databricks Spark集群一起使用。

有没有解决的办法?我可以在没有Databricks环境的情况下将Jupyter笔记本称为ADF中的一项活动吗?我想有一种简单的方法来从ADF调用一些python代码。

谢谢!

参考方案

您可以在ADF中尝试Custom Activity。自定义活动支持cmd命令,因此您可以使用命令行来调用python脚本。

还有另一个在自定义活动中使用python的示例:
https://github.com/rawatsudhir1/ADFPythonCustomActivity

希望能帮助到你。

Python:加入大小不等的列表而不进行连接 - python

我正在尝试合并两个单独的列表:x=np.arange(-math.pi/2+0.03079992797, 0, 0.03079992797)和y=np.arange(0.06159985595,math.pi/2, 0.03079992797)通常,我只会使用z = np.concatenate((x,y),axis=0),但已指示我不要使用。还有其他方法可…

Python GPU资源利用 - python

我有一个Python脚本在某些深度学习模型上运行推理。有什么办法可以找出GPU资源的利用率水平?例如,使用着色器,float16乘法器等。我似乎在网上找不到太多有关这些GPU资源的文档。谢谢! 参考方案 您可以尝试在像Renderdoc这样的GPU分析器中运行pyxthon应用程序。它将分析您的跑步情况。您将能够获得有关已使用资源,已用缓冲区,不同渲染状态上…

有谁知道我在哪里可以得到azure的linux python SDK? - python

我一直在寻找高低。微软网站甚至具有此链接-https://www.windowsazure.com/en-us/develop/python/common-tasks/install-python/,但是当我按照说明执行curl命令并键入密码时,它会爆炸并显示“发生错误...”消息。我也发现了这个问题-http://www.windowsazure.com/…

设置Jupyter笔记本电脑的最大内核数 - python

我与同事共享一台计算机。他们在那里运行并行计算,我需要运行Jupyter。我可能只使用几个核心,而不是全部。但是,每次运行在Jupyter中使用numpy的单元时,它都会尝试使用尽可能多的内核。在运行同事的计算时,Python占用了一半的内核。我试图将Jupyter进程的nice设置为19,以便其Python子进程继承niceness值,并且不尝试使用所有内…

Python:图像处理可产生皱纹纸效果 - python

也许很难描述我的问题。我正在寻找Python中的算法,以在带有某些文本的白色图像上创建皱纹纸效果。我的第一个尝试是在带有文字的图像上添加一些真实的皱纹纸图像(具有透明度)。看起来不错,但副作用是文本没有真正起皱。所以我正在寻找更好的解决方案,有什么想法吗?谢谢 参考方案 除了使用透明性之外,假设您有两张相同尺寸的图像,一张在皱纹纸上明亮,一张在白色背景上有深…