热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

缓存Julia模块,以便在Python中更快地启动和使用

如何解决《缓存Julia模块,以便在Python中更快地启动和使用》经验,为你挑选了1个好方法。

我有一个Julia模块,我需要从我的python代码库接口.为此我pyjulia就是这样使用的.

import julia

j = julia.Julia()
j.include('./simulation/n-dof/dynamics.jl')
j.using("Dynamics")
print(j.sim([1,2,3],[1,2,3]))

然而,由于Julia需要编译我正在使用的模块,这会减慢一切.

我使用的模块导出1个函数,并在内部ForwardDiff用于某些计算.它计算动态系统的导数.在可预见的未来,该模块很可能不会发生变化.我一直在阅读__precompile()__,PackageCompiler.jl但我不太了解内部工作原理以及如何使用它.

那么有没有办法在Julia系统映像中缓存模块(据我所知,这就是为什么干净的Julia启动很快)?或者将它编译为二进制文件然后以某种方式通过python调用它更好?我需要能够将参数传递给导出的函数.

我用于测试的动力学模块的一个例子:

module Dynamics
    function sim(a,b)
        return 1
    end

    export sim

end

Bogumił Kami.. 6

这是一个复杂的问题.我会给出最简单的方法.我假设您使用Julia 0.7(它应该很快发布):

A.在Julia中生成一个包; 切换到朱莉娅REPL和pkg经理会议包管理器(您切换到它使用])写:generate Ex1(Ex1将是我们包)

B.你将创建一个包骨架; 添加您需要的任何依赖项.我假设你的简单例子.然后Ex1.jl,src目录中的文件应更改为:

__precompile__()
module Ex1
export sim
sim(a,b) = 1
precompile(sim, (Int, Int))
end

C.关键行是precompile(sim, (Int, Int))强制sim函数的预编译- 你必须指定你希望函数预编译的参数类型

D.将Julia目录更改为Ex1包目录并activate .以Pkg管理器模式写入以激活包

E.同时仍处于Pkg管理模式下写入precompile; 这将触发模块的预编译.您可以DEPOT_PATH[1]compiled/v0.7/子目录中的目录中检查该Ex1目录是否已创建,并且该目录包含包含ji预编译内容的文件

如何检查包是否实际预编译?退出Julia并在Ex1package 目录中再次输入(要有一个干净的REPL).现在写:

A. activate .在Pkg经理模式下(Ex1可见)

B.回到正常的Julia模式并执行以下操作:

julia> using Ex1

julia> @time sim(1,1)
  0.000003 seconds (5 allocations: 208 bytes)
1

julia> @time sim(1,1)
  0.000003 seconds (4 allocations: 160 bytes)
1

julia> @time sim(1.0,1.0)
  0.000182 seconds (394 allocations: 26.641 KiB)
1

julia> @time sim(1.0,1.0)
  0.000002 seconds (4 allocations: 160 bytes)
1

你可以看到,sim(1,1)我们已经预编译未编译sim(Int,Int)参数,但sim(1.0,1.0)有因为我们没有预编译被编译sim(Float64,Float64).

总结:要理解的关键是你不是预编译函数而是预编译这个函数的特定方法.您必须预先编译以这种方式使用的所有方法.以上解释中的所有其余部分都是让Julia进行预编译的技术步骤.

要记住的其他问题:

你可以将包构建成系统映像,这很复杂; 在这里您有说明:https://docs.julialang.org/en/latest/devdocs/sysimg/ ; 您还可以查看您提到的PackageCompiler.jl,以帮助您完成此过程; 可以预期静态预编译将来会好得多;

为了使您的包能够预先编译,所有依赖项都必须是可预先编译的.

我希望上面的内容适合你.



1> Bogumił Kami..:

这是一个复杂的问题.我会给出最简单的方法.我假设您使用Julia 0.7(它应该很快发布):

A.在Julia中生成一个包; 切换到朱莉娅REPL和pkg经理会议包管理器(您切换到它使用])写:generate Ex1(Ex1将是我们包)

B.你将创建一个包骨架; 添加您需要的任何依赖项.我假设你的简单例子.然后Ex1.jl,src目录中的文件应更改为:

__precompile__()
module Ex1
export sim
sim(a,b) = 1
precompile(sim, (Int, Int))
end

C.关键行是precompile(sim, (Int, Int))强制sim函数的预编译- 你必须指定你希望函数预编译的参数类型

D.将Julia目录更改为Ex1包目录并activate .以Pkg管理器模式写入以激活包

E.同时仍处于Pkg管理模式下写入precompile; 这将触发模块的预编译.您可以DEPOT_PATH[1]compiled/v0.7/子目录中的目录中检查该Ex1目录是否已创建,并且该目录包含包含ji预编译内容的文件

如何检查包是否实际预编译?退出Julia并在Ex1package 目录中再次输入(要有一个干净的REPL).现在写:

A. activate .在Pkg经理模式下(Ex1可见)

B.回到正常的Julia模式并执行以下操作:

julia> using Ex1

julia> @time sim(1,1)
  0.000003 seconds (5 allocations: 208 bytes)
1

julia> @time sim(1,1)
  0.000003 seconds (4 allocations: 160 bytes)
1

julia> @time sim(1.0,1.0)
  0.000182 seconds (394 allocations: 26.641 KiB)
1

julia> @time sim(1.0,1.0)
  0.000002 seconds (4 allocations: 160 bytes)
1

你可以看到,sim(1,1)我们已经预编译未编译sim(Int,Int)参数,但sim(1.0,1.0)有因为我们没有预编译被编译sim(Float64,Float64).

总结:要理解的关键是你不是预编译函数而是预编译这个函数的特定方法.您必须预先编译以这种方式使用的所有方法.以上解释中的所有其余部分都是让Julia进行预编译的技术步骤.

要记住的其他问题:

你可以将包构建成系统映像,这很复杂; 在这里您有说明:https://docs.julialang.org/en/latest/devdocs/sysimg/ ; 您还可以查看您提到的PackageCompiler.jl,以帮助您完成此过程; 可以预期静态预编译将来会好得多;

为了使您的包能够预先编译,所有依赖项都必须是可预先编译的.

我希望上面的内容适合你.


推荐阅读
  • 开发笔记:加密&json&StringIO模块&BytesIO模块
    篇首语:本文由编程笔记#小编为大家整理,主要介绍了加密&json&StringIO模块&BytesIO模块相关的知识,希望对你有一定的参考价值。一、加密加密 ... [详细]
  • Linux重启网络命令实例及关机和重启示例教程
    本文介绍了Linux系统中重启网络命令的实例,以及使用不同方式关机和重启系统的示例教程。包括使用图形界面和控制台访问系统的方法,以及使用shutdown命令进行系统关机和重启的句法和用法。 ... [详细]
  • Android源码深入理解JNI技术的概述和应用
    本文介绍了Android源码中的JNI技术,包括概述和应用。JNI是Java Native Interface的缩写,是一种技术,可以实现Java程序调用Native语言写的函数,以及Native程序调用Java层的函数。在Android平台上,JNI充当了连接Java世界和Native世界的桥梁。本文通过分析Android源码中的相关文件和位置,深入探讨了JNI技术在Android开发中的重要性和应用场景。 ... [详细]
  • 本文介绍了在处理不规则数据时如何使用Python自动提取文本中的时间日期,包括使用dateutil.parser模块统一日期字符串格式和使用datefinder模块提取日期。同时,还介绍了一段使用正则表达式的代码,可以支持中文日期和一些特殊的时间识别,例如'2012年12月12日'、'3小时前'、'在2012/12/13哈哈'等。 ... [详细]
  • 微软头条实习生分享深度学习自学指南
    本文介绍了一位微软头条实习生自学深度学习的经验分享,包括学习资源推荐、重要基础知识的学习要点等。作者强调了学好Python和数学基础的重要性,并提供了一些建议。 ... [详细]
  • YOLOv7基于自己的数据集从零构建模型完整训练、推理计算超详细教程
    本文介绍了关于人工智能、神经网络和深度学习的知识点,并提供了YOLOv7基于自己的数据集从零构建模型完整训练、推理计算的详细教程。文章还提到了郑州最低生活保障的话题。对于从事目标检测任务的人来说,YOLO是一个熟悉的模型。文章还提到了yolov4和yolov6的相关内容,以及选择模型的优化思路。 ... [详细]
  • baresip android编译、运行教程1语音通话
    本文介绍了如何在安卓平台上编译和运行baresip android,包括下载相关的sdk和ndk,修改ndk路径和输出目录,以及创建一个c++的安卓工程并将目录考到cpp下。详细步骤可参考给出的链接和文档。 ... [详细]
  • 本文讨论了一个关于cuowu类的问题,作者在使用cuowu类时遇到了错误提示和使用AdjustmentListener的问题。文章提供了16个解决方案,并给出了两个可能导致错误的原因。 ... [详细]
  • sklearn数据集库中的常用数据集类型介绍
    本文介绍了sklearn数据集库中常用的数据集类型,包括玩具数据集和样本生成器。其中详细介绍了波士顿房价数据集,包含了波士顿506处房屋的13种不同特征以及房屋价格,适用于回归任务。 ... [详细]
  • 本文介绍了RPC框架Thrift的安装环境变量配置与第一个实例,讲解了RPC的概念以及如何解决跨语言、c++客户端、web服务端、远程调用等需求。Thrift开发方便上手快,性能和稳定性也不错,适合初学者学习和使用。 ... [详细]
  • 本文介绍了计算机网络的定义和通信流程,包括客户端编译文件、二进制转换、三层路由设备等。同时,还介绍了计算机网络中常用的关键词,如MAC地址和IP地址。 ... [详细]
  • HDFS2.x新特性
    一、集群间数据拷贝scp实现两个远程主机之间的文件复制scp-rhello.txtroothadoop103:useratguiguhello.txt推pushscp-rr ... [详细]
  • 本文介绍了如何使用python从列表中删除所有的零,并将结果以列表形式输出,同时提供了示例格式。 ... [详细]
  • C++字符字符串处理及字符集编码方案
    本文介绍了C++中字符字符串处理的问题,并详细解释了字符集编码方案,包括UNICODE、Windows apps采用的UTF-16编码、ASCII、SBCS和DBCS编码方案。同时说明了ANSI C标准和Windows中的字符/字符串数据类型实现。文章还提到了在编译时需要定义UNICODE宏以支持unicode编码,否则将使用windows code page编译。最后,给出了相关的头文件和数据类型定义。 ... [详细]
  • 如何搭建Java开发环境并开发WinCE项目
    本文介绍了如何搭建Java开发环境并开发WinCE项目,包括搭建开发环境的步骤和获取SDK的几种方式。同时还解答了一些关于WinCE开发的常见问题。通过阅读本文,您将了解如何使用Java进行嵌入式开发,并能够顺利开发WinCE应用程序。 ... [详细]
author-avatar
手机用户2502887971_699
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有