准备使用python工具进行机器学习
flashtool的Python项目详细描述
闪光Python箱
一些现成的python机器学习工具
安装
pip install flashtool
记录器(到文件)
对于每个打印功能,我们打印一个副本到文件,而不更改整个文件。在
^{pr2}$filepath
:输出路径。默认值:“/日志.txt““mode
:写模式,例如w,w+,a,a+。默认值:“w”stdout
:捕获哪个打印源。默认值:“系统标准输出““
示例:
fromflashtoolimportLoggerimportsyssys.stdout=Logger("path/to/log/file/log.txt")sys.stdout=Logger("path/to/log/file/log.txt","w")sys.stdout=Logger("path/to/log/file/log.txt","w",sys.stdout)
电子邮件模块
默认发件人:gtflashauto@gmail.com
。你需要密码。在
# Function apidefsend_email(port=587,password=None,sender_email="gtflashauto@gmail.com",smtp_server="smtp.gmail.com",receiver_email=None,subject="Subject",message="Hello! ",attachment=None):...# Examplefromflashtoolimportsend_emailsend_email(receiver_email="xxx@gmail.com",subject="Hi",message="first email")
跟踪工作
追踪你的工作。完成后给你发一封电子邮件。在
Tracking by PID
- 第1步:通过
ps
找到你的工作pid,例如ps aux | grep python
- 第二步:
fromflashtoolimporttrackpidtrackpid(12345,5,"xxx@gmail.com")trackpid([1357,2468],5,"xxx@gmail.com")
API:
deftrackpid(pid,checktime=1,receiver_email=None,sender_email="gtflashauto@gmail.com",msg=""):...
pid
:pid或pidschecktime
:每隔checktime
秒检查一次pidmsg
:附加消息
Pythorch实用工具
GPU使用率
importflashtoolasflash;flash.check_torch_memory(brief=True)
brief
:短消息(默认:Flase)
自动脚本运行
importflashtoolasflash;basescript='script/run.sh'config={"DATA":"subset5"}flash.run_script(basescript,config)
逐线剖面计时
fromflashtoolimportline_time_profiler@line_time_profiler()deff(n=1000):a=[1for_inrange(n)]b=sum(a)f()f(10000)classC:@line_time_profiler()deff(self,n=1000):a=[1for_inrange(n)]b=sum(a)ins=C()ins.f()ins.f(10000)@line_time_profiler(stop=True)deff(n=1000):a=[1for_inrange(n)]b=sum(a)f()
- 项目
标签: