将MindSpore运行结果输出到log文件 - DECHIN

将MindSpore运行结果输出到log文件 - DECHIN - 博客园

我们在Linux系统下使用一些深度学习框架（如MindSpore）运行脚本的时候，经常会用一些打印输出来判断当前执行的步骤，或者是使用打印输出来定位算法问题。但是在Linux系统下程序输出其实被分成了正确输出和错误输出，如果只是在屏幕上打印的话，会将两种输出同时打印出来。但是如果要将打印的结果输出到某个文件里面的话，这时候正确输出和错误输出就是需要分开指定了。

例如我们运行这样的一个MindSpore程序：

这个程序的内容非常简单，就是打印MindSpore的软件版本。并且为了对比输出的结果，我们把MindSpore的Log等级设置为1，也就是Debug级别，这个级别下运行MindSpore程序能够最充分的打印所有的提示信息：

然后看一下直接运行的结果：

此时屏幕上输出了所有的打印信息，那么下一步我们考虑把这些打印信息储存到一个log文件里面，常规的Linux输出到文件的指令就是python3 xxx.py > test.log这样，但是运行之后发现文件的输出跟屏幕上的输出是不一样的：

按照正常来说，我们选择将程序运行的结果输出到log文件中，屏幕上是不应该有打印信息的。但是这里不仅仅有打印信息，而且在log文件中的输出只有我们打印的MindSpore版本号，并没有更多的提示信息，这并不是我们想要的。

在前面我们提到，Linux系统下程序运行的输出有分为正确输出和错误输出两种，分别用1和2两个数字来进行标记，所以上面那个案例的运行方法其实等同于：

加上一个1之后运行的结果也是一样的。这里1表示正确的输出结果，在这个案例中正确输出结果就是我们所打印的版本号信息。而2表示的是一个错误输出结果，1和2默认都是把输出结果指向到屏幕输出，可以看到第一次案例运行的时候，屏幕上既输出了版本号，也输出了提示信息。但是当我们把1指向一个文件的时候，屏幕上只剩下提示信息，而正确输出信息被保存到了log文件里面。因为MindSpore框架下所有的提示信息都被Linux归类为错误输出信息，因此如果我们需要在文件中保存这些提示信息的话，我们就需要手动的把2也指向到一个输出文件里面。更加常规的方法，我们会把1指向到一个输出文件，然后再把2指向到1，这样就可以在同一个文件中输出所有我们想要的信息：

可以看到，这里我们执行第一条指令的时候，屏幕上是没有任何输出的，而在log文件中可以看到所有的正确输出和提示信息，这也是我们的目标。

上面用到的把所有信息都输出到同一个文件里面的操作，其实有一个更加简单的写法：

效果是一致的。如果我们不想看到那么多的提示信息，可以把log等级设置的高一点：export GLOG_v=3，最高可以达到4，这样输出的内容会简洁很多：

再就是，如果我们在远程链接中去启动一个执行任务的时候，如果任务持续时间较长，而窗口留存时间又有限（通常会限定半个小时的在线时间）。此时我们可以使用“挂起”的方法在后台去运行程序：

这样的程序运行方法，可以避免因为窗口交互而中断了任务的运行，这其实也是我们需要把程序的运行结果输出到一个指定文件内的原因，方便我们随时可以查看任务的进展，而又不会收到窗口交互的影响。

在Linux运行程序时，正确输出和错误输出会分成两条路线分别输出到不同的位置，默认输出是将两者按照顺序分别输出到屏幕上，而我们也可以通过设定将二者按照顺序输出到一个指定的log文件中。同时为了避免受到窗口交互的影响，我们可以使用Linux挂起的方式来运行一个程序，这样我们既不用担心任务被中断，也可以同时不断的通过log文件内容来查看任务的运行情况，还可以通过ps指令来查看任务进程运行的时长等信息。

本文首发链接为：https://www.cnblogs.com/dechinphy/p/ouput-to-log.html

作者ID：DechinPhy

更多原著文章：https://www.cnblogs.com/dechinphy/

请博主喝咖啡：https://www.cnblogs.com/dechinphy/gallery/image/379634.html

1. https://blog.csdn.net/zhaominpro/article/details/82630528