<div dir="ltr">OK, thanks for the tips. Knowing the particulars of how SLURM might be causing this is extremely helpful. I'll try to just empty /tmp before running MAKER on each node, as you suggest. I suspect that will work but will work on getting MPI running as well.<div><br></div><div>Thanks!</div><div>Ben</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jan 7, 2017 at 6:29 PM, Carson Holt <span dir="ltr"><<a href="mailto:carsonhh@gmail.com" target="_blank">carsonhh@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">If you use the MPI settings, then all processes will share a single temporary directory, otherwise they each will have a separate one since they can’t intercommunicate.<br>
<br>
MAKER tries to cleanup its files on finish or failure, but if you or the system kill it with certain signals, then it is reaped immediately by the system and not allowed to finish cleaning up. Signals 9 and 19 for example will do that. If a failure is related to the drive being full or a memory issue, then your system may be hitting it with one of these uncatchable signals. For example SLURM may use signal 9 or 19 if a process fails to respond to signal 15 in a timely manner (i.e. MAKER may be removing files, but SLURM gets impatient and kills it more aggressively because it thinks the process is not responding). You can always try and empty /tmp as the first step in your batch script, and it will remove files belonging to you before launching MAKER.<br>
<br>
—Carson<br>
<div><div class="h5"><br>
<br>
<br>
<br>
> On Jan 6, 2017, at 6:22 PM, Benjamin Rubin <<a href="mailto:brubin@fieldmuseum.org">brubin@fieldmuseum.org</a>> wrote:<br>
><br>
> Hi all,<br>
><br>
> Maker keeps filling up the /tmp directories on the cluster I am using. It appears that most of the space is taken with many versions of various blast databases. I suspect that this issue is partly due to my not using MPI and instead launching multiple instances of maker (typically 16) in the same working directory. However, it appears that maker is also leaving some of these databases in /tmp even after it has died or been killed and they are piling up.<br>
><br>
> I am submitting my jobs to the cluster via SLURM but have installed maker locally rather than system-wide. My system administrator is going to try creating a larger locally mounted directory on some of the nodes for me but I wanted to check to see if you have any other suggestions to solve the issue or make sure that maker cleans up /tmp as aggressively as possible.<br>
><br>
> I am using maker3-beta.<br>
><br>
> Thanks for any help,<br>
> Ben<br>
</div></div>> ______________________________<wbr>_________________<br>
> maker-devel mailing list<br>
> <a href="mailto:maker-devel@box290.bluehost.com">maker-devel@box290.bluehost.<wbr>com</a><br>
> <a href="http://box290.bluehost.com/mailman/listinfo/maker-devel_yandell-lab.org" rel="noreferrer" target="_blank">http://box290.bluehost.com/<wbr>mailman/listinfo/maker-devel_<wbr>yandell-lab.org</a><br>
<br>
</blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse">_____________________________________________________<br>Benjamin ER Rubin, PhD</span><div><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse"><span style="border-collapse:separate;font-family:arial;font-size:small"><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse">Committee on Evolutionary Biology</span></div><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse">University of Chicago</span></div><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse"><a href="http://benrubin.org" target="_blank"><font color="#0658b5">b</font>enrubin.org</a></span></div></span></span></div><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse"><br></span></div><div><span style="font-family:arial,sans-serif;font-size:13px;border-collapse:collapse">Division of Insects<br>Zoology Department<br>Field Museum of Natural History<br>1400 South Lake Shore Drive<br>Chicago, IL 60605<br>USA<br>Office: (312) 665-7776</span></div></div></div></div></div></div>
</div>