<div><div dir="auto">hi again, joakim,</div></div><div dir="auto"><br></div><div dir="auto">please encourage your students to look into the latest PyTorch etc. versions on Abel.  they should not hesitate to make contact with ‘infrastructure’ for any missing pieces or technical problems!   there are also folks here in oslo who would like to start training custom ELMo networks.  if this software configuration plays out okay, it should be relatively straightforward to replicate these modules on Taito ...</div><div dir="auto"><br></div><div dir="auto">cheers, oe</div><div dir="auto"><br></div><div><br><div class="gmail_quote"><div dir="ltr">On Tue, 22 Jan 2019 at 16:52 Joakim Nivre <<a href="mailto:joakim.nivre@lingfil.uu.se">joakim.nivre@lingfil.uu.se</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Apparently, one problem is that PyTorch is only available for Python 3.5 on Abel, while for example ELMo requires Python 3.6. However, this may be independent on the CPU/GPU issue and may not be any different on Taito. I will try to gather more information and keep you posted.<br>
<br>
Joakim<br>
<br>
On 2019-01-22, 11:45, "Stephan Oepen" <<a href="mailto:oe@ifi.uio.no" target="_blank">oe@ifi.uio.no</a>> wrote:<br>
<br>
    dear joakim,<br>
<br>
    thanks for the heads-up about incoming account requests!<br>
<br>
    but what made you think that TensorFlow and PyTorch gpu support on<br>
    Abel is lacking?  the NLPL installations of these frameworks<br>
    (‘nlpl-tensorflow’ and ‘nlpl-pytorch’) should work transparently on<br>
    both cpu and gpu nodes.  if there are issues with these modules,<br>
    please encourage your students to contact us at<br>
    ‘<a href="mailto:infrastructure@nlpl.eu" target="_blank">infrastructure@nlpl.eu</a>’.<br>
<br>
    that being said, Taito has more and newer gpus (though also tends to<br>
    have lots more gpu users :-), so having accounts on both sides is not<br>
    a bad thing.  i believe the difference in gpu architecture (K20 on<br>
    Abel vs. K80 and P100 on Taito) is not critical to what we typically<br>
    do, but i recall tentative benchmarks of OpenNMT (PyTorch-based)<br>
    achieving training throughputs around 50 percent higher on Taito than<br>
    on Abel.<br>
<br>
    if your students or others at uppsala come up with more detailed<br>
    (contrastive) experience reports, i think we would be interested in<br>
    that among the infrastructure task force too.<br>
<br>
    best wishes, oe<br>
<br>
    On Tue, Jan 22, 2019 at 9:14 AM Joakim Nivre <<a href="mailto:joakim.nivre@lingfil.uu.se" target="_blank">joakim.nivre@lingfil.uu.se</a>> wrote:<br>
    ><br>
    > Hi,<br>
    ><br>
    ><br>
    ><br>
    > We have two new research assistants, Johannes Gontrum and Elena Fano. They already have accounts on Abel (because they are also master’s students at Uppsala University), but they need access to Taito as well to be able to run Tensor Flow and/or PyTorch on GPUs (which I understand is still not possible on Abel).<br>
    ><br>
    ><br>
    ><br>
    > They will submit the form as instructed on <a href="http://wiki.nlpl.eu/index.php/Infrastructure/resources" rel="noreferrer" target="_blank">http://wiki.nlpl.eu/index.php/Infrastructure/resources</a> with the hope that Martin can approve their applications.<br>
    ><br>
    ><br>
    ><br>
    > Best,<br>
    ><br>
    > Joakim<br>
    ><br>
    ><br>
    ><br>
    ><br>
    ><br>
    ><br>
    ><br>
    ><br>
    ><br>
    > När du har kontakt med oss på Uppsala universitet med e-post så innebär det att vi behandlar dina personuppgifter. För att läsa mer om hur vi gör det kan du läsa här: <a href="http://www.uu.se/om-uu/dataskydd-personuppgifter/" rel="noreferrer" target="_blank">http://www.uu.se/om-uu/dataskydd-personuppgifter/</a><br>
    ><br>
    > E-mailing Uppsala University means that we will process your personal data. For more information on how this is performed, please read here: <a href="http://www.uu.se/en/about-uu/data-protection-policy" rel="noreferrer" target="_blank">http://www.uu.se/en/about-uu/data-protection-policy</a><br>
<br>
<br>
</blockquote></div></div>