<html>

<head>

<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">

<meta name="Generator" content="Microsoft Exchange Server">

<!-- converted from rtf -->

<style><!-- .EmailQuote { margin-left: 1pt; padding-left: 4pt; border-left: #800000 2px solid; } --></style>

</head>

<body>

<font face="Calibri, sans-serif" size="2">

<div style="margin-top: 5pt; margin-bottom: 5pt; ">Hello All,</div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">I am trying to understand the following output from &#8220;lsof&#8221;.</div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">All/most of our compute nodes (pvfs2 clients) have the following output as reported by &#8220;lsof&#8221; </div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">Few of the pvfs2-client nodes have greater than 1024 open sockets for just the pvfs2-client process. Current ulimit for maximum number of open files per process is set to 1024 on all of our computer nodes.

I see this as a potential performance problem. I was wondering if any of you can help me interpret the output and fix any issues that this could be causing. </div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">&lt;lsof output&gt;</div>

<div>&#8230;&#8230;&#8230;&#8230;&#8230;</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 121u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574284 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 122u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574285 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 123u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574286 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 124u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574287 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 125u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574288 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 126u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574289 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 127u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574290 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 128u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574291 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 129u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574292 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 130u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574303 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 131u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574304 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 132u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574326 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 133u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574327 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 134u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574328 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 135u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574329 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 136u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574330 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 137u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574331 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 138u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574332 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 139u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574333 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 140u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574334 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 141u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574336 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 142u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574337 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 143u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574338 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 144u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574344 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 145u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574345 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 146u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574346 can't identify protocol</div>

<div>pvfs2-cli 27278&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; root&nbsp; 147u&nbsp;&nbsp;&nbsp;&nbsp; sock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0,5&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13574357 can't identify protocol</div>

<div>&#8230;&#8230;&#8230;&#8230;</div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">&lt;/lsof output&gt;</div>

<div><font color="#1F497D">Thank you,</font></div>

<div><font color="#1F497D">Amit</font></div>

<div>&nbsp;</div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">&nbsp;</div>

<div style="margin-top: 5pt; margin-bottom: 5pt; ">&nbsp;</div>

</font>

</body>

</html>