
<HTML>

<HEAD>

<TITLE>PVFS server won't start </TITLE>

</HEAD>

<BODY>

<FONT FACE="Courier, Courier New"><SPAN STYLE='font-size:11pt'>One of our PVFS servers crashed and now it won&#8217;t start back. &nbsp;It was previously working since June 2 until today&#8217;s crash. &nbsp;Any ideas on how to fix it? &nbsp;I was running the 2.8.1 released version, but I also tried the HEAD version with no change in symptoms.<BR>

<BR>

>From the server log:<BR>

<BR>

[D 06/29 13:49] PVFS2 Server version 2.8.1pre1-2009-06-26-182521 starting.<BR>

[E 06/29 13:49] dbpf_dspace_iterate_handles_op_svc: Invalid argument<BR>

[E 06/29 13:49] Error adding handle range 4323455642275676148-4611686018427387890,8935141660703064036-9223372036854775778 to filesystem pvfs2-fs<BR>

[E 06/29 13:49] Error: Could not initialize server interfaces; aborting.<BR>

[E 06/29 13:49] Error: Could not initialize server; aborting.<BR>

<BR>

My config file:<BR>

<BR>

<BR>

&lt;Defaults&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;UnexpectedRequests 50<BR>

&nbsp;&nbsp;&nbsp;&nbsp;EventLogging none<BR>

&nbsp;&nbsp;&nbsp;&nbsp;EnableTracing no<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogStamp datetime<BR>

&nbsp;&nbsp;&nbsp;&nbsp;BMIModules bmi_tcp<BR>

&nbsp;&nbsp;&nbsp;&nbsp;FlowModules flowproto_multiqueue<BR>

&nbsp;&nbsp;&nbsp;&nbsp;PerfUpdateInterval 1000<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ServerJobBMITimeoutSecs 30<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ServerJobFlowTimeoutSecs 30<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ClientJobBMITimeoutSecs 300<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ClientJobFlowTimeoutSecs 300<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ClientRetryLimit 60 <BR>

&nbsp;&nbsp;&nbsp;&nbsp;ClientRetryDelayMilliSecs 10000<BR>

&nbsp;&nbsp;&nbsp;&nbsp;PrecreateBatchSize 512<BR>

&nbsp;&nbsp;&nbsp;&nbsp;PrecreateLowThreshold 256<BR>

&lt;/Defaults&gt;<BR>

<BR>

&lt;Aliases&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss001-1 tcp://oss001-1:3334<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss001-2 tcp://oss001-2:3335<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss001-3 tcp://oss001-3:3336<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss001-4 tcp://oss001-4:3337<BR>

<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss002-1 tcp://oss002-1:3334<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss002-2 tcp://oss002-2:3335<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss002-3 tcp://oss002-3:3336<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss002-4 tcp://oss002-4:3337<BR>

<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss003-1 tcp://oss003-1:3334<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss003-2 tcp://oss003-2:3335<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss003-3 tcp://oss003-3:3336<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss003-4 tcp://oss003-4:3337<BR>

<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss004-1 tcp://oss004-1:3334<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss004-2 tcp://oss004-2:3335<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss004-3 tcp://oss004-3:3336<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Alias oss004-4 tcp://oss004-4:3337<BR>

&lt;/Aliases&gt;<BR>

<BR>

<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss001-1<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost1<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss001-1.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss001-2<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost2<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss001-2.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss001-3<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost3<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss001-3.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss001-4<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost4<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss001-4.log<BR>

&lt;/ServerOptions&gt;<BR>

<BR>

<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss002-1<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost5<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss002-1.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss002-2<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost6<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss002-2.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss002-3<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost7<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss002-3.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss002-4<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost8<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss002-4.log<BR>

&lt;/ServerOptions&gt;<BR>

<BR>

<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss003-1<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost9<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss003-1.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss003-2<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost10<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss003-2.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss003-3<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost11<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss003-3.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss003-4<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost12<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss003-4.log<BR>

&lt;/ServerOptions&gt;<BR>

<BR>

<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss004-1<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost13<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss004-1.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss004-2<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost14<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss004-2.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss004-3<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost15<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss004-3.log<BR>

&lt;/ServerOptions&gt;<BR>

&lt;ServerOptions&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Server oss004-4<BR>

&nbsp;&nbsp;&nbsp;&nbsp;StorageSpace /ost16<BR>

&nbsp;&nbsp;&nbsp;&nbsp;LogFile /var/log/pvfs2-server.oss004-4.log<BR>

&lt;/ServerOptions&gt;<BR>

<BR>

&lt;Filesystem&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;Name pvfs2-fs<BR>

&nbsp;&nbsp;&nbsp;&nbsp;ID 373672578<BR>

&nbsp;&nbsp;&nbsp;&nbsp;RootHandle 1048576<BR>

&nbsp;&nbsp;&nbsp;&nbsp;FileStuffing yes<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;MetaHandleRanges&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-1 3-288230376151711745<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-2 288230376151711746-576460752303423488<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-3 576460752303423489-864691128455135231<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-4 864691128455135232-1152921504606846974<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-1 1152921504606846975-1441151880758558717<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-2 1441151880758558718-1729382256910270460<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-3 1729382256910270461-2017612633061982203<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-4 2017612633061982204-2305843009213693946<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-1 2305843009213693947-2594073385365405689<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-2 2594073385365405690-2882303761517117432<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-3 2882303761517117433-3170534137668829175<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-4 3170534137668829176-3458764513820540918<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-1 3458764513820540919-3746994889972252661<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-2 3746994889972252662-4035225266123964404<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-3 4035225266123964405-4323455642275676147<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-4 4323455642275676148-4611686018427387890<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;/MetaHandleRanges&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;DataHandleRanges&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-1 4611686018427387891-4899916394579099633<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-2 4899916394579099634-5188146770730811376<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-3 5188146770730811377-5476377146882523119<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss001-4 5476377146882523120-5764607523034234862<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-1 5764607523034234863-6052837899185946605<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-2 6052837899185946606-6341068275337658348<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-3 6341068275337658349-6629298651489370091<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss002-4 6629298651489370092-6917529027641081834<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-1 6917529027641081835-7205759403792793577<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-2 7205759403792793578-7493989779944505320<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-3 7493989779944505321-7782220156096217063<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss003-4 7782220156096217064-8070450532247928806<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-1 8070450532247928807-8358680908399640549<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-2 8358680908399640550-8646911284551352292<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-3 8646911284551352293-8935141660703064035<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Range oss004-4 8935141660703064036-9223372036854775778<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;/DataHandleRanges&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;StorageHints&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;TroveSyncMeta no <BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;TroveSyncData no<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;TroveMethod alt-aio<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;/StorageHints&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;Distribution&gt;<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Name simple_stripe<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Param strip_size<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;Value 1048576<BR>

&nbsp;&nbsp;&nbsp;&nbsp;&lt;/Distribution&gt;<BR>

&lt;/Filesystem&gt;<BR>

<BR>

<BR>

Thanks,<BR>

Randy<BR>

</SPAN></FONT>

</BODY>

</HTML>