Re: MongoS server not starting also not balancing Server's sharding metadata manager failed asking for instance is manually reset

From: Kevin Adistambha <kevinadi@xxxxxxxxxxx>
To: mongodb-user <mongodb-user@xxxxxxxxxxxxxxxx>
Date: Sun, 8 May 2016 23:32:38 -0700 (PDT)
Why ads?


Hi Viren,

This issue was not consistent as sometimes we see it on MongoS or some 
times on replica set..

3 Config Servers 4 MongoS yup alll serevrs showed same issue.

Network connection was down from primary to replica for some time and we 
restored it. But primary could not connect to resorted secondary.

We took a restart of whole cluster and then thyis error was gone

From what I have seen so far, I believe the underlying issue is network 
connectivity/configuration within your deployment. My understanding so far 
is:

   - all servers are experiencing the same issue intermittently 
   - the issue seems to be spread across the whole cluster (i.e. sometimes 
   on mongos and other times on individual mongod) 
   - network connectivity issues within a replica set 
   - error messages in the form of “HostNotFound: unable to resolve DNS for 
   host” or “Couldn’t get a connection within the time limit” 
   - restarting the cluster seems to solve the problem for a while (likely 
   due to the refresh of the DNS cache) 

All these signs seems to point that the issue is in your network setup 
(e.g. DNS setup, network hardware issues, etc.) and not in your MongoDB 
deployment. The output of sh.status() doesn’t seem to show any notable 
issue, and:

One more thing we also confirmed the dbhash of all config servers and it 
was all fine.

seems to indicate that the cluster is operating normally, the config 
servers are consistent with each other (which is vital to the operation of 
a sharded cluster), and cluster balancing seems to operate normally as well.

Is there a pattern to this issue? For example, did you observe these 
network-related errors happening more often in some particular time, during 
particular load, etc.?

On another note, I would recommend you to upgrade to the latest in the 3.2 
series, which is currently 3.2.6 
<https://docs.mongodb.com/manual/release-notes/3.2/#apr-28-2016> for 
bugfixes and improvements.

Best regards,
Kevin


-- 
You received this message because you are subscribed to the Google Groups "mongodb-user"
group.

For other MongoDB technical support options, see: https://docs.mongodb.org/manual/support/
--- 
You received this message because you are subscribed to the Google Groups "mongodb-user" group.
To unsubscribe from this group and stop receiving emails from it, send an email to mongodb-user+unsubscribe@xxxxxxxxxxxxxxxx.
To post to this group, send email to mongodb-user@xxxxxxxxxxxxxxxx.
Visit this group at https://groups.google.com/group/mongodb-user.
To view this discussion on the web visit https://groups.google.com/d/msgid/mongodb-user/662bb9fd-c239-4912-bd27-b484b44d80f8%40googlegroups.com.
For more options, visit https://groups.google.com/d/optout.
Why ads?