<div dir="ltr">We're beginning to reach the limits of how many instances we can run on the existing compute nodes. There's a few reasons:<div><br></div><div style>1. We're getting low on disk space on a couple of nodes</div>

<div style>2. OpenStack nova, in this version, runs periodic tasks in the same thread as other actions and blocks for long periods of time. These tasks become longer and longer to run as we add more instances on a host. This causes a couple issues:</div>

<div style>    a. It causes actions like create, reboot, get-console-output, etc. to take a long time to be picked up and handled, in some cases completely timing out.</div><div style>    b. It causes instance creation to occasionally result in an error state, if all hosts block long enough in periodic tasks to have their service marked as down in the scheduler.</div>

<div style>3. We're getting low on memory on a number of hosts</div><div style><br></div><div style>Soon I'll be moving some instances from the current hosts to the new hosts to alleviate some of these issues.</div>

<div style><br></div><div style>- Ryan</div></div>