<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;
        color:black;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p
        {mso-style-priority:99;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;
        color:black;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0in;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";
        color:black;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;
        color:black;}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:Consolas;
        color:black;}
span.EmailStyle21
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body bgcolor="white" lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D">I’ve not set it up yet, I’m asking about the possibility of doing it and will it work.  I have two resource pools available:<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D">One is two servers, each has 4x 6 core amd opteron 8643 se and 64GB RAM<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D">The other is 4 servers, each has 2x quad core xeon E5540<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D">Both use a shared storage system built from mainly 7200 rpm desktop drives, I’m thinking about putting together a storage array using all SSDs.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D"><o:p> </o:p></span></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:windowtext">From:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:windowtext"> Spce-user [mailto:spce-user-bounces@lists.sipwise.com]
<b>On Behalf Of </b>Marek Cervenka<br>
<b>Sent:</b> Wednesday, May 18, 2016 3:19 AM<br>
<b>To:</b> spce-user@lists.sipwise.com<br>
<b>Subject:</b> Re: [Spce-user] virtualizing sip:provider CE<o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal">hi,<br>
can you share info about your virtualization? versions?<br>
can you share your test-suite ?<br>
<br>
marek<br>
<br>
Dne 17.5.2016 v 16:31 Andreas Granig napsal(a):<o:p></o:p></p>
</div>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hi,<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>My latest performance tests on a Dell R320 (4 cores @2.2GHz) with a pair<o:p></o:p></pre>
<pre>of PRO as only VMs on that host and 1 vCPU per host with 8GB RAM shows<o:p></o:p></pre>
<pre>that we top out at around 15 regs/sec and 10 calls/sec, with the CPU<o:p></o:p></pre>
<pre>being 100% utilized. IO is not a problem in this setup, iowait is pretty<o:p></o:p></pre>
<pre>much 0 with the disk utilization maxing out at ~50% in peaks.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>The number of regs it can do without calls is somewhere around 80<o:p></o:p></pre>
<pre>regs/sec, but if you add some calls, it degrades quite quickly.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Whether or not it's still sufficient depends on your number of<o:p></o:p></pre>
<pre>subscribers you plan to put onto one VM, and their typical Expiration<o:p></o:p></pre>
<pre>time for registers. All in all it could still easily do ~10k subscribers<o:p></o:p></pre>
<pre>with a 1 hour re-registration rate, where you'd end up with ~1800<o:p></o:p></pre>
<pre>concurrent calls at 10calls/sec. Not too bad for 1 vCPU. Your mileage<o:p></o:p></pre>
<pre>might vary though.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>As a comparison, on the same server in bare metal (4 cores @2.2GHz at<o:p></o:p></pre>
<pre>32GB RAM) you can do 250 regs/sec with 50 calls/sec without issues.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Andreas<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre><o:p> </o:p></pre>
<pre><o:p> </o:p></pre>
<pre>On 05/17/2016 01:22 PM, Alex Lutay wrote:<o:p></o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Dear Stephen,<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>This is super to hear you trust Sipwise NGCP as a basement for your own<o:p></o:p></pre>
<pre>company! In short there is no strict limitations to run on<o:p></o:p></pre>
<pre>virtual environment. While there some known minor issue there, like<o:p></o:p></pre>
<pre>sems eats ~5% CPU when doing nothing (on polling new sip packats), etc.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Sure the hardware and software you choose for virtualisation is very<o:p></o:p></pre>
<pre>important. The IO speed and latency is always a problem of any virtual<o:p></o:p></pre>
<pre>env. Also VM neighbours sitting on the same hardware can create lack of<o:p></o:p></pre>
<pre>IO in the most unexpected moment. So, be careful with sharing hardware<o:p></o:p></pre>
<pre>with other VMs. NGCP relies on IO a lot.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>For the high performance and high availability we recommend you to try<o:p></o:p></pre>
<pre>our PRO solution. It guarantees 50 cps rate providing high availability<o:p></o:p></pre>
<pre>for already established calls. Feel free to contact <a href="mailto:sales@sipwise.com">sales@sipwise.com</a><o:p></o:p></pre>
<pre>for more information.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>In the same time please share your experience with SPCE in virtual<o:p></o:p></pre>
<pre>environment. We see the good theoretical possibilities there.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Thank you!<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>On 05/17/2016 05:20 AM, Stephen Donovan wrote:<o:p></o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>I’ve been down this road before with limited success…however…I’m now in<o:p></o:p></pre>
<pre>a position where I have a lot more resources to do things right at my<o:p></o:p></pre>
<pre>disposal.  Is it still recommended that I run spce bare metal..or is<o:p></o:p></pre>
<pre>virtualization an option?  Any bottlenecks I should be looking at ? <o:p></o:p></pre>
<pre>storage latency?...what about running on an array of SSDs vs spinning<o:p></o:p></pre>
<pre>disks… my main storage system is consumer grade 7200rpm drives.  I can<o:p></o:p></pre>
<pre>put together a set of 15k rpm SAS drives or SSDs easily. My big idea is<o:p></o:p></pre>
<pre>high availability.  I have an opportunity to set up a test environment<o:p></o:p></pre>
<pre>that can easily be moved between bare metal and vm for testing.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Some (fuzzy) memories from a few years ago:<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>SPCE seemed to do okay running as a VM on xenserver until we reached a<o:p></o:p></pre>
<pre>certain threshold of concurrent calls, I don’t remember that number..but<o:p></o:p></pre>
<pre>it wasn’t very big.  It seemed that IO wait was climbing at times,<o:p></o:p></pre>
<pre>causing call processing issues.  The storage system in question was a<o:p></o:p></pre>
<pre>ZFS RAID Z2 array comprised of 7200rpm desktop class drives that were<o:p></o:p></pre>
<pre>not the fastest in the world by far.  It was at that time I decided to<o:p></o:p></pre>
<pre>move back to bare metal and not look back.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Now that I have my own company, I’m again looking at virtualization as<o:p></o:p></pre>
<pre>an option for high(er) availability being that a single hardware failure<o:p></o:p></pre>
<pre>will not take the infrastructure down.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>What amount of concurrent calls and/or calls per second could I expect<o:p></o:p></pre>
<pre>to process given a certain amount of hardware?<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>The physical hosts in question will be dell R610 boxes with 2x xeon<o:p></o:p></pre>
<pre>x5550, 32GB RAM.  I plan to only run voice servers on this platform,<o:p></o:p></pre>
<pre>I’ll have another resource pool for other workloads.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>Since my last experience, xenserver has been greatly improved, as I’m<o:p></o:p></pre>
<pre>experiencing running most of my other servers on it at the current time.<o:p></o:p></pre>
<pre><o:p> </o:p></pre>
<pre>If it’s not a good idea, tell me so, I’ll  go another way, I’m looking<o:p></o:p></pre>
<pre>for experiences.<o:p></o:p></pre>
</blockquote>
<pre><o:p> </o:p></pre>
<pre><o:p> </o:p></pre>
</blockquote>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>Spce-user mailing list<o:p></o:p></pre>
<pre><a href="mailto:Spce-user@lists.sipwise.com">Spce-user@lists.sipwise.com</a><o:p></o:p></pre>
<pre><a href="https://lists.sipwise.com/listinfo/spce-user">https://lists.sipwise.com/listinfo/spce-user</a><o:p></o:p></pre>
</blockquote>
<p class="MsoNormal"><o:p> </o:p></p>
<p><o:p> </o:p></p>
<pre>-- <o:p></o:p></pre>
<pre>---------------------------------------<o:p></o:p></pre>
<pre>Marek Cervenka<o:p></o:p></pre>
<pre>=======================================<o:p></o:p></pre>
</div>
</body>
</html>