Performance test:

Om het snelheidsverschil te meten tussen de normale versie en de PRO versie heb ik 5 verschillende test procedures bedacht. Voordat we hierin duiken is het goed om de uitgangspunten duidelijk te hebben. Onderstaand vind je de specificaties van de gebruikte Homey's:

Systeem met load (volle Homey):

APPS:

• Aqara & Xiaomi
• Beacon
• Brel motors
• Buitenradar
• CountDown
• Danalock
• Enelogic and Youless
• Eurotronic
• Fibaro
• Greenwave Systems
• Heiman
• Homey Harmony Hub
• IFTTT
• Neo Coolcam
• Nest
• Pushover
• Simple log
• Virtuele apparaten
• Zonnepanelen

In totaal dus 21 APPS.

Apparaten:

• Aqara (zigbee): 21 stuks
• BT: 3 BT trackers
• Brel: 1x gordijnen (433Mhz)
• Danalock: 1x Danalock v3
• Youless: 2 meters
• Fibaro: 37 stuks
• Greenwave: 3 stuks
• Heiman: 5 stuks
• Harmony: 1 hub
• Nest: 1x thermostaat, 2x rookmelder, 1 Hello, 1x indoor cam
• Neo Coolcam: 21 stuks
• Zipato: 9 stuks
• Zonnepanelen: 1 Omnik

In totaal dus 110 apparaten. De eindpunten (temperatuursensoren, vochtmeters, etc) heb ik niet geteld maar dit zijn er over de 150 stuks. 

Flows:

• 212 flows

Deze flows draaien natuurlijk niet allemaal tegelijk maar een hoop draaien wel continue om waardes te controleren.

De testen die ik gedaan heb zijn zowel op bovenstaande installatie van APP's/apparaten/flows als met een nieuwe lege Homey. Dit geldt ook voor de PRO versie, deze heb ik dus ook "leeg" getest en "vol". 

Systeem no load (lege Homey):

APPS:

• Neo coolcam

In totaal dus 1 APP.

Apparaten:

• Neo Coolcam

In totaal dus 1 apparaat. 

Flows:

• 1 flow

Bovenstaande configuraties zijn om een systeem te laten zien welke belast wordt en een systeem welke weinig belast wordt. Als laatste wil ik melden dat ik zowel gemeten heb na een herstart en op verschillende tijden na deze reboot.

Meetmethode:

Ik heb dit gemeten metl een stopwatch maar omdat dit soms om 1/100ste seconde gaat is dit wat lastig. Daarom heb ik ook de tijden opgenomen en dit via de computer terug gerekend/bekeken.

1) Reactie tijd Z-Wave:

Om te kijken of de reactie tijd tussen de Homey en Homey PRO verschillend is gebruik ik een Neo Coolcam. Goed om te melden is dat deze rechtstreeks communiceert met de controller. Ik heb op verschillende tijden getest, dit om drukte op het netwerk uit te sluiten.

Het verschil tussen een lege Homey en een lege Homey Pro is niet al te groot maar het verschil met een volle is echt enorm. Je ziet hierin duidelijk dat de normale Homey nog druk was en hierdoor ook niet het verkeer op een snelle manier kon afhandelen.

2) Test met flow:

Wat vooral opvalt is dat de Homey moeite heeft met het uitvoeren van een flow waarbij veel apparaten tegelijk aangezet moeten worden. Ik heb dus een flow gemaakt waarbij 6 apparaten aangezet worden. Dit zijn de volgende apparaten:

• 1x Fibaro Dimmer 2
• 1x Fibaro RGBW
• 1x Fibaro Relay Switch 2
• 1x Neo Coolcam Power plug
• 3x Greenwave powerplug

Ik meet de tijd bij het starten van de flow tot aan in APP aangeeft dat alles aan staat.

Het verschil tussen de normale Homey en de Pro is niet zo heel groot hier (0,2 seconden).

3) Openen flow:

De volgende test is het openen van een flow. Je zou denken dat het openen van een flow geen performance problemen zou moeten geven. Nou, ik heb een paar flows die lastig laden in de normale versie. Deze flow bestaat uit 11 kaarten. Waarbij 5 kaarten een andere flow op moeten starten. Dit vergt natuurlijk wat rekenkracht om deze erbij te zoeken (zeker als je meer dan 50 flows heb die geselecteerd kunnen worden).

Ook hier zie je dat de PRO weer de sneller is. Het scheelt bijna een 1 seconden met de normale versie.

4) Onderdeel algemeen:

Om de lokale snelheid te testen heb ik naar iets gezocht waarbij er echt wat van de controller gevraagd moet worden. Dit heb ik gevonden in het onderdeel "Algemeen". Dit vind je bij de instellingen.

Op deze pagina worden naast wat algemene gegevens ook het geheugen gebruik en opslag opgevraagd.

Zoals verwacht is de PRO hier ook weer sneller. Het scheelt bijna 4 seconden.

5) Reboot:

De op een na laatste test is om te kijken hoe snel het systeem opstart. Hierbij stop ik de stopwatch als alle apparaten en APP's zijn ingeladen. 

Hier zie je ook weer dat de PRO sneller opstart. Tussen de snelste tijd en langzaamste tijd zit bijna 2 min.

6) Systeem load:

Bij de laatste test heb ik op vaste tijden gekeken naar de belasting van het systeem. Deze test is wel wat lastig omdat er toevallig op dat moment iets kan starten. Daarom heb ik 5 dagen lang de belasting bijgehouden op 9 verschillende tijden. Onderstaande tabel geeft de gemiddelde waardes weer.

Niet heel verrassend maar hier je ook dat alles minder belast wordt.