Netwerk verstoringen Opgelost
Prioriteit - Kritisch Beïnvloedingen Systeem - Alle servers

Zaterdag 15:00
Het probleem lijkt nu volledig opgelost. Het wordt veroorzaakt door onderhoud aan zgn. black fibers. Daar zijn er genoeg van dus die kunnen uit de lucht gehaald worden en automatisch worden dan voor netwerk verkeer andere routes gekozen. In die routes ging het soms mis, het kan dus zo zijn dat bijv. een mail sessie wel lukte en een website opnemen op dezelfde server niet. Normaal wordt dit niet gemerkt omdat er veel meer fibers en dus routes beschikbaar zijn. In de scripts is dit nu opgelost. Dit speelde zich overigens allemaal bij onze leveranciers af maar dat maakt voor jullie natuurlijk niet uit. Heb je nu problemen met het dan even svp. Fijn weekend!

Zaterdag 12:35
Er zijn nog klanten die problemen ervaren bij het bereiken van de hostingservers.
Dit probleem speelt zich buiten ons netwerk af, we zijn dus helaas in afwachting van een oplossing van een externe internet provider.

Zaterdag 12:00
De storing is grotendeels opgelost. Vanaf de meeste netwerken zijn de hostingservers weer te bereiken.

Zaterdag 12 maart 10:52
We zijn er nog mee bezig. Verzoek is geen losse tickets over dit onderwerp aan te maken, via deze pagina houden we je op de hoogte.
Sommigen kunnen in het geheel een website niet bereiken, bij anderen is het traag(komt door routeringen) en weer bij andere is het normaal. Hangt ook van de locatie af waar je zit.

Zaterdag 12 maart 10:36
Probleem is gedetecteerd, dit ligt niet direct bij ons maar bij een fiber van een toeleverancier. Zou geen probleem moeten opleveren omdat dit dan automatisch omgeleid zou worden via andere routes alleen werkt dit bijvoorbeeld wel via xs4all klanten maar weer niet voor kpn, ziggo of vodafone. Er wordt hard aan gewerkt. Verwachting is dat het elk moment opgelost kan zijn.

Zaterdag 12 maart 10:19

Op dit moment ervaren we netwerk storingen richtingen bijna alle hosting servers. Dit geldt echter niet voor iedere internet provider, via sommigen werkt alles normaal en via anderen niet. We onderzoeken waar dit precies vandaan komt.
Zodra er meer info is plaatsen we dit hier.

Onderhoud switches backup datacenter Opgelost
Prioriteit - Hoog Beïnvloedingen Overige - Network

Onze netwerk leverancier voert onderhoud uit op bepaalde switches in ons netwerk. Dat kan deze nacht tot gevolg hebben dat onze website of onze backupservers maximaal 3x enkele minuten niet bereikbaar kunnen zijn. Dit heeft geen gevolgen voor de websites van onze klanten. Die bevinden zich allen in een ander Datacenter. 

Met vriendelijke groet,

TEAM weboke.nl

 

Reboot enkele servers Opgelost
Prioriteit - Kritisch Beïnvloedingen Overige - Diverse servers

Ivm kernel wijzigingen zijn wij genoodzaakt vanavond enkele servers te rebooten. Dat betreft Linux2020/2021/2022/2023/2024/2025/2027/2029/2031.

 

Verhuizen servers naar ander datacenter Opgelost
Prioriteit - Kritisch Beïnvloedingen Overige - linux en windows servers

In de nacht van 16 op 17 oktober zullen we bijna alle linux en windows servers verhuizen naar een nieuw datacentrum. Hierbij zal er per server max. enkele uren downtime optreden. 

Naar verwachting zullen we voor 06.00 klaar zijn met de werkzaamheden.

Verhuizen backupservers en ns2.webawere.nl Opgelost
Prioriteit - Kritisch Beïnvloedingen Systeem - hd4 hd5 ns2

De backupservers en nameserver ns2.webawere.nl worden verhuisd naar een ander datacenter.

 

preventief onderhoud routers Opgelost
Prioriteit - Hoog Beïnvloedingen Overige - Routers

Op maandag 11 oktober zullen wij om 23:00 Nederlandse tijd gedurende maximaal 1 uur onderhoud uitvoeren aan routers in de volgende locaties:
- Gyrocenter (AMS02)

# Aanleiding
Er zijn kwetsbaarheden aangetroffen in de firmware van door ons gebruikte routers. Bij het testen van een van de gemelde kwetsbaarheden heeft de fabrikant nog een soortgelijke kwetsbaarheid gevonden. Een van deze kwetsbaarheden wordt ook actief misbruikt op het internet. Om ons netwerk weerbaar en stabiel te houden is onderhoud nodig.

# Werkzaamheden
In het aangegeven tijdvak zullen twee routers worden voorzien van nieuwe firmware. Deze routers vormen samen een redundant pad, waarbij een van de routers uit kan vallen zonder dat dit impact heeft op verkeersstromen. De hardware in de router zelf is ook redundant uitgevoerd, zodat bij uitval of onderhoud van een routing engine de router zelf blijft functioneren. De verwachte impact tijdens het onderhoud is daarom minimaal.

Storing op win77.webawere.nl Opgelost
Prioriteit - Kritisch Beïnvloedingen Server - win77.webawere.nl

Op dit moment ondervinden we helaas problemen met server win77.webawere.nl waardoor er enkele websites niet bereikbaar zijn, dit probleem heeft niet op iedere website op deze server invloed.
We zijn druk bezig dit op te lossen, zodra de problemen zijn opgelost laten we dat op deze pagina weten.

15-08-2021 20:00
We zullen backups van verschillende sites moeten teruglezen om dit probleem op te lossen, het kan hierdoor dat er tijdelijk geen files te zien zijn. Het kan zijn dat de server hier tijdelijk voor offline gehaald moet worden.

15-08-2021 20:50
We zijn gestart met het volledig restoren van de backup van gisteren. Het bestandssysteem is dusdanig verstoord dat dit niet te fixen leeg binnen redelijke tijd.
Naar verwachting is dit rond middernacht klaar. 

15-08-2021 23:34
Op dit moment geeft de restore aan nog 6 uur nodig te hebben. We houden het in de gaten.

16-08-2021 02:50
Door andere backups is het teruglezen wat vertraagd, nog 4 uur nodig vanaf nu.

16-08-2021 07:20
Helaas duurt het stuk langer dan de originele prognose, nog 1,5 uur geeft de restore nu aan dus rond 09.00.

16-08-2021 08:50
De server draait inmiddels weer normaal. Mochten er nog problemen zijn dan horen we dat graag.

Onderhoud 31 mei 23:00 tm 01 juni 05:00 Opgelost
Prioriteit - Kritisch Beïnvloedingen Systeem - Core router

Deze nacht wordt er onderhoud gepleegd aan 1 van de core routers van het datacenter. Dat betreft het gehele datacentrum. Alles is redundant uitgevoerd dus alles blijft in theorie werken maar er kunnen tijdelijke swaps optreden.

 

Spoed Onderhoud stroomvoorziening Opgelost
Prioriteit - Hoog Beïnvloedingen Systeem - Alle servers

Aankomende nacht van maandag 19 juli op dinsdag juli om 00:00 Nederlandse tijd zullen wij spoedonderhoud uitvoeren aan de stroomvoorziening van een van onze netwerkracks in GyroCenter DC2.

# Aanleiding
Afgelopen vrijdagnacht is een stroomstoring opgetreden in het tweede netwerkrack waarin de tweede helft van deze netwerkapparatuur hangt.
Hierbij zijn beide PDUs kort na elkaar uitgevallen, gelukkig had dat geen gevolgen voor onze klanten.

De PDUs zijn daar vervangen voor een nieuwer en betrouwbaarder type. Dit stond reeds op de planning maar helaas vond de uitval plaats voor de geplande datum.
Hoewel zowel netwerk als stroom redundant zijn uitgevoerd, is om bovenstaande reden besloten om de (reeds geplande) vervanging van deze PDUs
sterk vervroegd uit te voeren omdat we niet het risico willen nemen dat er uitval plaatsvindt.

# Werkzaamheden
Aankomende nacht worden beide PDUs een voor een vervangen. Alle apparatuur is redundant aangesloten op de stroomvoorziening en we verwachten dan ook
dat alle apparatuur gedurende de werkzaamheden online zal blijven.
In het geval dat de tweede PDU toch uit zou vallen tijdens het vervangen van de eerste PDU, zal de apparatuur in het tegenoverliggende rack (waar inmiddels de nieuwe PDUs hangen) de rollen overnemen. Dit zou dan niet meer dan een korte netwerkonderbreking tot gevolg moeten hebben.

*OPGELOST* Verbindingsprobleem webmail.web-oke.nl en web-oke.nl Opgelost
Prioriteit - Hoog Beïnvloedingen Systeem - webmail.web-oke.nl en web-oke.nl

Op dit moment zijn er problemen met het verbinden met web-oke.nl (met streepje), deze problemen zijn ook aanwezig op webmail.web-oke.nl. Ons nieuwe hoofddomein weboke.nl en webmail.weboke.nl (zonder streepje) werken nog wel correct.
We zijn bezig dit probleem op te lossen.



Het probleem is inmiddels opgelost, alles werkt weer correct.