Hieronder vindt u een overzicht van alle interventies. Als u meer informatie wenst, aarzel dan niet om ons te contacteren.
Volg ook onze twitter feed voor de service meldingen!
Geplande / Huidige interventies
(geen)
Voorbije interventies
2010/07/29 - 18:00 - Reboot php01 en php02
Deze webservers zullen gereboot worden om 12:30 en maximaal 5 minuten offline zijn.
Update 1 - 11:50: Op vraag van een partner hebben we deze interventie verschoven van 12:30 naar 18:00.
Update 2 - 18:05: Beide machines zijn gereboot. Dit onderhoud is afgesloten.
2010/07/27 - 12:00 - Email problemen op MSTORE01
Wegens een onvoorzien probleem zullen sommige klanten tijdelijk hun mailboxen niet kunnen uitlezen. Deze server wordt momenteel herstart en zal binnen een kwartiertje terug beschikbaar zijn.Er zal geen email verloren zijn.
De oorzaak hiervan wordt ook asap onderzocht.
Update 1 - 12:16: Alle services zijn hersteld. In principe mag u geen hinder meer ondervinden. De oorzaak wordt verder onderzocht om dit in de toekomst te voorkomen.
2010/07/22 - Migratie van hostings (#1012714)
Wat?
U heeft het misschien al gemerkt: bij iLibris zitten we niet stil qua vernieuwingen op het vlak van infrastructuur. Binnen dat kader zullen we op zeer korte termijn ook de shared hosting server x-ili-03 (gedeelte van de Presence en Bronze PHP hostings) volledig migreren naar nieuwe, snellere machines in onze private cloud. U heeft als partner een aantal hostings op deze server, vandaar dat u deze boodschap ontvangt.
Concreet
De verhuis zal doorgaan in de namiddag en avond van donderdag 22/07/2010. We verhuizen alle applicaties, sites, data en gekoppelde databanken. Alle hostings die conform onze richtlijnen opgesteld zijn, zouden geen problemen mogen ervaren. Wij zullen dit natuurlijk ook zoveel mogelijk testen. De hostings zullen maar voor een zeer beperkte tijd onbeschikbaar zijn voor de bezoekers. Het is mogelijk dat FTP toegang langer beperkt is om geen problemen bij de overzetting te veroorzaken.
Wat moet u doen?
In principe zorgen wij voor alles en hoeft u dus niets te doen, tenzij u een hosting met een specifieke configuratie heeft. In dat geval nemen wij eerstdaags nog contact met u op. U kan best gedurende de interventie updates via de backoffices van de sites beperken. Ondanks onze controles nadien, kan het zijn dat we iets over het hoofd hebben gezien. Aarzel dan zeker niet om dit ons even te melden opdat we dat zo snel mogelijk kunnen rechtzetten.
Update 1 - 15:50: Alles gaat goed. Reeds 30% is gemigreerd, getest en terug live gezet.
Update 2 - 17:00: Alle sites, op enkele specifieke gevallen na, zijn gemigreerd, getest en terug live gezet. FTP toegang volgt gauw.
Update 3 - 18:00: Alle sites zijn gemigreerd en FTP is terug actief. De uitzonderingen volgen we apart op.
2010/06/16 17:00 - Upgrade service systeem
In het kader van toekomstige uitbreidingen, hebben we ons service systeem (gekend van de [Ticket#xxxx]-mails) geupgrade naar de nieuwste versie. Deze upgrade is feilloos verlopen zonder enige impact op de dienstverlening.
2010/05/22 02:20 - Unscheduled downtime web7.ilibris.be (.44 /Linux)
web7.ilibris.be is momenteel down. We onderzoeken de oorzaak. Een aantal websites is hierdoor tijdelijk onbeschikbaar.
Update 1 - 09:00: Naar alle waarschijnlijkheid is er een probleem met de RAID controller van de master server van deze virtuele machine. Verdere acties worden ondernomen om de geaffecteerd sites zo spoedig mogelijk terug online te brengen.
Update 2 - 14:00: Bovenop het eerder gemelde probleem met web7, ondervindt een van onze storage arrays momenteel ook problemen. Ook hier gaat het om een hardware issue, specifiek met de geheugenmodules. Ons devOPS team is bezig met deze problemen.
Update 3 - 19:00: We hebben toegang gekregen tot alle gegevens op beide machines en deze kunnen vrijwaren (er is dus geen data-verlies, ware het niet dat er ook nog de backups waren). We onderzoeken nu de volgende stappen. We willen toch even vermelden dat de huidige situatie, het gelijktijdig verlies van 2 machines, hoogst uitzonderlijk is en daardoor ook niet zo makkelijk te herstellen is.
Update 4 - 20:00: Gezien de onstabiliteit van de desbetreffende hardware (SAN en server) hebben we besloten om de omgevingen de herconstrueren op de nieuwe infrastructuur. Dit zal nog wel heel wat werk zijn, maar het lijkt ons de meest betrouwbare oplossing. We starten hier morgen om 7:30 mee.
Update 5 - zo 11:56: De eerste betrokken sites beginnen terug online te komen. Doorheen de dag zullen alle betrokken services hersteld worden.
Update 6 - zo 18:02: We zijn volop bezig met het overzetten van data en zetten stelselmatig services online. Het kan nog duren tot morgen voor alles operationeel is. Gelieve ook op te merken dat de Online Backup gedeeltelijk invloed kon ondervinden van de voorbije problemen.
Update 7 - ma 01:50: Alle sites zijn overgezet en actief op een nieuwe server. Initiële tests tonen weinig tot geen problemen. Voor een zeer beperkt aantal sites zijn er aanpassingen nodig die wij niet kunnen uitvoeren (b.v. DNS buiten onze controle), in welk geval we u direct zullen contacteren met de specifieke nodige aanpassing. Totdat onze tests afgerond zijn, houden we FTP toegang bewust disabled.
Update 8 - di 10:50: Normaal zijn alle services terug 100% beschikbaar, inclusief FTP. Wij beschouwen deze interventie als gesloten.
2010/05/13 10:00 - Online Backup Upgrade
We plannen een system upgrade van onze Online Backup infrastructuur. Tijdens het downtime window zal het onmogelijk zijn om nieuwe backups te lopen, bestaande backups terug te zetten, of wijzigingen aan te brengen in uw configuratie.
Een nieuwe versie van de client zal beschikbaar gemaakt worden, maar bestaande clients zullen zonder probleem blijven werken. Enkel aan Windows 7 gebruikers wordt aangeraden ook de client op korte termijn te upgraden.
Update: Deze upgrade is succesvol afgerond.
2010/01/21 09:30 - Email vertraging
Wegens een probleem op de email infrastructuur is er momenteel een deel van onze klanten die vertraagd email zullen ontvangen. We zijn volop bezig met onderzoeken van de mogelijke oorzaak. Er zijn geen mails verloren gegaan.
Update: De oorzaak is gevonden (een specifiek subproces dat niet was heropgestart na een update) en verholpen. We zullen verder onderzoeken hoe dit is kunnen gebeuren. Alle email zou ondertussen correct afgeleverd moeten zijn.
Vermoedelijk zijn de problemen begonnen rond 00:00. Normaal moeten we dit soort problemen detecteren, maar om tot hiertoe nog onbekende reden is dit niet gedetecteerd geweest. Ook dit wordt onderzocht.
Update: de achterliggende oorzaak van dit probleem is geïdentificeerd en een aantal maatregelen zijn getroffen om dit probleem (en een aantal andere die theoretisch mogelijk zijn) te voorkomen en, moest het zich toch voordoen, sneller te detecteren.
2010/01/01 21:00 - SpamAssassin Y2K10 bug
Door een datum gerelateerde bug in onze anti-spam scanners zijn er vandaag mogelijk een verhoogd aantal mails verkeerdelijk als spam gemarkeerd. Al onze mailservers zijn ondertussen gepatched.
Analyse van de logs toont aan dat de impact van het probleem beperkt was: het relatieve aantal tegengehouden mails valt binnen de normale grenzen. Enkel het aantal false positives (legitieme email waarvan het onderwerp gemarkeerd wordt met de melding "SPAM") was licht hoger dan normaal.
2009/12/15 17:40 - Unscheduled downtime web7.ilibris.be (.44 / Linux)
De shared hosting server web7 heeft door een samenloop van omstandigheden ongeplande downtime ondervonden. Onze monitors zijn nog scherper gezet, zodat dit soort van cumulatieve problemen in de toekomst sneller gedetecteerd kunnen worden, waardoor downtime vermeden kan worden.
De service is down geweest tussen 17:40 en 18:05.
2009/11/13 12:30 - Patching van web6.ilibris.be (.37 / Windows)
Wegens een dringende security update zullen we deze middag enkele patches installeren op deze server. De te verwachten downtime is 15 minuten.
De interventies is iets later van start gegaan dan gepland, en succesvol beëindigd. De service is down geweest tussen 12:48 en 12:51.
+32 3 226 21 51
- Our DevOps have a big smile on their faces thanks to a mystery lover, check it out! Thank you! #sysadminday http://yfrog.com/j5374rj — 1 dag 17 uur ago
- Volg zeker @ilibris_service voor updates omtrent interventies, migraties, etc! — 2 dagen 11 uur ago
