:: Server Meddelanden :: Senaste nytt om servrarna postas här
#122
Postad 11 december 2005 - 13:02
#123
Postad 11 december 2005 - 13:52
Ett oplanerat, men absolut nödvändigt underhåll sker just nu på datacentret och det nätverk Manu3-servern ligger i.
Detta för att förbättra skyddet för attacker av olika slag.
(Kommer pågå ca 60 minuter till)
Meddelande om dessa störningar fick vi tyvärr inte förränns nu, och vi beklagar att ingen information gått ut till alla våra kunder om detta.
Vi har tidigare upplevt exakt samma sak för Manu1-servern, så de övriga servrarna (Manu2 & Manu4) kommer också få detta underhåll utfört framöver.
Vi har kontaktat teknikerna och begärt in datum för detta underhåll, så inte det ska komma som en överraskning nästa gång.
--- Server kommer nu åter online.
Detta inlägg har redigerats av Erik: 11 december 2005 - 14:20
#124
Postad 12 december 2005 - 19:06
Det är backup'en som fått fel efter en uppgradering av Cpanel.
Under dagen idag har backup'en körts och orsakat stor belastning på servern. Vi stänger nu ner den, och belastningen skall sjunka till normalt igen.
Nomalt är den dagliga backup'en klar under natten, max fram till ungefär 8-10 på morgonen. Så att den håller på fortfarande är inte bra. Speciellt dagtid och på kvällen när många arbetar med sina konton, och många besökare är på de olika hemsidorna, blir kombinationen att köra backup ohållbar.
Vi planerar nu att byta backup-hårddisken och införa ett nytt backup-system som brukar vara klart på ca 3-5 timmar, nattetid.
Vi är mycket ledsna över dessa störningar, men vi hoppas kunna åtgärda det inom kort.
#125
Postad 14 december 2005 - 07:16
Hårddisken för backup'en byts ut på Manu2-servern vid 9-tiden idag, och innebär neretid på ca 10-15 minuter.
Vi gör detta byte pga de störningar som vi postat om tidigare i samband med att backup'en körts på servern.
-- Lite försenat blev det - klockan är nu 09:29 och hårddisken byts. Tar ca 10-15 minuter att genomföra.
Detta inlägg har redigerats av Erik: 14 december 2005 - 09:30
#126
Postad 14 december 2005 - 20:27
Vi misstänker en korrupt fil, och ska försöka åtgärda detta så snart vi kan.
Störningar kan ske, och sker pga detta, när mail ska levereras.
---- Nytt ----
Reparerade en korrupt fil, så nu fungerar det som det ska, sedan ca 20.40 tiden.
Detta inlägg har redigerats av Erik: 14 december 2005 - 21:27
#127
Postad 15 december 2005 - 07:46
-- Nytt --
Problemet åtgärdades vid 09.30 tiden.
#128
Postad 25 december 2005 - 23:15
Lite 5GB/månad --> 10 GB/månad
Standard 10GB/månad --> 20 GB/månad
Power 15GB/månad --> 30 GB/månad
Vi ber att få passa på att önska Er alla en god fortsättning på julen.
#129
Postad 28 december 2005 - 08:39
Tyvärr hängde sig ett script vid 06:08 tiden som fixar till rättigheter på servern, som gjorde att MySQL servern fick problem.
En manuell omstart krävdes, och nu är allt ok igen.
Scriptet körs nattetid och hade fått en korrupt fil efter en uppgradering tidigare, nu är det uppgraderat igen, och ser ut att vara helt ok.
Vi beklagar de problem detta orsakade.
#130
Postad 28 december 2005 - 12:34
Vi startar nu om servern, så den kommer snart vara online igen.
Det ser ut att vara en justering av brandväggen som gjorde att det mesta blockerades.
Vi är mycket ledsna över avbrottet.
Detta inlägg har redigerats av Erik: 28 december 2005 - 12:48
#131
Postad 28 december 2005 - 14:50
Det ska nu vara åtgärdat.
Ledsen över störningarna - att skydda sig mot hackare kan orsaka blockeringar som inte får finnas för att allt ska fungera för alla.
#132
Postad 08 januari 2006 - 11:58
Felet har lokaliserats till en kunds script som överbelastade MySQL.
#133
Postad 12 januari 2006 - 21:14
Den version av cpanel som är installerad där nu innehåller buggar som gör att servrarnas belastning ökar för mycket vid körning av normala funktioner.
Vi kommer försöka uppgradera under natten till fredag eller lördag.
Nytt
Uppgradering av Cpanel till senaste versionen är nu genomförd på servrarna Manu2 och Manu3.
Allt ser mycket bra ut, och vi hoppas det fortsätter så även imorgon när trafiken ökar på servern.
Detta inlägg har redigerats av Erik: 14 januari 2006 - 02:21
#134
Postad 12 januari 2006 - 21:41
Detta innebär att sidorna ej kan nås.
Den höga serverbelastningen är pga av Cpanel som jag postade om tidigare.
Vi hoppas att Apache kan startas inom kort.
* Apache är åter uppe sedan 21:45, men felsökning pågår.
Detta inlägg har redigerats av Erik: 12 januari 2006 - 22:13
#135
Postad 14 januari 2006 - 02:23
Uppgradering av Cpanel till senaste versionen är nu genomförd på servrarna Manu2 och Manu3.
Allt ser mycket bra ut, och vi hoppas det fortsätter så även imorgon när trafiken ökar på servern.
Sedan 8-tiden imorse går Apache ned på Manu2-servern varje halvtimme. Kortare neretid för hemsidorna förekommer pga detta.
Vi övervakar detta, och startar upp Apache när den går ned, tills tekniker åtgärdat problemet.
Trafiken är låg, och belastningen är låg, så det har inget med det att göra. Vi återkommer med info så snart det är löst.
Detta inlägg har redigerats av Erik: 14 januari 2006 - 12:51
#136
Postad 14 januari 2006 - 20:29
Scripten störde Apache så mycket att den gick ned varje gång scriptet kördes.
Inget intrång skedde någonstans på servern, förutom i de 2 mappar på dessa 2 kunders konton.
Mapparna hade "777" som file-permission, vilket aldrig är en bra komination om scriptet som använder mappen även har säkerhetshål.
Vi vill som vanligt uppmana våra kunder att se över de script Ni inte använder och avinstallera dom omgående, samt försöka uppgradera scripten Ni använder till senaste stabila versionen.
#137
Postad 15 januari 2006 - 12:17
Vi undersöker orsaken just nu.
#138
Postad 15 januari 2006 - 12:51
Ett oplanerat, men absolut nödvändigt underhåll sker just nu på datacentret och det nätverk Manu2-servern ligger i.
Detta för att förbättra skyddet för attacker av olika slag.
Meddelande om dessa störningar fick vi tyvärr inte förränns nu, och vi beklagar att ingen information gått ut till alla våra kunder om detta.
Servern kan vara svår att nå under underhållet, som tyvärr beräknas hålla på i 1 timme till.
*** Servern är åter online sedan ca 6 minuter tillbaka. ***
Detta inlägg har redigerats av Erik: 15 januari 2006 - 13:46
#139
Postad 16 januari 2006 - 18:13
NYTT:
Servern är åter upp nu 10 minuter senare, efter en omstart. Vi kommer undersöka närmare orsaken till neretiden, och återkommer med mer info här.
Ännu nyare:
Hittade felet. Ett konto hade flera Neomail sessions som hade hängt sig och tillsammans förbrukade nästan 100% av CPU.
Detta gjorde att servern gick ned i säkerhetsläge, och fick startas om.
Detta inlägg har redigerats av Erik: 16 januari 2006 - 18:50
#140
Postad 16 januari 2006 - 20:41
Det är ovanligt många kunder på dessa servrar som valt denna kväll för att uppgradera sina script, vilket har medfört högre belastning än normalt.
Vi är glada över att dessa uppgraderingar utförs, men beklagar att det samtidigt kan orsaka störningar.
Tack för Ert tålamod och att Ni hjälper oss att säkra servrarna genom att uppgradera scripten.
#141
Postad 18 januari 2006 - 10:13
Våra tekniker jobbar på problemet och vi hoppas allt ska fungera normalt igen inom kort.
#142
Postad 18 januari 2006 - 11:35
Vi är mycket ledsna över neretiden.
#143
Postad 19 januari 2006 - 07:40
Det går inte att ladda upp filer. Övriga arbeten verkar fungera som det ska, men alltså inte uppladdningen.
Vi håller på tillsammans med tekniker att försöka lösa det så snabbt som möjligt.
#144
Postad 19 januari 2006 - 21:09
Orsaken är ännu ej fastställd, men vi misstänker Neomail som orsaken till dessa störningar.
Neomail innehåller tyvärr fel som gör att sessions hänger sig kvar och avslutas inte. Till slut överbelastar detta servern.
Vi överväger att avaktivera Neomail på alla våra servrar tills Neomails utvecklare kommer med en uppgradering.
#145
Postad 19 januari 2006 - 23:32
Vi har efter många timmars åtgärder och felsökningar sett diverse saker som orsakat dessa störningar, detta har Ni kunnat läsa i denna tråd på forumet.
Vi kämpar för att få samtliga servrar stabila igen. Just nu är statusen följande:
Manu1-servern: Neomail har uppgraderats pga den överbelastning scriptet orsakar - vi övervakar servern för att se om uppgraderingen hjälper - hittills ser allt bra ut.
Manu2-servern: Servern har sedan igår fungerat mycket bra - det som är kvar är Filhanteraren och "upload file(s)" funktionen.
Manu3-servern: Neomail kommer uppgraderas, men vi vet ännu inte till 100% om det hjälper eftersom vi endast testat något dygn på Manu1-servern. Dock är det Neomail-problemet i kombination med de egna backup'er man kan göra i sin Cpanel som orsakar hög serverbelastning på servern, ser vi efter att kontrollerat loggarna.
Som tillägg för just Manu3-servern som drabbades av störningar ikväll, vill vi be om ursäkt till de kunder som drabbades extra länge av störningarna än de flesta.
Efter att Manu3-servern omstartades och blev stabil kl. 22.34 kunde istort sett alla konton och domäner nås - m en ett fåtal kunde inte det pga ett fel på namnservern.
Vi upptäckte tyvärr inte det förränns en av de drabbade kunderna mailade oss.
Tack för att Ni rapporterar fel till oss.
#146
Postad 20 januari 2006 - 14:45
Problemet låg i att ClamAntivirus spärrade uppladdningarna.
Vi har nu tagit bort funktionen som fanns att kunna scanna sina filer med ClamAntivirus tills dess att en uppgraderad version kommer. Det är i nuläget oklart när det blir av tyvärr. ClamAntivirus fungerade till en början bra, men är i den senaste versionen inte riktigt kompatibel med cpanel-versionen.
Vi kommer även att ta bort ClamAntivirus funktionen att kunna scanna sina filer efter virus på Manu3-servern.
Detta för att vi även där ser problem med att ClamAntivirus. Och vi vill minimera riskerna för att servern åter ska få störningar.
#147
Postad 23 januari 2006 - 21:34
Under attacken arbetade servern för högvarv och bla. hemsidorna laddades segt, detta håller nu på att normaliseras.
Vi övervakar nu servern och ser ganska stor aktivitet, men ingen mer attack just nu.
#149
Postad 28 januari 2006 - 15:38
Servern är nu stabil igen och inga störningar förekommer.
#150
Postad 30 januari 2006 - 09:09
Ett konto med phpNuke installerat överbelastade servern så pass mycket (använde bla. 50% av RAM & 80% av CPU) under natten att den dagliga backup'en är försenad. Vi mailade då kontoägaren.
Men på morgonen, när trafiken ökade, orsakade detta konto ännu större störningar för servern, så vi har nu tvingats suspendera kontot i väntan på svar från kunden.
Vi ber om ursäkt för eventuella störningar som kan förekomma innan backup'en är klar.
Och vi vill åter uppmana alla som har phpNuke eller andra script installerade att kontrollera Era versioner, och se efter om det finns några uppgraderingar.
Det är bla. oerhört mycket Spammande som sker via osäkra script just nu.
#151
Postad 31 januari 2006 - 10:47
Hoppas detta ska vara löst inom kort.
-- Nytt --
Servern är åter uppe, och våra tekniker undersöker vad som orsakade neretiden.
Detta inlägg har redigerats av Erik: 31 januari 2006 - 10:57
#152
Postad 31 januari 2006 - 22:39
Det var ett konto som använde Neomail som överbelastade servern. Vi har tvingats suspendera detta konto för att få servern stabil.
Servern är numera uppe igen.
Detta inlägg har redigerats av Susanna: 31 januari 2006 - 22:50
#153
Postad 07 februari 2006 - 00:35
Datacentren där våra servrar finns placerade i har under gårdagen och idag haft stora nätverksstörningar. Flera av våra kunder har upplevt att sidorna laddats oerhört långsamt. (Vissa ISP'er/Operatörer får sämre hastighet från/till servrarna pga detta fel)
Felet är ännu inte avhjälpt tyvärr, men teknikerna försöker att åtgärda detta så snabbt som möjligt.
Vi ber om ursäkt för dessa störningar, och hoppas de ska lösas under natten.
#154
Postad 10 februari 2006 - 23:28
Det var en av Internetleverantörerna som hade problem.
Datacentren använder flera internetleverantörer, och skulle någon av de vara nere styrs all trafik om till de som fungerar.
Men eftersom ingen var nere, utan allt såg ok ut, styrdes ingen trafik om.
Vi hoppas detta inte skall hända igen. Om det gör det, tveka inte att rapportera detta till oss!
support[at]manufrog.com eller logga in på http://support.manufrog.com
#155
Postad 12 februari 2006 - 11:16
Den exakta orsaken har vi ännu inte fått information om.
Vi diskuterar nu detta med Surpasshosting för att få till en permanent lösning på detta problem.
-- NYTT --
Störningar pågår fortfarande för vissa av våra servrar - teknikerna jobbar för fullt på att lösa detta.
Detta inlägg har redigerats av Erik: 12 februari 2006 - 11:33
#156
Postad 12 februari 2006 - 11:43
Vi är mycket ledsna över detta, och hoppas det ska vara löst inom kort.
-- Det verkar som om vissa svenska ISP'er inte kan nå några av våra servrar ännu. Vi vet ej vad detta beror på, men vi hoppas det ska lösa sig omgående.
Nätverksstörningarna är nu lösta
Klockan 14:35 löstes till slut nätverksproblemen. En av de största internetleverantörerna "Time Warner Telecom" hade stora problem, vilket gjorde att många av största ISP'erna i Sverige, bland annat Telia, Bredbandsbolaget och Comhem, inte kunde kommunicera med servrarna på datacentren.
Detta skall nu vara permanent löst enligt teknikerna.
Vi beklagar att denna oerhört långa tid med störningar förekom idag och hoppas vi aldrig mer ska behöva uppleva så många timmar igen.
Detta inlägg har redigerats av Erik: 12 februari 2006 - 14:49
#157
Postad 14 februari 2006 - 22:48
Vi har nu gått igenom loggen, och sett att det bla. var flera kunders "B2 Evolution's" "hitlogs" tabeller som blivit korrupta och därmed orsakade fel som till slut överbelastade servern. Dessa är nu reparerade, och vi ska åter gå igenom loggen om några timmar för att se så inga fler databaser/tabeller orsakar fel som kan göra så MySQL servern går ner eller måste startas om.
Det går att själv kontrollera sina databasers tabeller, och reparera dom, genom att logga in på Cpanel och klicka på MySQL Databaser. Sedan vidare in i phpMyAdmin.
DETTA REKOMMENDERAR VI ENDAST ER SOM JOBBAT FÖRUT i phpMyAdmin ATT FÖRSÖKA ER PÅ! DET ÄR ALLT FÖR ENKELT ATT RADERA TABELLER ELLER DATABASER i phpMyAdmin - SÅ MISSTAG KAN SKE GANSKA LÄTT.
Vi hoppas att MySQL störningarna skall vara åtgärdade nu. Vi är mycket ledsna över störningarna.
#158
Postad 19 februari 2006 - 22:38
Vi försöker få servern normal igen så snabbt vi kan. Vi ber om ursäkt för störningarna.
Nytt -
Just nu körs fsck på servern för att upptäcka och rätta till eventuella fel. Detta kan tyvärr ta en stund, men vi hoppas allt ska bli normalt igen snart.
Mer nyheter
Teknikerna felsöker servern och under natten kommer det periodvis ej gå att logga in på Cpanel. Andra störningar kan även förekomma.
Vi ber om ursäkt för dessa.
Detta inlägg har redigerats av Erik: 20 februari 2006 - 01:56
#159
Postad 20 februari 2006 - 07:34
Ett script med säkerhetshål var orsaken, och ett kontaktformulär användes av Spammare att skicka tusentals Spam till AOL adresser.
#160
Postad 22 februari 2006 - 21:12
NYTT: Servern, eller rättare sagt Apache är sedan några minuter tillbaka upp igen. Vi undersöker för fullt vad som orsakade denna neretid, återkommer så snart vi ser orsaken.
Detta inlägg har redigerats av Erik: 22 februari 2006 - 21:31
#161
Postad 22 februari 2006 - 21:44
När ip'n som bombarderade servern isolerats, böt "server terroristen" ip-nummer och fortsatte sin attack - dock utan framgång då Apache var stoppad.
Först kl. 21:25 lyckades teknikerna helt blockera attacken och Apache kunde åter startas.
Vi hoppas nu att teknikerna lyckats stoppa detta permanent. Vi ska se över forumet i fråga och kommer självklart kontakta innehavaren av detta.
#162
Postad 24 februari 2006 - 16:52
Tekniker är kontaktade och vi hoppas det snart ska vara löst.
#163
Postad 24 februari 2006 - 22:32
#164
Postad 25 februari 2006 - 01:29
Vi ber om ursäkt för denna störning.
#165
Postad 01 mars 2006 - 15:41
Tekniker undersöker just nu vad som behöver göras för att få servern stabil igen.
Servern bör vara uppe inom kort.
Nytt Servern är åter uppe nu, och tekniker åtgärdar nu problemet som orsakade belastningen.
Detta inlägg har redigerats av Erik: 01 mars 2006 - 15:58