[Erik]

Fick precis in ett Spam-mail på support[at]manufrog.com, så nu verkar Exim (mailservern) vara på G - äntligen.
(Kanske dags att justera filtret för SpamAssasin på det kontot)
Testade även att skicka ett mail från en extern adress, och det kom fram.

[Erik]

Allt såg mycket bra ut på Manu1-servern, mycket låg server-load och allt flyter på som det skulle - tills ikväll då jag hittade ett konto som skickar SPAM.

Manu1-servern är nu svartlistad i ca 24 timmar eller mer hos SpamCop. Detta innebär att mail som skickas direkt från servern kommer bli nekade av vissa operatörer.

Vi vill be ALLA våra kunder att titta över Era script-installationer så att de har den SENASTE STABILA VERSIONEN och inte en äldre version.
Äldre versioner innehåller säkerhetshål som utnyttjas av Spammare.

Och se till att AVINSTALLERA script som inte används och kanske bara installerats för att testa det.

Tillsammans kan vi lösa detta så att vi slipper detta i framtiden. Tack på förhand.

[Erik]

Manu1-servern är sedan 02-tiden inatt inte längre med i SpamCop's svartlistning. Efter att ha åtgärdat det script som skickat spam från ett av kontonen på servern samt kontaktat dom, så är ip-numret borttaget.

Hos vissa ISP'er kan det ta något dygn innan Manu1-serverns ip tas bort från deras listor om de uppdaterar sig mot SpamCop, då detta inte görs dygnet runt.
Självklart finns det fler än SpamCop, och de listorna gås igenom nu. Dock uppskattar vi om Ni mailar oss om tex. något universitet eller liknande, med egna listor, skickar tillbaka Era mail pga vi är listade hos dom.
Maila utdrag ur svaret till abuse[at]manufrog.com ( [a] byts ut till @ )

[Susanna]

Under dagen idag har vi haft problem med att logga in via ftp på manu1.
Vi har kontaktat en tekniker och förhoppningsvis har det löst sig snart.

EDIT: Har startat om själv nu med lite assistans av Erik. ;-) Nu ska det fungera igen.

[Erik]

Nu är jag här igen, problemet med FTP'n var den nya brandväggen.
Ska justera det så att det inte ska hända igen.

Ledsen för störningarna.


--- NYTT ---

Nu har jag justerat brandväggen och aktiverat den igen. Var snäll och maila oss direkt om Ni får bekymmer att logga in eller visa fil-listan via FTP på Manu1-servern.
(inte alltid så bra med nya allt för effektiva brandväggar)

Detta inlägg har redigerats av Erik: 17 november 2005 - 00:10

[Erik]

UPPDATERING FÖR ATT FÖRHINDRA SPAM OCH INTRÅNG PÅ KONTON

Vi vill åter uppmana alla våra kunder att se över sina script, och uppdatera till senaste versionen i Fantastico, eller manuellt till senaste stabila versionen.
Speciellt phpBB och Wordpress samt php-script som används för att skicka mail, tex. formulär och liknande.

Spammarna och hackers utnyttjar de säkerhetshål som finns i koden på scripten och skickar bla:
- Falska PayPal brev.
- Falska brev till AOL.com adresser.
- Skapar Falska mappar med namn som 'www.paypal.com' där man ska luras ange sitt kreditkortsnummer.

Breven innehåller allt från "klicka här och uppdatera Dina uppgifter hos PayPal. . . .skriv i Ditt kreditkortnummer, adress.."
Gör man det och klickar på spara/sänd av misstag, så måste man kontakta sin bank omedelbart och spärra kortet.
Det är så kallad "scamming".

Det har de senaste dagarna ökat lavinartat med dessa spambrev. De flesta är från ryssland och asien.

Tack på förhand för gott samarbete.

Detta inlägg har redigerats av Erik: 19 november 2005 - 12:20

[Erik]

Manu 1 - servern är nu nere.

En attack av något slag drabbar Manu1-servern just nu. Vi håller på att lokalisera detta, och ska blockera samt kontrollera så inget hänt med servern.
Vi återkommer med mer info så snart vi kan.

[Erik]

Nu är servern åter online.
Vi återkommer med mer info så snart vi kan om denna omstart vi tvingades göra pga en attack.

[Erik]

Vi är grymt ledsna för denna kvälls störningar på Manu1-servern.

Ännu ett konto hade ett äldre script som användes av en hackare. Ip'n är spårad, och scriptet inaktiverat.
När vi blockerade ip'n startades en d-dos attack mot servern, antagligen som "hämd".

Vi har även spårat den ip'n.

Vi måste nu fundera på hur vi ska gå vidare med detta med äldre script som ligger på en del konton. En del kunder har installerat scriptet för över 7 månader sedan, och bara testat det en gång, men aldrig avinstallerat det.
Det är ett perfekt lockbete för dessa spammare & hackare.

Ber Er åter igen: Uppgradera Era script, eller avinstallera dom som Ni inte använder.

Tack på förhand.

[Erik]

Just nu förekommer det störningar på Manu1-servern. Detta pga att vi scannar servern efter kvällens attack.

Vi ber om ursäkt för detta, och hoppas det snart ska vara klart.

--- Nytt ---
Nu är scanningen klar och störningarna ska strax vara borta helt.

Detta inlägg har redigerats av Erik: 22 november 2005 - 00:49

[Erik]

Manu1:
- Vi märker att många av kunderna på Manu1-servern uppgraderade sina script ikväll. Fick starta om MySQL eftersom det gick segt.
Men efter omstarten blev allt som det ska vara igen.

Vi är mycket tacksamma för att Ni vill uppgradera scripten. Det finns fortfarande alldeles för många äldre phpBB script som är i akut nöd att uppgraderas eller tas bort, så vi slipper fler attacker/intrång.

Manu2:
- Vi undersöker just nu de nätverksstörningar som förekommer för FTP på Manu2-servern.
Hastigheten är onormalt låg för både upp och nedladdning av filer.

Återkommer om detta så snart vi ser vad det kan vara.

-- -- N Y T T -- --
Upp & Nedladdningar via FTP på Manu2-servern flyter på som vanligt igen nu. Ett litet error hade uppkommit i logfilen på Ftp-servern, så en omstart plus korrigering var det som behövdes.

Detta inlägg har redigerats av Erik: 22 november 2005 - 22:35

[Erik]

Brandväggen uppdaterades på Manu2-server för några dagar sedan, och verkar strula för FTP'n sedan dess under vissa perioder.
Vi kommer installera om den och se om någon "bugrapport" finns för detta, och isåfall justera så det inte ska störa igen.

Vi ber om ursäkt för störningarna.


>>>>>>>> Nytt:
Då ska det vara åtgärdat. Har fått flera mail från glada kunder om att det fungerar igen, iallafall.

Detta inlägg har redigerats av Erik: 23 november 2005 - 22:29

[Erik]

Vi har sedan ca 5 minuter och kör i ca 5 minuter till en "fixall" för Fantastico på Manu1-servern, eftersom vissa konton ej kan uppgradera sina phpBB forum.
Under den tiden kan inte script installeras via Fantastico.

-- NYTT --

Hjälpte inte för vissa kunder som får ett felmeddelande när de ska uppgradera phpBB forumet.
Vi jobbar på att lösa detta ASAP.

-- Ännu nyare ---
Jag har lokaliserat felet med de kunder som inte kan uppgradera sina installerade phpBB forum.
Håller på att fixa detta nu - tyvärr ett konto i taget, så det tar lite tid, men bör vara klart inom 1 timme.

Detta inlägg har redigerats av Erik: 25 november 2005 - 17:26

[Erik]

Sedan ca 20:05 pågår uppdatering av Cpanel på Manu1-servern.
Svenskt språkstöd för Squirremail är orsaken till detta.

Under uppdateringen kan Cpanel ej nås under olika tidpunkter. Bör vara klart inom kort.

Vi ber om ursäkt för denna oplanerade uppdatering.

-----------------------------------------------------------------------------------
Uppgraderingen är klar, och det går att komma in på Cpanel igen.
-----------------------------------------------------------------------------------

Detta inlägg har redigerats av Erik: 25 november 2005 - 21:12

[Erik]

Oplanerat underhåll av nätverket för Server Manu1

Ett oplanerat, men absolut nödvändigt underhåll sker just nu på datacentret och det nätverk Manu1-servern ligger i.
Detta för att förbättra skyddet för attacker av olika slag.

Meddelande om dessa störningar fick vi tyvärr inte förränns nu, och vi beklagar att ingen information gått ut till alla våra kunder om detta.
Servern kan vara svår att nå under underhållet, som tyvärr beräknas hålla på i 2 timmar.


Om Ni vill nå oss under denna tid:
P.M till mig här på forumet, eller
maila till erik_nospam@psychofrog.se (ta bort "_nospam")

--- NYTT ---
Nu är arbetet klart. Och fler störningar skall ej ske.

Detta inlägg har redigerats av Erik: 27 november 2005 - 15:05

[Erik]

Åtgärder genomförda för att hindra hackare

Vi har nu tvingats inaktiverat en funktion på alla servrarna ALLOW_URL_FOPEN
Maila oss om Ni får problem pga detta

(innebär att tex. man inte kan använda en länkväg/path såsom såhär, för att få en php-fil att öppnas eller köras på hemsidan: http://www.dindomän.com/köra.php , utan den måste vara endast "köra.php" eller om den ligger i en annan mapp: /mappnamn/köra.php )

Dessutom har vi tweakat brandväggen så att den blockerar mera, samt förhindrar attacker av olika slag.
Detta för att inte fler kunder ska drabbas på någon av våra servrar.

Ftp-inloggningar kan fungera knepigt för vissa av Er, men använd "passive mode" så ska det fungera bra.

Dessa åtgärder kom sig av att en hackare utnyttjade ett script på Manu1-servern som inte uppgraderats, och via det scriptets säkerhetshål tagit sig in bakvägen på servern.
Bla. hackades sidorna genom att en extra rad lades till, läs mer här: http://forum.psychofrog.se/index.php?showt...st=0&#entry3113
Dessutom lades php-filer till i vissa mappar med filnamn såsom "earth.php" , "report.php", "include.php" , "configs.php" , "guest.php" mfl.
Alla har samma datum, så de går att upptäcka hyfsat enkelt.

De konton (6st) som hann drabbats innan vi stoppade hackaren, finns loggade, och så snart Ni kontaktar oss, återställer vi kontot, och hjälper Er vidare, om Ni inte själva har en backup tillgänglig.

Vi beklagar djupt det inträffade, och ber Er som installerat script åter igen att UPPGRADERA dom till senaste stabila versionen.
Ta även en koll på så att mapparna inte har 0777 inställda rättigheter, om det inte är absolut nödvändigt.
0755 räcker för mappar, och för filer räcker 0644.

[Erik]

Just nu ligger Apache nere på Manu4-servern.
Vi komplierar Apache för att få vissa funktioner att fungera utan problem.
Det bör snart vara klart.

Ledsen över störningarna.

--- Nytt ---
Apache är online igen, och störningarna ska nu vara begränsade.
---- ---- ---- ---- ---

Detta inlägg har redigerats av Erik: 06 december 2005 - 16:33

[Susanna]

Just nu kan det vara lite problem med MySQL medan Erik återställer konton.
Vi ber er ha överseende med detta då det kommer att ordna sig så fort alla konton är återställda.
Vi startar dock om MySQL så fort vi ser att den gått ner.

[Erik]

Hej. Nu har jag återställt klart, så störningarna skall ej förekomma mer.

[Erik]

Kära kunder!

Vi har stora bekymmer just nu på servrarna Manu4 och Manu1.

MySQL vill inte fungera som det ska på Manu1
Fantastico vill inte fungera som det ska på Manu4

Vi jobbar för fullt på dessa problem, och hoppas kunna åtgärda det under kvällen.

-----------------------------------------------------------------------------------------------------------------------------------------
MySQL håller sig *peppar, peppar* stabil på Manu1-servern, och Fantatsico fungerar på Manu4-server numera.

Vi hoppas våra åtgärder ska räcka. Störningar kan förekomma längre fram ikväll, om vi gör en eventuell uppgradering av någon mjukvara.

Detta inlägg har redigerats av Erik: 08 december 2005 - 20:40

[Erik]

MySQL servern på Manu1-servern var nere mellan 10-13 tiden.
Vi beklagar detta djupt.


---- Nytt ----

Vi har nu optimerat MySQL server mera, och lagt till ett cronjobb som ska starta MySQL servern var 6:e timme - som extra skydd mot att MySQL inte ska vara offline.


Klockan är nu 15:34 och servern är offline - inte bara MySQL servern. Vi jobbar på att få servern online igen.
Servern är inte nere, men all trafik blockeras.

Återkommer med mer info så snart vi kan.

-- Servern är åter "online" nu. Vi undersöker just nu orsaken till denna timslånga neretid.

Detta inlägg har redigerats av Erik: 10 december 2005 - 16:42

[Erik]

Manu3 servern är just nu nere. Felsökning pågår.

[Erik]

Oplanerat underhåll av nätverket för Server Manu3

Ett oplanerat, men absolut nödvändigt underhåll sker just nu på datacentret och det nätverk Manu3-servern ligger i.
Detta för att förbättra skyddet för attacker av olika slag.
(Kommer pågå ca 60 minuter till)

Meddelande om dessa störningar fick vi tyvärr inte förränns nu, och vi beklagar att ingen information gått ut till alla våra kunder om detta.

Vi har tidigare upplevt exakt samma sak för Manu1-servern, så de övriga servrarna (Manu2 & Manu4) kommer också få detta underhåll utfört framöver.
Vi har kontaktat teknikerna och begärt in datum för detta underhåll, så inte det ska komma som en överraskning nästa gång.

--- Server kommer nu åter online.

Detta inlägg har redigerats av Erik: 11 december 2005 - 14:20

[Erik]

Manu2 servern har under några dagar tillbaka haft störningar.
Det är backup'en som fått fel efter en uppgradering av Cpanel.

Under dagen idag har backup'en körts och orsakat stor belastning på servern. Vi stänger nu ner den, och belastningen skall sjunka till normalt igen.

Nomalt är den dagliga backup'en klar under natten, max fram till ungefär 8-10 på morgonen. Så att den håller på fortfarande är inte bra. Speciellt dagtid och på kvällen när många arbetar med sina konton, och många besökare är på de olika hemsidorna, blir kombinationen att köra backup ohållbar.

Vi planerar nu att byta backup-hårddisken och införa ett nytt backup-system som brukar vara klart på ca 3-5 timmar, nattetid.

Vi är mycket ledsna över dessa störningar, men vi hoppas kunna åtgärda det inom kort.

[Erik]

Backup-hårddisken byts ut på Manu2-servern vid 09:10 tiden idag

Hårddisken för backup'en byts ut på Manu2-servern vid 9-tiden idag, och innebär neretid på ca 10-15 minuter.
Vi gör detta byte pga de störningar som vi postat om tidigare i samband med att backup'en körts på servern.

-- Lite försenat blev det - klockan är nu 09:29 och hårddisken byts. Tar ca 10-15 minuter att genomföra.

Detta inlägg har redigerats av Erik: 14 december 2005 - 09:30

[Erik]

Exim (mailservern) på Manu2-servern fungerar inte som den ska, utan startas om ideligen.
Vi misstänker en korrupt fil, och ska försöka åtgärda detta så snart vi kan.

Störningar kan ske, och sker pga detta, när mail ska levereras.


---- Nytt ----
Reparerade en korrupt fil, så nu fungerar det som det ska, sedan ca 20.40 tiden.

Detta inlägg har redigerats av Erik: 14 december 2005 - 21:27

[Erik]

Manu1 servern har för närvarande Ftp-problem. Vi jobbar på problemet.


-- Nytt --

Problemet åtgärdades vid 09.30 tiden.

[Erik]

Alla konto-paket uppgraderades med högre trafikgränser ikväll, en liten sen julklapp till Er alla.

Lite 5GB/månad --> 10 GB/månad
Standard 10GB/månad --> 20 GB/månad
Power 15GB/månad --> 30 GB/månad

Vi ber att få passa på att önska Er alla en god fortsättning på julen.

[Erik]

Manu1 servern - MySQL

Tyvärr hängde sig ett script vid 06:08 tiden som fixar till rättigheter på servern, som gjorde att MySQL servern fick problem.
En manuell omstart krävdes, och nu är allt ok igen.

Scriptet körs nattetid och hade fått en korrupt fil efter en uppgradering tidigare, nu är det uppgraderat igen, och ser ut att vara helt ok.

Vi beklagar de problem detta orsakade.

[Erik]

Manu 1 servern är just nu nere, felsökning pågår.


Vi startar nu om servern, så den kommer snart vara online igen.
Det ser ut att vara en justering av brandväggen som gjorde att det mesta blockerades.

Vi är mycket ledsna över avbrottet.

Detta inlägg har redigerats av Erik: 28 december 2005 - 12:48

[Erik]

Vissa kunder kunde trots allt inte nå sina hemsidor efter omstarten som gjorde att servern var tillbaka online vid 13-tiden.
Det ska nu vara åtgärdat.

Ledsen över störningarna - att skydda sig mot hackare kan orsaka blockeringar som inte får finnas för att allt ska fungera för alla.

[Erik]

MySQL servern på MANU1-servern fick problem från 09:57 fram till 11:31. Efter omstart och andra åtgärder fungerade det normalt igen.

Felet har lokaliserats till en kunds script som överbelastade MySQL.

[Erik]

Vi kommer uppgradera Cpanel på servrarna Manu2 och Manu3 så snart som möjligt.
Den version av cpanel som är installerad där nu innehåller buggar som gör att servrarnas belastning ökar för mycket vid körning av normala funktioner.

Vi kommer försöka uppgradera under natten till fredag eller lördag.


Nytt
Uppgradering av Cpanel till senaste versionen är nu genomförd på servrarna Manu2 och Manu3.
Allt ser mycket bra ut, och vi hoppas det fortsätter så även imorgon när trafiken ökar på servern.

Detta inlägg har redigerats av Erik: 14 januari 2006 - 02:21

[Erik]

Apache på Manu3-servern är nu tillfälligt stoppad, detta pga vi måste genomföra en sökning på problemen med den höga serverbelastningen.
Detta innebär att sidorna ej kan nås.

Den höga serverbelastningen är pga av Cpanel som jag postade om tidigare.

Vi hoppas att Apache kan startas inom kort.


* Apache är åter uppe sedan 21:45, men felsökning pågår.

Detta inlägg har redigerats av Erik: 12 januari 2006 - 22:13

[Erik]

Cpanel uppgraderad på servrarna Manu2 och Manu3
Uppgradering av Cpanel till senaste versionen är nu genomförd på servrarna Manu2 och Manu3.
Allt ser mycket bra ut, och vi hoppas det fortsätter så även imorgon när trafiken ökar på servern.



Sedan 8-tiden imorse går Apache ned på Manu2-servern varje halvtimme. Kortare neretid för hemsidorna förekommer pga detta.
Vi övervakar detta, och startar upp Apache när den går ned, tills tekniker åtgärdat problemet.
Trafiken är låg, och belastningen är låg, så det har inget med det att göra. Vi återkommer med info så snart det är löst.

Detta inlägg har redigerats av Erik: 14 januari 2006 - 12:51

[Erik]

Felet med Apache på Manu2-servern är löst sedan flera timmar tillbaka. Det var tyvärr 2 kunders script som hade säkerhetshål som gjorde att en numera blockerad ip-adress skickat upp ett script som försökte hacka sig in på servern.
Scripten störde Apache så mycket att den gick ned varje gång scriptet kördes.

Inget intrång skedde någonstans på servern, förutom i de 2 mappar på dessa 2 kunders konton.
Mapparna hade "777" som file-permission, vilket aldrig är en bra komination om scriptet som använder mappen även har säkerhetshål.

Vi vill som vanligt uppmana våra kunder att se över de script Ni inte använder och avinstallera dom omgående, samt försöka uppgradera scripten Ni använder till senaste stabila versionen.

[Erik]

Manu2 servern är nere sedan kl. 11:48.

Vi undersöker orsaken just nu.

[Erik]

Oplanerat underhåll av nätverket för Server Manu2

Ett oplanerat, men absolut nödvändigt underhåll sker just nu på datacentret och det nätverk Manu2-servern ligger i.
Detta för att förbättra skyddet för attacker av olika slag.

Meddelande om dessa störningar fick vi tyvärr inte förränns nu, och vi beklagar att ingen information gått ut till alla våra kunder om detta.
Servern kan vara svår att nå under underhållet, som tyvärr beräknas hålla på i 1 timme till.



*** Servern är åter online sedan ca 6 minuter tillbaka. ***

Detta inlägg har redigerats av Erik: 15 januari 2006 - 13:46

[Erik]

Manu1 servern är just nu nere. Vi undersöker orsaken och återkommer med mer info.



NYTT:
Servern är åter upp nu 10 minuter senare, efter en omstart. Vi kommer undersöka närmare orsaken till neretiden, och återkommer med mer info här.

Ännu nyare:

Hittade felet. Ett konto hade flera Neomail sessions som hade hängt sig och tillsammans förbrukade nästan 100% av CPU.
Detta gjorde att servern gick ned i säkerhetsläge, och fick startas om.

Detta inlägg har redigerats av Erik: 16 januari 2006 - 18:50

[Erik]

Vi vill be om ursäkt för att det förekommit störningar på både servern Manu2 och Manu3 under kvällen.
Det är ovanligt många kunder på dessa servrar som valt denna kväll för att uppgradera sina script, vilket har medfört högre belastning än normalt.

Vi är glada över att dessa uppgraderingar utförs, men beklagar att det samtidigt kan orsaka störningar.
Tack för Ert tålamod och att Ni hjälper oss att säkra servrarna genom att uppgradera scripten.

[Erik]

Vi har problem med brandväggen just nu på Manu1-servern som blockerar trafiken till och från servern.

Våra tekniker jobbar på problemet och vi hoppas allt ska fungera normalt igen inom kort.

[Erik]

Manu1-servern är åter online sedan ca kl. 11 , och vi jobbar på att åtgärda så detta inte ska inträffa igen.
Vi är mycket ledsna över neretiden.

[Erik]

Manu2-servern har problem med FileManager (Fil hanteraren) som finns i Cpanel.
Det går inte att ladda upp filer. Övriga arbeten verkar fungera som det ska, men alltså inte uppladdningen.

Vi håller på tillsammans med tekniker att försöka lösa det så snabbt som möjligt.

[Erik]

Manu3-servern har störningar just nu, vi kommer starta om servern inom 15 minuter.
Orsaken är ännu ej fastställd, men vi misstänker Neomail som orsaken till dessa störningar.

Neomail innehåller tyvärr fel som gör att sessions hänger sig kvar och avslutas inte. Till slut överbelastar detta servern.
Vi överväger att avaktivera Neomail på alla våra servrar tills Neomails utvecklare kommer med en uppgradering.