Forfatter Emne: netplads: web3 servicevindue  (Læst 4528 gange)

0 Medlemmer og 1 Gæst læser dette emne.

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
netplads: web3 servicevindue
« Dato: 05-11-2011 10:32:16 »
Note, HUSK hvis du selv kører DNS så har serveren skiftet IP til:
77.66.53.146
skift nu!


Hej

Du får denne mail fordi du har tilknyttet en email til dit webhotel på netplads.dk (web3.netplads.dk). Emailen er en teknisk beskrivelse, og udsendt til alle netplads.dk kunder på web3.


Vi beklager den senere tids problemer med webserveren web3. Vi må erkende at flere forsøg på at genskabe og stabilisere service er slået fejl.

Løsningen, som vi ser det nu, er en ny server som vi vil teste og klargøre indtil weekenden. Den nye server er placeret på dansk grund og har været en del af vores plan, men må nu fremskynde processen noget.

Vi påbegynder migreringen af systemet fra lørdag nat kl 22. Det er forventeligt at det tager mindre end servicevinduet, dog vil vi gerne være sikre på at alt er på plads. Derfor er servicevinduet helt frem til 8 mandag morgen, i alt 34 timer.

Det som er galt:
Vores aftale med en leverandør har vist sig ikke at være overholdt, og derfor har vi oplevet at en disk i et raid1 sæt er gået fra optimal, til degraded uden der blev taget action på det. Yderligere er disk 2 nu ved forsøg på resyncing begyndt at udvise tegn på diskfejl, og det er dermed ikke muligt at resynce mirroret, og ved forsøg derpå smider maskinen hele mirrorsættet.
Vores hostingpartner har i de sidste par uger forsøgt at løse problemet ved skift af diverse ting uden om disken, dette har også medført noget nedetid.

De har nu her for en uges tid siden vagt at give op.

Det som skal ske:
Set i lyset af vores dårlig erfaring med vores hostingpartner har vi nu valgt at flytte hele web3, til det formål er der sket nogle ting i kulisserne.

Vi har OS backup af maskinen (alt ud over /home, som er der hvor alle hjemmesiderne og alt indholdet er). Dette inkludere OGSÅ mysql databaser.

Denne backup opdateres hver time.

Vi har bacula (http://bacula.org) backup af hele maskinen, OGSÅ /home. Denne backup opfrisker vi pt 1-4 gange i døgnet.

Øvelsen nu på lørdag, og søndag går ud på at:

1) lukke ned for det defekte setup (stoppe med at modtage mails, og tillade ændringer af feks mysqldatabase via webinterfaces mm). Alle services stoppes.
2) final backups gennemføres
3) kopiere og installere OS backup'en og få den i luften på nyt setup. estimeret ca 2 timer (testet).
4) starte restore af /home fra bacula, ukendt estimat. Restore skal færdiggøres førend der kan åbnes for sluserne. Dette er derfor punktet som kan blive problematisk.
5) skifte DNS til ny ip (vi har med vilje nedsat ttl på web3.netplads.dk til 10 minutter).
6) Drikke en pilser.




Kort version af information:

Servicevindue start : lørdag den 5 nov kl 2200
Berørte services : imap, pop3, ftp, http, mysql, smtp (alle services)
Service vindue slut : mandag d 7 nov. kl 0800

Vi skal til slut bede jer om IKKE at forsøge at lave backups via interfacet, dette ville helt sikekrt sløve processen

Vi beklager gener dette måtte medføre.

Mvh Larsen Data
« Senest Redigeret: 09-11-2011 11:11:37 af czar »
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #1 Dato: 05-11-2011 20:25:19 »
Hej

Du får denne mail fordi du har tilknyttet en email til dit webhotel på netplads.dk (web3.netplads.dk). Emailen er en teknisk beskrivelse, og udsendt til alle netplads.dk kunder på web3.


Vi beklager den senere tids problemer med webserveren web3. Vi må erkende at flere forsøg på at genskabe og stabilisere service er slået fejl.

Løsningen, som vi ser det nu, er en ny server som vi vil teste og klargøre indtil weekenden. Den nye server er placeret på dansk grund og har været en del af vores plan, men må nu fremskynde processen noget.

Vi påbegynder migreringen af systemet fra lørdag nat kl 22. Det er forventeligt at det tager mindre end servicevinduet, dog vil vi gerne være sikre på at alt er på plads. Derfor er servicevinduet helt frem til 8 mandag morgen, i alt 34 timer.

Det som er galt:
Vores aftale med en leverandør har vist sig ikke at være overholdt, og derfor har vi oplevet at en disk i et raid1 sæt er gået fra optimal, til degraded uden der blev taget action på det. Yderligere er disk 2 nu ved forsøg på resyncing begyndt at udvise tegn på diskfejl, og det er dermed ikke muligt at resynce mirroret, og ved forsøg derpå smider maskinen hele mirrorsættet.
Vores hostingpartner har i de sidste par uger forsøgt at løse problemet ved skift af diverse ting uden om disken, dette har også medført noget nedetid.

De har nu her for en uges tid siden vagt at give op.

Det som skal ske:
Set i lyset af vores dårlig erfaring med vores hostingpartner har vi nu valgt at flytte hele web3, til det formål er der sket nogle ting i kulisserne.

Vi har OS backup af maskinen (alt ud over /home, som er der hvor alle hjemmesiderne og alt indholdet er). Dette inkludere OGSÅ mysql databaser.

Denne backup opdateres hver time.

Vi har bacula (http://bacula.org) backup af hele maskinen, OGSÅ /home. Denne backup opfrisker vi pt 1-4 gange i døgnet.

Øvelsen nu på lørdag, og søndag går ud på at:

1) lukke ned for det defekte setup (stoppe med at modtage mails, og tillade ændringer af feks mysqldatabase via webinterfaces mm). Alle services stoppes.
2) final backups gennemføres
3) kopiere og installere OS backup'en og få den i luften på nyt setup. estimeret ca 2 timer (testet).
4) starte restore af /home fra bacula, ukendt estimat. Restore skal færdiggøres førend der kan åbnes for sluserne. Dette er derfor punktet som kan blive problematisk.
5) skifte DNS til ny ip (vi har med vilje nedsat ttl på web3.netplads.dk til 10 minutter).
6) Drikke en pilser.




Kort version af information:

Servicevindue start : lørdag den 5 nov kl 2200
Berørte services : imap, pop3, ftp, http, mysql, smtp (alle services)
Service vindue slut : mandag d 7 nov. kl 0800

Vi skal til slut bede jer om IKKE at forsøge at lave backups via interfacet, dette ville helt sikekrt sløve processen

Vi beklager gener dette måtte medføre.

Mvh Larsen Data

pga en mindre uforudset udfordring i vores nye hosting facilitet har vi besluttet at udskyde flytningen med 48 timer
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #2 Dato: 07-11-2011 11:49:38 »
pga en mindre uforudset udfordring i vores nye hosting facilitet har vi besluttet at udskyde flytningen med 48 timer

vi afventer pt OK fra det nye hosting facilitet, samtidig med vi refresher backups med mindst muligt interval
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #3 Dato: 07-11-2011 14:16:24 »
vi afventer pt OK fra det nye hosting facilitet, samtidig med vi refresher backups med mindst muligt interval


vi har fået ok, vi afventer pt success på første store incredimental backup for i dag, derfetr vil nr 2, 3 og 4 sættes på før dagen er slut..

jeg ville nok forsøge at starte kl 21 og dermed rykke programmet frem med 1 time, i forsøget på IKKE at bruge for meget af tirsdagens vågne timer på migreringen.
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline cccd.dk

  • 12 o'clock flasher
  • *
  • Indlæg: 2
    • Classic Corvette Club Denmark
Sv: netplads: web3 servicevindue
« Svar #4 Dato: 07-11-2011 17:50:57 »
Vi krydser fingre  :lol:

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #5 Dato: 08-11-2011 07:37:04 »

vi har fået ok, vi afventer pt success på første store incredimental backup for i dag, derfetr vil nr 2, 3 og 4 sættes på før dagen er slut..

jeg ville nok forsøge at starte kl 21 og dermed rykke programmet frem med 1 time, i forsøget på IKKE at bruge for meget af tirsdagens vågne timer på migreringen.

Kort update, alt gik fint i nat med restore af OS. Vores indledende øvelser med at teste gjorde udslag i en meget hurtig restore.

Vi er ligenu ved det lange seje træk, restore af data til /home, det er endnu for tidligt at sige hvor lang tid det tager, men der arbejdes på det.  et forsigtigt gæt er dog servicevinduets længde.

FORSØG *IKKE* AT OPDATERE IP fordi du tror du så kan snyde dig foran i køen! Vi skal nok ændre de ip'er som er nødvendige, og annoncere den til dem som vi ikke selv kan ændre via gratisdns.dk! Hvis du forsøger at ændre noget uden vores instruks, kan det resultere i datatab, og det er lige præcis det vi prøver at undgå! :)
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline jesperfrier

  • Senior wannabe
  • **
  • Indlæg: 34
    • http://www.emailsignature.eu
Sv: netplads: web3 servicevindue
« Svar #6 Dato: 08-11-2011 10:40:21 »
Hvornår kan jeg forvente at emailsignature.eu er oppe igen?
Har lidt svært ved at se det i indlæggene.

Tak
</Jesper>
</Jesper>
_________________________________________
www.emailsignature.eu - Add power to your e-mail!

Offline Calzone

  • Blackbriar Operative
  • Administrator
  • DNS god
  • ******
  • Indlæg: 10.912
  • Color for the colorblind!
    • Mine film...
Sv: netplads: web3 servicevindue
« Svar #7 Dato: 08-11-2011 10:45:06 »
Hvornår kan jeg forvente at emailsignature.eu er oppe igen?
Har lidt svært ved at se det i indlæggene.

Tak
</Jesper>
Alt fra nu til i går kl 21 + 34 timer.
Greetings
Calzone AKA David Webb.

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #8 Dato: 08-11-2011 11:49:37 »
Hvornår kan jeg forvente at emailsignature.eu er oppe igen?
Har lidt svært ved at se det i indlæggene.

Tak
</Jesper>

Hej jesper

det er også rigtig svært at sige, men har du en n<tal>bruger, så kan jeg måske allerede nu aktivere dig..

Det kræver dog at du bruger mysql til "database" og ikke flatfiles, da det ellers bliver noget rod. Det vil i første omgang KUN være hjemmesiden jeg kan aktivere, ikke ftp/mail/imap
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline jesperfrier

  • Senior wannabe
  • **
  • Indlæg: 34
    • http://www.emailsignature.eu
Sv: netplads: web3 servicevindue
« Svar #9 Dato: 08-11-2011 13:18:50 »
Hvis du kan aktivere, så vil det være perfekt:

n411112

... og emailsignature.eu kører MySQL.

Tak
</Jesper>
</Jesper>
_________________________________________
www.emailsignature.eu - Add power to your e-mail!

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #10 Dato: 08-11-2011 13:31:48 »
Hvis du kan aktivere, så vil det være perfekt:

n411112

... og emailsignature.eu kører MySQL.

Tak
</Jesper>

den er pt ikke restored
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #11 Dato: 08-11-2011 13:41:10 »
Kort update, alt gik fint i nat med restore af OS. Vores indledende øvelser med at teste gjorde udslag i en meget hurtig restore.

Vi er ligenu ved det lange seje træk, restore af data til /home, det er endnu for tidligt at sige hvor lang tid det tager, men der arbejdes på det.  et forsigtigt gæt er dog servicevinduets længde.

FORSØG *IKKE* AT OPDATERE IP fordi du tror du så kan snyde dig foran i køen! Vi skal nok ændre de ip'er som er nødvendige, og annoncere den til dem som vi ikke selv kan ændre via gratisdns.dk! Hvis du forsøger at ændre noget uden vores instruks, kan det resultere i datatab, og det er lige præcis det vi prøver at undgå! :)

vi begynder så småt at opdatere DNS for de kunder vi kan se der er restored, det betyder at hjemmesider kommer til at virke for nogen, mail virker IKKE endnu
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #12 Dato: 08-11-2011 14:20:36 »
vi begynder så småt at opdatere DNS for de kunder vi kan se der er restored, det betyder at hjemmesider kommer til at virke for nogen, mail virker IKKE endnu

folk som selv styrer dns så er den nye IP : 77.66.53.146

for jer der bruger gratisdns.dk, glem det, det er fixet
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #13 Dato: 08-11-2011 14:26:58 »
kort opsumering for jer som ikke gidder læse alt ovenstående:

ny IP : 77.66.53.146, bruger du gratisdns er det skiftet for dig, bruger du 3. part må du selv skifte.

Services som er online: mysql/http
Services som er offline: imap/pop3 og smtp

data som mangler at blive restored: ca 75%

forventet sluttid for servicevinduet er pt ca onsdag kl 9. Dette er dog ikke specielt sikkert, men et estimat.

mailservices sættes først online når restore job er færdigt, dette er pt planen, det undersøges dog hvad risikoen er ved at smide det online nu.

regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline webnet

  • Senior
  • **
  • Indlæg: 55
Sv: netplads: web3 servicevindue
« Svar #14 Dato: 08-11-2011 22:16:55 »
Kunne I ikke have ventet med at ændre DNS til alle data var restored?

Det er da lidt irriterende, at man bare bliver dirigeret til en blank side, og at alle andre også bare bliver sendt til en blank side...
« Senest Redigeret: 08-11-2011 22:19:40 af webnet »

Offline Calzone

  • Blackbriar Operative
  • Administrator
  • DNS god
  • ******
  • Indlæg: 10.912
  • Color for the colorblind!
    • Mine film...
Re: netplads: web3 servicevindue
« Svar #15 Dato: 08-11-2011 22:30:34 »
Lyder underligt, sikker på du ikke selv styre DNS?

Sent from my GT-I9100 using Tapatalk
Greetings
Calzone AKA David Webb.

Offline webnet

  • Senior
  • **
  • Indlæg: 55
Sv: netplads: web3 servicevindue
« Svar #16 Dato: 08-11-2011 22:41:52 »
Når jeg logger på cpanel, så kan jeg se, at min mysql er restored, men alle mine mapper og filer i hjemmemappen er helt tom.

Når jeg vil tilgå min hjemmeside, så får jeg følgende...

Forbidden

You don't have permission to access / on this server.

Additionally, a 403 Forbidden error was encountered while trying to use an ErrorDocument to handle the request.

Apache/2.0.63 (Unix) mod_ssl/2.0.63 OpenSSL/0.9.8e-fips-rhel5 mod_bwlimited/1.4 Server at www.ffascript.com Port 80
« Senest Redigeret: 08-11-2011 22:43:53 af webnet »

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #17 Dato: 08-11-2011 23:12:13 »
Når jeg logger på cpanel, så kan jeg se, at min mysql er restored, men alle mine mapper og filer i hjemmemappen er helt tom.

Når jeg vil tilgå min hjemmeside, så får jeg følgende...

Forbidden

You don't have permission to access / on this server.

Additionally, a 403 Forbidden error was encountered while trying to use an ErrorDocument to handle the request.

Apache/2.0.63 (Unix) mod_ssl/2.0.63 OpenSSL/0.9.8e-fips-rhel5 mod_bwlimited/1.4 Server at www.ffascript.com Port 80

det betyder dit dir ikke er restored endnu, hvilken n<tal> bruger har du?
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #18 Dato: 08-11-2011 23:13:22 »
det betyder dit dir ikke er restored endnu, hvilken n<tal> bruger har du?

... desuden er alternativet en "server not responding/not found fejlside fra $browser.. har svært ved at se det er en fordel
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline webnet

  • Senior
  • **
  • Indlæg: 55
Sv: netplads: web3 servicevindue
« Svar #19 Dato: 08-11-2011 23:18:19 »
Mit n<tal> er n800633

Som sagt, så kan jeg godt logge på cpanel, og som du selv siger, så er mit DIR ikke restored endnu.

Det jeg mente fra starten var, at I skulle have ventet med at ændre DNS indtil alt var restored.

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #20 Dato: 09-11-2011 05:04:50 »
i skrivende stund mangler vi stadig omkring 20% data i restore vil jeg løst anslå.

jeg tror det ville være svært at nå indenfor tidsrammerne med kun et par timer igen, jeg vil derfor komme med opdateringer med korte mellemrum (1-2 timer) efter kl 9, eller når vi ved noget, i denne tråd.
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline dxdtha

  • Junior wannabe
  • *
  • Indlæg: 6
Sv: netplads: web3 servicevindue
« Svar #21 Dato: 09-11-2011 08:10:44 »
Hvilken dato er back-up'en fra? Jeg synes at det ser ud til at være 1md. gammelt.?
FTP er vist hellere ikke oppe endnu?

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #22 Dato: 09-11-2011 08:29:22 »
Hvilken dato er back-up'en fra? Jeg synes at det ser ud til at være 1md. gammelt.?
FTP er vist hellere ikke oppe endnu?

full backup er 1 måned gammel, herefter kommer der en differantal backup fra d. 30/10 og incredimentals, flere gange om dagen frem til slut

ftp er ikke oppe
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #23 Dato: 09-11-2011 09:06:34 »
jeg tror det ville være svært at nå indenfor tidsrammerne med kun et par timer igen, jeg vil derfor komme med opdateringer med korte mellemrum (1-2 timer) efter kl 9, eller når vi ved noget, i denne tråd.

Vi starter så småt her med små updates

vi er stadig ved den restore af den full backup, men klart i slutningen af denne process, og jeg forventer at denne process er færdig i løbet af et par timer.

Derefter går der en process automatisk i gang med restore af en differential backup fra d. 30/10, og her burde de fleste så være med, med mindre i er hæftig på opdatering af sites

Derefter har vi incredimental backups (begynder også automatisk) fra følgende dage:
31/10, 3/11, 4/11, 5/11 og 6 stk fra d. 7/11


Note, HUSK hvis du selv kører DNS så har severen skiftet IP til : 77.66.53.146. skift nu

næste update kl 11:30, med mindre noget ske før da

regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk

Offline czar

  • Administrator
  • DNS god
  • ******
  • Indlæg: 4.721
Sv: netplads: web3 servicevindue
« Svar #24 Dato: 09-11-2011 09:47:17 »
vi er stadig ved den restore af den full backup, men klart i slutningen af denne process, og jeg forventer at denne process er færdig i løbet af et par timer.

vi er på sidste volume af den full backup...
regards, Peter Larsen - Commander-in-chief - www.GratisDNS.dk