1984.is - hvað gerðist?

Allt utan efnis

Höfundur
blitz
/dev/null
Póstar: 1394
Skráði sig: Þri 22. Jan 2008 13:36
Reputation: 24
Staða: Ótengdur

1984.is - hvað gerðist?

Pósturaf blitz » Fim 16. Nóv 2017 10:11

Á Face­book-­síð­unni For­rit­arar á Íslandi er bent á að þjón­usta fyr­ir­tæk­is­ins hafi legið niðri í hátt í sól­ar­hring. Mörður Ing­ólfs­son, for­svars­maður 1984, skrifar þar í athuga­semd: „Við sátum í 11 klst. með 7 manns niðri í Nýherja, allir helstu sér­fræð­ingar lands­ins í storage og örygg­is­málum og horfðum á vél­arnar okkar deyja. Það hefur eng­inn séð svona áður.“


https://kjarninn.is/frettir/2017-11-16-algert-kerfishrun-hja-1984/
http://www.mbl.is/frettir/innlent/2017/11/16/algjort_kerfishrun_hja_1984/

Þetta hljómar nokkuð rosalega - hvað gerðist eiginlega þarna?


PS4

Skjámynd

dori
Besserwisser
Póstar: 3434
Skráði sig: Fim 12. Feb 2009 10:46
Reputation: 92
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf dori » Fim 16. Nóv 2017 11:06

Í þræðinum sem Mörður svaraði þá kom fram að storage dæmið þeirra (sem á að hafa alls konar redundancy og fínerí) bara bókstaflega dó og tók allt annað niður með sér.



Skjámynd

Sallarólegur
Internetsérfræðingur
Póstar: 5039
Skráði sig: Mán 04. Apr 2005 11:01
Reputation: 186
Staðsetning: >>
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Sallarólegur » Fim 16. Nóv 2017 11:48

Mynd


BenQ XL2720 144Hz † ASRock Z270 Pro4 † i5-7600K † GTX 980Ti 6GB † G.Skill 16GB 16GB 2400Mhz † CX600 † Apex M500 MX Blue † Rival 300 † CM Silencio 352 † NF-S12A @ CM 212 Evo

Macbook Pro 15" † Touchbar 2016 † Space Gray † 256GB

FreeNAS † P35 Neo2-FR † Intel Q6600 † 8GB DDR2 † 2TB HDD

EdgeRouter ERLite‑3 † 2x Unifi AP AC LITE † TP Link TL-SG105E 5-Port Gigabit

Skjámynd

hallihg
Gúrú
Póstar: 514
Skráði sig: Mið 17. Sep 2003 22:06
Reputation: 2
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf hallihg » Fim 16. Nóv 2017 12:18

Fréttirnar af þessu eru mjög æsilegar og merkilegt hvað þeir virðast standa algjörlega á gati. Væri gaman ef einhverjir vaktarar sem hugsanlega þekkja til myndu koma með inside info, fyrr eða seinna


count von count

Skjámynd

GuðjónR
Stjórnandi
Póstar: 13659
Skráði sig: Fim 29. Ágú 2002 18:46
Reputation: 964
Staðsetning: Hérna
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf GuðjónR » Fim 16. Nóv 2017 12:34

Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?




rbe
Vélbúnaðarníðingur
Póstar: 302
Skráði sig: Fös 06. Des 2013 00:11
Reputation: 61
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf rbe » Fim 16. Nóv 2017 12:42

tja.
nú er lag fyrir samkeppisaðilana að skella í nokkrar auglýsingar á hýsingu (á síðum sem enn eru enn uppi ekki hjá 1984 :guy )
það þarf kannski ekki ? flestir nota heilann ?



Skjámynd

depill
Stjórnandi
Póstar: 1336
Skráði sig: Mán 04. Júl 2005 17:09
Reputation: 117
Staðsetning: Reykjavík, Iceland
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf depill » Fim 16. Nóv 2017 13:01

GuðjónR skrifaði:Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?


Þeir útskýrðu þetta á Facebook, basicly voru þeir með diskastæður sem voru storage backendinn fyrir greinilega mjög stórum parti af kerfunum þeirra sem datt niður. Þannig vélbúnaðurinn sem lá að ofan var enn í lagi enn storageið hvar, þar á meðal sýndarvélin sem keyrði símkerfið.

Virðist hafa verið bara technology failure hjá þeim. Svo má deila um hvort að þetta hafi þá verið rétt uppsetning eða ekki. Enn hins vegar flest allar þær umræður verða örugglega keyrðar áfram af

Mynd



Skjámynd

rapport
Kóngur
Póstar: 5135
Skráði sig: Mán 27. Apr 2009 13:07
Reputation: 297
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf rapport » Fim 16. Nóv 2017 13:02

Frábært, ég notaði bara fríu DNS þjónustuna þeirra og nú eru síðurnar mínar ekki aðgengilegar...

Ég hef aldrei vitað um svona kerfishrun sem ekki verður vegna einhvers mannlegs þáttar, hvort sem það eru mistök sem eru gerð, vírus eða einhverskonar árás.

En 1984 hafa reynst mér vel, hafa gefið mér fría þjónustu í mörg ár og ég hef ekkert út á þá að setja, finnt ég ekki geta gert neina kröfu enda ekki búinn að greiða þeim krónu.



Skjámynd

dori
Besserwisser
Póstar: 3434
Skráði sig: Fim 12. Feb 2009 10:46
Reputation: 92
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf dori » Fim 16. Nóv 2017 13:05

GuðjónR skrifaði:Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?

Þeir eru hýsingarfyrirtæki. Hýsa auðvitað símkerfið sitt á einum af sínum vefþjónum. Kerfið á bakvið hýsingarnar þeirra fer niður -> símkerfið hrynur.

Mér finnst það reyndar persónulega mjög lélegt að setja upp þjónustuna sína þannig að ef aðal varan þín er með vandamál (til dæmis vefþjónar fara niður ef þú ert hýsingarfyrirtæki) þá geti viðskiptavinirnir þínir ekki náð sambandi við þig. Mér finnst eins og Símafélagið hafi líka verið með svona vesen einhverntíma. Nettengingin fór niður hjá fyrirtækinu sem ég var að vinna hjá og þá var ekki hægt að ná sambandi við þjónustusímann þeirra.

Grunn atriði að hafa allavega gróft "disaster plan". Er ekki hægt að setja símkerfi upp með redundancy?



Skjámynd

GuðjónR
Stjórnandi
Póstar: 13659
Skráði sig: Fim 29. Ágú 2002 18:46
Reputation: 964
Staðsetning: Hérna
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf GuðjónR » Fim 16. Nóv 2017 13:10

En þegar menn orða hlutina svona:
After spending a night with a team of experts in the hardware field, our costly setup was deemed fit for scrap.

Þ.e. að búnaðurinn sé bara "brotajárn" þá sér maður fyrir sér mann með sleggju... :dead
Viðhengi
scarp.PNG
scarp.PNG (26.09 KiB) Skoðað 2220 sinnum




Tbot
vélbúnaðarpervert
Póstar: 939
Skráði sig: Þri 01. Nóv 2011 13:42
Reputation: 149
Staðsetning: Rvk
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Tbot » Fim 16. Nóv 2017 13:57

Þessi árátta að samþætta allt, er að bíta þá illilega í rassinn.

Sum kerfi er betra að hafa stand-alone og þá clone til öryggis.
Því það er staðreynd að öll kerfi geta bilað.



Skjámynd

Hargo
</Snillingur>
Póstar: 1034
Skráði sig: Mið 13. Ágú 2008 02:18
Reputation: 6
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hargo » Fim 16. Nóv 2017 23:12

Veit einhver hvernig hardware þetta var keyrandi á?

Ég hef alltaf smá samúð þegar svona gerist vinnandi í þessum geira. Auðvelt að standa á hliðarlínunni og segjast hafa vitað betur. Hinsvegar virðast þeir vera brutally honest og ekkert skafa af því í þessum tilkynningum. Held að þeir sem eru með vefsíður og tölvupóst hjá þeim geti allavega búið sig undir dágóðan niðritíma miðað við þetta. Costly hardware orðið að brotajárni á augnabliki og algjört hrun í kjölfarið.

En svona er þetta, ef það getur bilað þá mun það gera það á endanum. Var ekki lögmálið einhvern veginn þannig?



Skjámynd

appel
Stjórnandi
Póstar: 3219
Skráði sig: Fös 13. Jún 2003 16:46
Reputation: 192
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf appel » Fim 16. Nóv 2017 23:34

Hef samúð með þeim.

Maður hefur lent í svipuðum aðstæðum, eitthvað sem átti að virka reyndist svo ekki virka og það verður bara cascade-failure.

Það er ekki auðvelt fyrir svona fyrirtæki að recovera eftir svona massa hrun.

Vona bara að viðskiptavinirnir fari nú ekki núna og flýji til útlanda með allt til google, amazon, microsoft o.s.frv.


*-*

Skjámynd

Jón Ragnar
Gúrú
Póstar: 589
Skráði sig: Lau 06. Des 2008 12:28
Reputation: 52
Staðsetning: SensaHQ
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Jón Ragnar » Fös 17. Nóv 2017 09:54

appel skrifaði:Hef samúð með þeim.

Maður hefur lent í svipuðum aðstæðum, eitthvað sem átti að virka reyndist svo ekki virka og það verður bara cascade-failure.

Það er ekki auðvelt fyrir svona fyrirtæki að recovera eftir svona massa hrun.

Vona bara að viðskiptavinirnir fari nú ekki núna og flýji til útlanda með allt til google, amazon, microsoft o.s.frv.



Allir sem hosta síður hérna heima hafa grætt nýja viðskiptavini :)

Þeir hafa bara verið með þetta heimskulega uppsett. Allt á sama járninu og ekkert redundancy. Þeirra eigin production umhverfi á sama og viðskiptavinur og annað.

:thumbsd



CCNA Collaboration
CCNA Voice
CCNA Video


Hizzman
Vélbúnaðarníðingur
Póstar: 368
Skráði sig: Fös 22. Apr 2016 18:48
Reputation: 48
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hizzman » Fös 17. Nóv 2017 11:23

Murphy, þó..!..!!!! :dissed




END
has spoken...
Póstar: 157
Skráði sig: Lau 28. Jún 2003 01:52
Reputation: 5
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf END » Fös 17. Nóv 2017 14:48

Hvert fer maður núna með einfalda Wordpress síðu?




Starman
Nörd
Póstar: 129
Skráði sig: Þri 07. Okt 2008 01:40
Reputation: 2
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Starman » Lau 18. Nóv 2017 21:09




Skjámynd

Hjaltiatla
Bara að hanga
Póstar: 1590
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 136
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 21:29

Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Laptop:Dell Insprion 17 (5759), Intel Core i5 Skylake , 480 gb ssd , 16 gb ram

Hearing a person saying ooops working on a server - Never a good sign

Skjámynd

Hjaltiatla
Bara að hanga
Póstar: 1590
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 136
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 21:57



Laptop:Dell Insprion 17 (5759), Intel Core i5 Skylake , 480 gb ssd , 16 gb ram

Hearing a person saying ooops working on a server - Never a good sign

Skjámynd

Stuffz
vélbúnaðarpervert
Póstar: 947
Skráði sig: Lau 11. Mar 2006 18:39
Reputation: 23
Staðsetning: 104 Rvk
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Stuffz » Lau 18. Nóv 2017 22:13

ok þess vegna er síðan mín niðri http://xn--sms-fla4d.is/

þeir redda þessu, hef engar áhyggjur :)


Personal Computer Árg 2008. Eldri og öruggari vélbúnaður, nota persónulega ekki facebook.

..Hvað er það?™

Skjámynd

Revenant
Geek
Póstar: 819
Skráði sig: Fim 24. Jún 2004 12:36
Reputation: 42
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Revenant » Lau 18. Nóv 2017 22:23

Hjaltiatla skrifaði:
Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Checksum segir bara hvort að blokkin sé corrupted eða ekki. Checksum hjálpar þér ekkert ef boot record-ið/lvm metadata (eins og í þessu tilfelli) er corrupted/yfirskrifað/zero-ed.

Checksum í zfs leyfir kerfinu að detect-a að blokk sem þú hefur lesið af disk sé corrupted og ef RAID (1/5/6/10 etc.) er til staðar þá er hægt að "bjarga" blokkinni/laga villuna.


i7-2600K 3.4GHz @ 4.7GHz (103 MHz x 46) 1.416 V | ASUS P8P67 Pro | ASUS GeForce GTX1070 | Mushkin Blackline 8 GB CL9 1600MHz | Antec TruePower 750W | HAF X

Skjámynd

Hjaltiatla
Bara að hanga
Póstar: 1590
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 136
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 22:30

Revenant skrifaði:
Hjaltiatla skrifaði:
Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Checksum segir bara hvort að blokkin sé corrupted eða ekki. Checksum hjálpar þér ekkert ef boot record-ið/lvm metadata (eins og í þessu tilfelli) er corrupted/yfirskrifað/zero-ed.

Checksum í zfs leyfir kerfinu að detect-a að blokk sem þú hefur lesið af disk sé corrupted og ef RAID (1/5/6/10 etc.) er til staðar þá er hægt að "bjarga" blokkinni/laga villuna.


Það væri allavegana ekki silent data corruption, maður vill allavegana vita ef að t.d metadata corruption gerist. Dæmi þegar þú skoðar storage pool í einfaldri ZFS uppsetningu á Freenas þá geturu séð data error-a með einfaldri skipun "zpool status"

Mynd


Laptop:Dell Insprion 17 (5759), Intel Core i5 Skylake , 480 gb ssd , 16 gb ram

Hearing a person saying ooops working on a server - Never a good sign

Skjámynd

Revenant
Geek
Póstar: 819
Skráði sig: Fim 24. Jún 2004 12:36
Reputation: 42
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Revenant » Lau 18. Nóv 2017 22:41

LVM metadata eru eingöngu upplýsingar hvaða logical volumes/physical volumes/volumes groups eru til staðar á disknum. LVM geymir engar upplýsingar um data. Ofan á LVM geturu síðan sett hvaða filesystem (ZFS, XFS, ext4) sem er.

Þú ert að bera saman filesystem (ZFS) við Logical Volume Management (LVM).


i7-2600K 3.4GHz @ 4.7GHz (103 MHz x 46) 1.416 V | ASUS P8P67 Pro | ASUS GeForce GTX1070 | Mushkin Blackline 8 GB CL9 1600MHz | Antec TruePower 750W | HAF X

Skjámynd

Hjaltiatla
Bara að hanga
Póstar: 1590
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 136
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 22:46

Ég var reyndar ekki að bera saman þetta tvennt að því leytinu reyndar, benti á að ZFS væri bæði logical volume manager og filesystem.
En ákvað að spurja eins og bjáni.


Laptop:Dell Insprion 17 (5759), Intel Core i5 Skylake , 480 gb ssd , 16 gb ram

Hearing a person saying ooops working on a server - Never a good sign


falcon1
Fiktari
Póstar: 76
Skráði sig: Mán 16. Apr 2007 11:30
Reputation: 0
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf falcon1 » Mið 22. Nóv 2017 12:41

Ein forvitnisspurning frá græningja í þessum málum... er eðlilegt að það taki svona langan tíma að koma upp kerfinu aftur? Á ekki að vera backup-kerfi sem hægt er að setja upp frekar fljótt þegar svona gerist?
Ég hef verið hjá ýmsum erlendum hýsingaraðilum og alltaf þegar eitthvað hefur klikkað þá hefur það verið fljótlega komið upp aftur. Var þetta hjá 1984 eitthvað freak dæmi eða galli í uppsetningu hjá þeim?