1984.is - hvað gerðist?

Allt utan efnis

Höfundur
blitz
Of mikill frítími
Póstar: 1750
Skráði sig: Þri 22. Jan 2008 13:36
Reputation: 139
Staða: Tengdur

1984.is - hvað gerðist?

Pósturaf blitz » Fim 16. Nóv 2017 10:11

Á Face­book-­síð­unni For­rit­arar á Íslandi er bent á að þjón­usta fyr­ir­tæk­is­ins hafi legið niðri í hátt í sól­ar­hring. Mörður Ing­ólfs­son, for­svars­maður 1984, skrifar þar í athuga­semd: „Við sátum í 11 klst. með 7 manns niðri í Nýherja, allir helstu sér­fræð­ingar lands­ins í storage og örygg­is­málum og horfðum á vél­arnar okkar deyja. Það hefur eng­inn séð svona áður.“


https://kjarninn.is/frettir/2017-11-16-algert-kerfishrun-hja-1984/
http://www.mbl.is/frettir/innlent/2017/11/16/algjort_kerfishrun_hja_1984/

Þetta hljómar nokkuð rosalega - hvað gerðist eiginlega þarna?


PS4

Skjámynd

dori
Besserwisser
Póstar: 3605
Skráði sig: Fim 12. Feb 2009 10:46
Reputation: 142
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf dori » Fim 16. Nóv 2017 11:06

Í þræðinum sem Mörður svaraði þá kom fram að storage dæmið þeirra (sem á að hafa alls konar redundancy og fínerí) bara bókstaflega dó og tók allt annað niður með sér.



Skjámynd

Viktor
Internetsérfræðingur
Póstar: 6773
Skráði sig: Mán 04. Apr 2005 11:01
Reputation: 934
Staðsetning: https://notendur.hi.is/vjh2/
Hafðu samband:
Staða: Tengdur

Re: 1984.is - hvað gerðist?

Pósturaf Viktor » Fim 16. Nóv 2017 11:48

Mynd


I wish I was cool enough to not care how much I care about pretending not to care about things


Macbook Pro 13" M2 16GB 512GB

Ryzen 3600X 2070S 16GB


hallihg
Gúrú
Póstar: 524
Skráði sig: Mið 17. Sep 2003 22:06
Reputation: 3
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf hallihg » Fim 16. Nóv 2017 12:18

Fréttirnar af þessu eru mjög æsilegar og merkilegt hvað þeir virðast standa algjörlega á gati. Væri gaman ef einhverjir vaktarar sem hugsanlega þekkja til myndu koma með inside info, fyrr eða seinna


count von count

Skjámynd

GuðjónR
Stjórnandi
Póstar: 16258
Skráði sig: Fim 29. Ágú 2002 18:46
Reputation: 1983
Staðsetning: Hérna
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf GuðjónR » Fim 16. Nóv 2017 12:34

Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?




rbe
Vélbúnaðarníðingur
Póstar: 347
Skráði sig: Fös 06. Des 2013 00:11
Reputation: 73
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf rbe » Fim 16. Nóv 2017 12:42

tja.
nú er lag fyrir samkeppisaðilana að skella í nokkrar auglýsingar á hýsingu (á síðum sem enn eru enn uppi ekki hjá 1984 :guy )
það þarf kannski ekki ? flestir nota heilann ?



Skjámynd

depill
Stjórnandi
Póstar: 1547
Skráði sig: Mán 04. Júl 2005 17:09
Reputation: 215
Staðsetning: Reykjavík, Iceland
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf depill » Fim 16. Nóv 2017 13:01

GuðjónR skrifaði:Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?


Þeir útskýrðu þetta á Facebook, basicly voru þeir með diskastæður sem voru storage backendinn fyrir greinilega mjög stórum parti af kerfunum þeirra sem datt niður. Þannig vélbúnaðurinn sem lá að ofan var enn í lagi enn storageið hvar, þar á meðal sýndarvélin sem keyrði símkerfið.

Virðist hafa verið bara technology failure hjá þeim. Svo má deila um hvort að þetta hafi þá verið rétt uppsetning eða ekki. Enn hins vegar flest allar þær umræður verða örugglega keyrðar áfram af

Mynd



Skjámynd

rapport
Kóngur
Póstar: 7013
Skráði sig: Mán 27. Apr 2009 13:07
Reputation: 986
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf rapport » Fim 16. Nóv 2017 13:02

Frábært, ég notaði bara fríu DNS þjónustuna þeirra og nú eru síðurnar mínar ekki aðgengilegar...

Ég hef aldrei vitað um svona kerfishrun sem ekki verður vegna einhvers mannlegs þáttar, hvort sem það eru mistök sem eru gerð, vírus eða einhverskonar árás.

En 1984 hafa reynst mér vel, hafa gefið mér fría þjónustu í mörg ár og ég hef ekkert út á þá að setja, finnt ég ekki geta gert neina kröfu enda ekki búinn að greiða þeim krónu.



Skjámynd

dori
Besserwisser
Póstar: 3605
Skráði sig: Fim 12. Feb 2009 10:46
Reputation: 142
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf dori » Fim 16. Nóv 2017 13:05

GuðjónR skrifaði:Greyjið strákarnir, ömurlegt að lenda í þessu. :(
En hvernig getur allur búnaðurinn farið í rúst á sama tíma?
Þar á meðal símkerfið nema um skemmdarverk, bruna eða þjófnað sé að ræða?

Þeir eru hýsingarfyrirtæki. Hýsa auðvitað símkerfið sitt á einum af sínum vefþjónum. Kerfið á bakvið hýsingarnar þeirra fer niður -> símkerfið hrynur.

Mér finnst það reyndar persónulega mjög lélegt að setja upp þjónustuna sína þannig að ef aðal varan þín er með vandamál (til dæmis vefþjónar fara niður ef þú ert hýsingarfyrirtæki) þá geti viðskiptavinirnir þínir ekki náð sambandi við þig. Mér finnst eins og Símafélagið hafi líka verið með svona vesen einhverntíma. Nettengingin fór niður hjá fyrirtækinu sem ég var að vinna hjá og þá var ekki hægt að ná sambandi við þjónustusímann þeirra.

Grunn atriði að hafa allavega gróft "disaster plan". Er ekki hægt að setja símkerfi upp með redundancy?



Skjámynd

GuðjónR
Stjórnandi
Póstar: 16258
Skráði sig: Fim 29. Ágú 2002 18:46
Reputation: 1983
Staðsetning: Hérna
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf GuðjónR » Fim 16. Nóv 2017 13:10

En þegar menn orða hlutina svona:
After spending a night with a team of experts in the hardware field, our costly setup was deemed fit for scrap.

Þ.e. að búnaðurinn sé bara "brotajárn" þá sér maður fyrir sér mann með sleggju... :dead
Viðhengi
scarp.PNG
scarp.PNG (26.09 KiB) Skoðað 4350 sinnum




Tbot
/dev/null
Póstar: 1476
Skráði sig: Þri 01. Nóv 2011 13:42
Reputation: 304
Staðsetning: Rvk
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Tbot » Fim 16. Nóv 2017 13:57

Þessi árátta að samþætta allt, er að bíta þá illilega í rassinn.

Sum kerfi er betra að hafa stand-alone og þá clone til öryggis.
Því það er staðreynd að öll kerfi geta bilað.



Skjámynd

Hargo
</Snillingur>
Póstar: 1066
Skráði sig: Mið 13. Ágú 2008 02:18
Reputation: 11
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hargo » Fim 16. Nóv 2017 23:12

Veit einhver hvernig hardware þetta var keyrandi á?

Ég hef alltaf smá samúð þegar svona gerist vinnandi í þessum geira. Auðvelt að standa á hliðarlínunni og segjast hafa vitað betur. Hinsvegar virðast þeir vera brutally honest og ekkert skafa af því í þessum tilkynningum. Held að þeir sem eru með vefsíður og tölvupóst hjá þeim geti allavega búið sig undir dágóðan niðritíma miðað við þetta. Costly hardware orðið að brotajárni á augnabliki og algjört hrun í kjölfarið.

En svona er þetta, ef það getur bilað þá mun það gera það á endanum. Var ekki lögmálið einhvern veginn þannig?



Skjámynd

appel
Stjórnandi
Póstar: 5459
Skráði sig: Fös 13. Jún 2003 16:46
Reputation: 1007
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf appel » Fim 16. Nóv 2017 23:34

Hef samúð með þeim.

Maður hefur lent í svipuðum aðstæðum, eitthvað sem átti að virka reyndist svo ekki virka og það verður bara cascade-failure.

Það er ekki auðvelt fyrir svona fyrirtæki að recovera eftir svona massa hrun.

Vona bara að viðskiptavinirnir fari nú ekki núna og flýji til útlanda með allt til google, amazon, microsoft o.s.frv.


*-*

Skjámynd

Jón Ragnar
vélbúnaðarpervert
Póstar: 973
Skráði sig: Lau 06. Des 2008 12:28
Reputation: 173
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Jón Ragnar » Fös 17. Nóv 2017 09:54

appel skrifaði:Hef samúð með þeim.

Maður hefur lent í svipuðum aðstæðum, eitthvað sem átti að virka reyndist svo ekki virka og það verður bara cascade-failure.

Það er ekki auðvelt fyrir svona fyrirtæki að recovera eftir svona massa hrun.

Vona bara að viðskiptavinirnir fari nú ekki núna og flýji til útlanda með allt til google, amazon, microsoft o.s.frv.



Allir sem hosta síður hérna heima hafa grætt nýja viðskiptavini :)

Þeir hafa bara verið með þetta heimskulega uppsett. Allt á sama járninu og ekkert redundancy. Þeirra eigin production umhverfi á sama og viðskiptavinur og annað.

:thumbsd



CCNA Collaboration
CCNA Voice
CCNA Video


Hizzman
FanBoy
Póstar: 794
Skráði sig: Fös 22. Apr 2016 18:48
Reputation: 135
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hizzman » Fös 17. Nóv 2017 11:23

Murphy, þó..!..!!!! :dissed




END
has spoken...
Póstar: 161
Skráði sig: Lau 28. Jún 2003 01:52
Reputation: 8
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf END » Fös 17. Nóv 2017 14:48

Hvert fer maður núna með einfalda Wordpress síðu?




Starman
has spoken...
Póstar: 162
Skráði sig: Þri 07. Okt 2008 01:40
Reputation: 15
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Starman » Lau 18. Nóv 2017 21:09




Skjámynd

Hjaltiatla
Besserwisser
Póstar: 3090
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 522
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 21:29

Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Just do IT
  √

Skjámynd

Hjaltiatla
Besserwisser
Póstar: 3090
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 522
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 21:57



Just do IT
  √

Skjámynd

Stuffz
Kerfisstjóri
Póstar: 1203
Skráði sig: Lau 11. Mar 2006 18:39
Reputation: 71
Staðsetning: 109 Rvk
Hafðu samband:
Staða: Tengdur

Re: 1984.is - hvað gerðist?

Pósturaf Stuffz » Lau 18. Nóv 2017 22:13

ok þess vegna er síðan mín niðri http://xn--sms-fla4d.is/

þeir redda þessu, hef engar áhyggjur :)


Intel NUC Hades Canyon 8Tb NVME +8Tb SSD +80Tb HDD, Nvidia Shield Android TV, Xbox Series X, Xiaomi 4K Projector
Rafskjótar: KS-16S, KS-S22, KS-S9, OW Pint. CAMS: Insta360 ONE X, X3, FLOW, GO, ACE Pro. DJI Action. Skydio 2
Búnaður: Lazyrolling Armored Jacket, Alpha Motorsport-pants, TSG Pass Pro, Fox Proframe
187 KP Wrist Guards, Leatt Dual-Axis, Kinetic DL EUC Shoes, P65 BOBLBEE Backpack

Skjámynd

Revenant
</Snillingur>
Póstar: 1031
Skráði sig: Fim 24. Jún 2004 12:36
Reputation: 132
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Revenant » Lau 18. Nóv 2017 22:23

Hjaltiatla skrifaði:
Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Checksum segir bara hvort að blokkin sé corrupted eða ekki. Checksum hjálpar þér ekkert ef boot record-ið/lvm metadata (eins og í þessu tilfelli) er corrupted/yfirskrifað/zero-ed.

Checksum í zfs leyfir kerfinu að detect-a að blokk sem þú hefur lesið af disk sé corrupted og ef RAID (1/5/6/10 etc.) er til staðar þá er hægt að "bjarga" blokkinni/laga villuna.



Skjámynd

Hjaltiatla
Besserwisser
Póstar: 3090
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 522
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 22:30

Revenant skrifaði:
Hjaltiatla skrifaði:
Starman skrifaði:LVM corruption
https://www.qurium.org/1984-is-can-not-give-up/


Hmm..ok þar sem ég er ZFS fanboy og það er bæði file system og logical volume manager og framkvæmir checksumming á bæði gögnum og Metadata þá spyr ég eins og bjáni. Er ekkert checksumming í LVM á metadata ?


Checksum segir bara hvort að blokkin sé corrupted eða ekki. Checksum hjálpar þér ekkert ef boot record-ið/lvm metadata (eins og í þessu tilfelli) er corrupted/yfirskrifað/zero-ed.

Checksum í zfs leyfir kerfinu að detect-a að blokk sem þú hefur lesið af disk sé corrupted og ef RAID (1/5/6/10 etc.) er til staðar þá er hægt að "bjarga" blokkinni/laga villuna.


Það væri allavegana ekki silent data corruption, maður vill allavegana vita ef að t.d metadata corruption gerist. Dæmi þegar þú skoðar storage pool í einfaldri ZFS uppsetningu á Freenas þá geturu séð data error-a með einfaldri skipun "zpool status"

Mynd


Just do IT
  √

Skjámynd

Revenant
</Snillingur>
Póstar: 1031
Skráði sig: Fim 24. Jún 2004 12:36
Reputation: 132
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Revenant » Lau 18. Nóv 2017 22:41

LVM metadata eru eingöngu upplýsingar hvaða logical volumes/physical volumes/volumes groups eru til staðar á disknum. LVM geymir engar upplýsingar um data. Ofan á LVM geturu síðan sett hvaða filesystem (ZFS, XFS, ext4) sem er.

Þú ert að bera saman filesystem (ZFS) við Logical Volume Management (LVM).



Skjámynd

Hjaltiatla
Besserwisser
Póstar: 3090
Skráði sig: Mið 07. Okt 2009 20:54
Reputation: 522
Staðsetning: ::1
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf Hjaltiatla » Lau 18. Nóv 2017 22:46

Ég var reyndar ekki að bera saman þetta tvennt að því leytinu reyndar, benti á að ZFS væri bæði logical volume manager og filesystem.
En ákvað að spurja eins og bjáni.


Just do IT
  √


falcon1
Gúrú
Póstar: 548
Skráði sig: Mán 16. Apr 2007 11:30
Reputation: 54
Hafðu samband:
Staða: Ótengdur

Re: 1984.is - hvað gerðist?

Pósturaf falcon1 » Mið 22. Nóv 2017 12:41

Ein forvitnisspurning frá græningja í þessum málum... er eðlilegt að það taki svona langan tíma að koma upp kerfinu aftur? Á ekki að vera backup-kerfi sem hægt er að setja upp frekar fljótt þegar svona gerist?
Ég hef verið hjá ýmsum erlendum hýsingaraðilum og alltaf þegar eitthvað hefur klikkað þá hefur það verið fljótlega komið upp aftur. Var þetta hjá 1984 eitthvað freak dæmi eða galli í uppsetningu hjá þeim?