
Seneste nyheder
Udfordringer med telefonien til support. 15/09/2023 – Kl. 9.30
Kære kunde,
Vi har i øjeblikket problemer med vores telefonsystem. Hvis du ikke kan komme igennem til supporten, opfordrer vi til at skrive en mail til drift@bekey.dk.
Tidligere status
Service timeout. 10/08/2023
Kære Kunde
I går kl. 15:50 oplevede vi et “database timeout”. Dette førte til at vores Netkey-administration tjeneste ikke responderede og senere gjorde det umuligt at hente nye nøgler fra vores apps på Android og iOS. Brugere, der allerede havde hentet nøgler før databasens timeout, blev ikke påvirket.
17:30 var problemet løst, og alle tjenester kørte igen.
En intern log-server gik ind i et loop, som til sidst fik vores database til ikke at reagere. Nye foranstaltninger er blevet implementeret for at forhindre sådanne fejl i fremtiden. Bekey beklager dybt og undskylder oprigtigt for ulejligheden.
De bedste hilsner
Bekey
Dear Customer,
Yesterday at 15:50, we experienced a database timeout. This caused our Netkey administration service to timeout and later made it impossible to retrieve new keys from our apps on Android and iOS. Users who had retrieved keys before the database timeout, were not affected.
At 17:30 the problem was solved and all services were running again.
An internal logging server went into a loop, which eventually caused our database to become unresponsive. New measures have been implemented to prevent such failures in the future. Bekey deeply regrets and sincerely apologizes for this inconvenience.
Warm regards,
Bekey
Langsomt svartid på vores services. 09/08/2023
Der er desværre langtsomt svartid på vores services, vi arbejder på højtryk for at få løst problemet.
Update om Bluetooth-bug på nogle Samsung A-serie telefoner. 25/07/2023
Vi har endnu ikke hørt fra Samsung, og problemet er endnu ikke løst. Vi opfordrer til, at I tager direkte kontakt til Samsung, og gør opmærksom på problemet.
I marts 2023 oplevede vi de første problemer med at få adgang til gamle enheder via Old-Bekey på tværs af hele landet. Der anbefalede vi et skifte af de gamle enheder samt brug af alternativ telefon med en forventning om at det ville afhjælpe problemet. Det viste sig desværre at være et større problem end forventet og i juli 2023 nåede det flere Samsung-enheder og berørte derefter alle Bekeys kunder i større eller mindre grad.
Det var desværre et større problem end forventet, så i juli 2023 ramte det mange af vores distributionskunder samt de fleste danske og norske kommuner og vi eskalerede henvendelserne til Samsung.
Samsung er nu vendt retur og har påtaget sig ansvaret for bluetooth-buggen. De er nu i gang med at arbejde på en løsning. Den melding vi har modtaget, er at Samsung arbejder på en løsning i indeværende sprint og deres udviklerafdeling forventes at have løst problemet d. 21/7.
Dermed også sagt at løsningen desværre er ude af vores hænder, da det desværre ikke er noget vores udviklerafdeling kan håndtere.
Hvis I oplever andre lignende problemer, må I meget gerne melde hurtigt ind til vores driftsafdeling og evt. Kontakte Samsung direkte med en beskrivelse af problemet gerne med ”Bekey” i emnefeltet Tech Support Samsung tlf. 70701970 og mail b2b.dk@email.support.samsung.com
Vi kan se at de mange henvendelser fra Bekey-kunder har sat lidt skub i det hele. Det er meget værdsat.
Planlagt vedligeholdelse d. 15/2/2023
For at sikre en fortsat stabil drift og forbedre brugeroplevelsen har vi planlagt vedligeholdelse af vores servere på onsdag d. 15. februar 2023 mellem kl. 21 og 22.
I ovennævnte tidsrum kan der forekomme nedetid på mindre end 10 minutter, som dog kun vil have indflydelse på Netkey (administrationsmodulet) samt brugere, der prøver at logge ind i præcist de pågældende minutter. Det vil igennem hele tidsrummet være muligt at åbne døre, forudsat at brugeren allerede er logget på appen. Hvis en af Jeres brugere kommer ud for en fejlbesked i dette tidsrum, bedes han/hun vente få minutter og så prøve at gentage handlingen.
Fejl i overvågning d. 29/3/2022
Grundet en menneskelig fejl blev den brugerkonto, som anvendes af vores eksterne overvågningssystemer (Dotcom-Monitor og Pingdom), kortvarigt blokeret i løbet af den 29/3-2022, hvilket medførte “nedetid” jf. statistikken.
Overvågningssystemerne logger på Bekeys backend på samme måde som en almindelig bruger for at statistikken bliver så realistisk som muligt. Af nedenstående screenshots fremgår at Bekeys backend ikke var nede i det rapporterede tidsrum, overvågningen kom i kontakt med serveren, men meldte fejl pga. den blokerede brugerkonto.
Uplanlagt vedligeholdelse d. 13/10/2021
Grundet tekniske problemer i et af vores datacentre foretager vi i aften vedligeholdelse på vores løsning mellem kl. 21 og 22.
I ovennævnte tidsrum kan der forekomme nedetid på mindre end 10 minutter, som dog kun vil have indflydelse på Netkey (administrationsmodulet) samt brugere, der prøver at logge ind i præcist de pågældende minutter. Det vil igennem hele tidsrummet være muligt at åbne døre, forudsat at brugeren allerede er logget på appen. Hvis en af Jeres brugere kommer ud for en fejlbesked i dette tidsrum, bedes han/hun vente få minutter og så prøve at gentage handlingen.
Planlagt vedligeholdelse d. 27/02/2020
For at sikre en fortsat stabil drift og forbedre brugeroplevelsen har vi planlagt vedligeholdelse af vores servere på torsdag d. 27. februar 2020 mellem kl. 21 og 22.
I ovennævnte tidsrum kan der forekomme nedetid på mindre end 10 minutter, som dog kun vil have indflydelse på NETKEY (administrationsmodulet) samt brugere, der prøver at logge ind i præcist de pågældende minutter. Det vil igennem hele tidsrummet være muligt at åbne døre, forudsat at brugeren allerede er logget på appen. Hvis en af Jeres brugere kommer ud for en fejlbesked i dette tidsrum, bedes han/hun vente få minutter og så prøve at gentage handlingen.
Server nedbrud d. 16/09/2019
Mellem kl. 11:05 og 11:29 oplevede vi en række fejl, som til sidst resulterede i at alle på daværende tidspunkt aktive 3 nodes (applikationsservere) var nede. Nedetiden varede i 7 minutter og 39 sekunder.
Vores undersøgelse viste, at fejlene skyldtes en bug i en sjældent anvendt API metode, som resulterede i en OutOfMemory exception for den node som forespørgslen ramte.
Vi har sidenhen foretaget følgende ændringer for at forhindre et lignende problem i fremtiden:
- Overvågningen genstarter automatisk nodes i tilfælde af OutOfMemory undtagelser.
- Der er oprettet et skript som kan blokere adgangen til mindre kritiske API metoder, hvis der opdages fejl i dem.
- Serverne opretter nu et fuldt hukommelsesdump, når der opstår en OutOfMemory undtagelse.
- Vi gemmer fremover logs for at kunne analysere nodernes hukommelsesforbrug i længere tid.
- De mest kritiske API metoder er blevet flyttet til separate Docker containere.
- Vi har forøget vores overvågelse af CPU- og hukommelsesforbrug efter hver release af vores backend.
Vi beklager de gener nedbruddet måtte have medført og står selvfølgelig til rådighed ved evt. spørgsmål.
Planlagt vedligeholdelse d. 15/07/2019
For at sikre en fortsat stabil drift planlægger Bekey opdatering af vores servere. Opdateringen vil blive foretaget den 15. juli 2019 mellem kl. 21 og 22 dansk tid.
Hvad vedligeholdelsen betyder for dig og dine brugere:
- I er sikret en endnu mere stabil drift i fremtiden.
- Der kan forekomme minimal nedetid på op til 2 minutter i perioden kl. 21-22 dansk tid den 15/7-2019.
- Selvom systemet kortvarigt skulle være utilgængelig kan brugerne stadig åbne og låse normalt. En eventuel nedetid påvirker kun indlogning, men ikke almindelig brug af mobilapplikationen.
Planlagt vedligeholdelse d. 14/06/2018
For at sikre en fortsat stabil drift planlægger Bekey ændringer af vores infrastruktur. Ændringerne vil blive foretaget den 14. juni 2018 mellem kl. 21 og 22 dansk tid.
Hvad vedligeholdelsen betyder for dig og dine brugere:
- I er sikret en endnu mere stabil drift med hurtigere svartider og dermed en bedre brugeroplevelse i fremtiden.
- Der kan forekomme minimal nedetid på op til 10 minutter i perioden kl. 21-22 dansk tid den 14/6-2018.
- Selvom systemet kortvarigt skulle være utilgængelig kan brugerne stadig åbne og låse normalt. En eventuel nedetid påvirker kun indlogning, men ikke almindelig brug af mobilapplikationen.
Planlagt vedligeholdelse d. 5/04/2017
For at sikre en fortsat stabil drift planlægger Bekey at opgradere en database server. Opgraderingen vil blive foretaget den 5. april 2017 mellem kl. 21 og 22 dansk tid.
Hvad vedligeholdelsen betyder for dig og dine brugere:
- I er sikret en endnu mere stabil drift med hurtigere svartider og dermed en bedre brugeroplevelse i fremtiden.
- Der kan forekomme minimal nedetid på op til 2 minutter i perioden kl. 21-22 dansk tid den 5/4-2017.
- Selvom systemet kortvarigt skulle være utilgængelig kan brugerne stadig åbne og låse normalt. En eventuel nedetid påvirker kun indlogning, men ikke almindelig brug af mobilapplikationen.
Planlagt vedligeholdelse d. 28/2/2017
For at sikre en fortsat stabil drift planlægger Bekey ændringer af vores infrastruktur. Ændringerne vil blive foretaget den 28. februar 2017 mellem kl. 21 og 22 dansk tid.
Hvad vedligeholdelsen betyder for dig og dine brugere:
- I er sikret en endnu mere stabil drift med hurtigere svartider og dermed en bedre brugeroplevelse i fremtiden.
- Der kan forekomme minimal nedetid på op til 1 minut i perioden kl. 21-22 dansk tid den 28/2-2017.
- Selvom systemet kortvarigt skulle være utilgængelig kan brugerne stadig åbne og låse normalt. En eventuel nedetid påvirker kun indlogning, men ikke almindelig brug af mobilapplikationen.
Opdatering af testmiljø 9/2/2017
Vores ingeniører foretager i dag en planlagt vedligeholdelse af vores testmiljø. Der kan forekomme nedetid på op til 2 minutter i tidsrummet fra kl. 12-13. Produktionsmiljøet er ikke påvirket.
Opdatering: Server nedbrud
For at forhindre gentagelser af problemet i går har vi opdateret vores procedurer som følger:
- Vi er skiftet til en moderne DNS-leverandør, som bruger Anycast-teknologi for at svare på forespørgsler fra dén server i et verdensomspændende netværk, som er nærmest brugeren.
- Vi har oprettet en ekstern status-side på bekeystatus.dk.
Server nedbrud søndag d. 11/12/2016
Søndag eftermiddag blev en af Bekeys underleverandører ramt af et alvorligt netværksnedbrud, som ifølge vores overvågning i en periode på 1,5 timer medførte problemer med at logge på Bekeys applikationer. Vi betragter nedbruddet som alvorligt og beklager den manglende information under udbedringen af problemet.
Med denne mail vil vi give et kort overblik over årsagen og vores tiltag. Bekeys leverandør af DNS (systemet for opslag af domænenavne) oplevede et netværksnedbrud på trods af at leverandørens datacenter rådede over redundante internetforbindelser. Bekeys interne overvågning opdagede fejlen og alarmerede teknikerne, som tog kontakt til underleverandøren. Leverandørens datacenter var da allerede i gang med at udbedre netværket, og kl. 16:12 besvarede vores servere igen samtlige forespørgsler.
Det er vigtigt for os at understrege, at ingen logs eller andre data er gået tabt under dette nedbrud, og at de fleste berettigede brugere under hele perioden var i stand til at åbne dørene de har adgang til, da Bekeys mobilapplikationer ikke kræver internetforbindelse efter loginhandlingen.
For at forhindre, at situationen fra i eftermiddags gentager sig, retter Bekey omgående sine nødprocedurer, herunder:
- Vi vil snarest skifte til en mere stabil underleverandør
- Vi vil gøre vores DNS infrastruktur lige så redundant som resten af vores driftssetup i Danmark for at undgå, at nedbrud hos én leverandør kan påvirke større dele af vores løsning
- Vi vil oprette en driftsstatusside på et eksternt domæne, som vi meddeler om snarest
- Vi vil gerne etablere en mailingliste og bede jer om at meddele os på drift@bekey.dk, hvilke kontaktpersoner hos jer vi bør informere i tilfælde af akutte problemer
Vi beklager de gener nedbruddet måtte have medført og står selvfølgelig til rådighed ved evt. spørgsmål.
Planlagt vedligeholdelse d. 29/8/2022
For at sikre en fortsat stabil drift og forbedre brugeroplevelsen har vi planlagt vedligeholdelse af vores servere på mandag d. 29. august 2022 mellem kl. 21 og 22.
I ovennævnte tidsrum kan der forekomme nedetid på mindre end 10 minutter, som dog kun vil have indflydelse på Netkey (administrationsmodulet) samt brugere, der prøver at logge ind i præcist de pågældende minutter. Det vil igennem hele tidsrummet være muligt at åbne døre, forudsat at brugeren allerede er logget på appen. Hvis en af Jeres brugere kommer ud for en fejlbesked i dette tidsrum, bedes han/hun vente få minutter og så prøve at gentage handlingen.