Vi har klart å løyse feilen vi har slit med i NVDB denne veka. Det vert då ikkje behov for å bygge opp data på nytt i helga. Det vert starta normal reindeksering som vanleg i helga, og API-et og alle klientar som nytta det vil fungere som normalt.
Vi vil no fortsette å sjå på forbetringar i API-et for å gjere data raskare tilgjengeleg etter registrering.
Vi har som mange nok har erfart hatt utfordringar utover et normale i NVDB den siste veka. I samband med feilretting kan det verte aktualt å bygge opp data i NVDB på nytt. Dersom det vert nødvendig vil vi gjere det i helga.
Under gjenoppbygging av data vil NVDB-Les vere heilt utilgjengeleg i ei periode. Dette vil påverke alle klientar som nyttar NVDB-data. Vegkart vil og framstå som tom.
Data i NVDB vil ikkje verte berørt, og ingen data skal gå tapt. Vi må berre bygge opp igjen tilgangen til dataene.
Les-API v2 vil vere oppe, det same gjeld vegkart-2019.atlas.vegvesen.no dersom nokon treng tilgang på data, men då med dei avgensingane som er i v2 med gamle fylker og kommuner, samt gamle vegreferansar.
Vi vil oppdatere med ny informasjon i løpet av morgongaden om kva som vil skje i helga.
Vi har litt utfordringar i NVDB igjen. Feilen har pågått heile veka og mange har nok merka at Les ligg langt etter med etterbehandling. Dette er på grunn av at tenesten plutselig stoppar opp.
Vi har ute ein midlertidig fiks som omgår problemet i produksjon, men vi opplever likevel at alt går litt tregare enn normalt.
Det pågår no testing og feilretting i ATM-miljø (test-PROD). Les kan difor vere ustabil i dette miljøet framover til vi har løyst problemet.
Kortversjon: På fem år har Datafangst vokst fra en enkel prototype til en kompleks applikasjon. I dag håndterer DF større datavolum enn den ble bygget for, og vi har en veldig uheldig blanding av gammel kode skrevet i ett rammeverk (Angular, som ikke blir videreutviklet) og ny kode skrevet i et annet rammeverk (React). Brukerne våre opplever treghet, og utviklernes jobb er unødig plundrete.
Den aller første versjonen kommer våren eller sommeren 2022. Denne versjonen vil kun ha det minimumet av funksjoner som trengs for å levere data til NVDB, men da kun for et snevert utvalg av data, med et minimum av de aller mest nødvendige funksjonene. Nye releaser vil komme i form av hyppige, men små forbedringer. Slik vil vi gradvis føye til mer avansert funksjonalitet. Gradvis vil den nye løsningen kunne overta stadig flere arbeidsoppgaver fra den gamle løsningen.
Presentasjon og stikkord fra møte 25.1.2022 om ny datafangst:
Få oversikt her: Demo av utvikling i NVDB-porefølga
EDIT Mandag 24.1: Suksess, nå har vi fått metreringsretning inn i datafangst!
Vi beklager kort varsel – men fra fredag 21.1 kl 17 så blir Datafangst utilgjengelig på grunn av database vedlikehold.
Bonus er jo at vi kommer tilbake mandag morgen med metreringsretning på stedfesting!
I løpet av helga vil vi legge informasjon om metreringsretning på all vegnettsinformasjon, dvs stedfestingen for samtlige objekter i databasen til Datafangst. Denne informasjonen hentes fra leseapi, og det er en tidkrevende prosess. Vi antar kjøretida blir rundt ett døgn, men foretrekker å sette av hele helga til oppdatering, for sikkerhets skyld.
Planen var jo at denne oppdateringen skulle kjøre i bakgrunnen mens dere brukte Datafangst som vanglig, men som vi så i går – det fungerte ikke spesielt bra. Det kunne kanskje fungert i helga, når det er færre brukere, men vi har valgt å gjøre det trygt og sikkert denne gangen.
LØST klokka 11:00: Problemet er LØST.
Årsaken var knyttet til oppdatering av metreringsretning på alle vegene som manglet denne informasjonen. Denne engangs-operasjonen belaster systemet såpass mye at vi må utsette denne jobben til helga, når det er færre brukere på systemet. Vi siterer fra gårsdagens informasjon om ny release:
Vi har et script som kjører og fyller inn metreringsretning på alle veger det er stedfestet på. Dette tar ca. et døgn å kjøre. Det betyr at vi har ikke metreringsretning på alle veger enda.
Om man har et objekt som er stedfestet på veg uten metreringsretning vil sideposisjon og felt være grået ut i vegobjekter-fanen og hvis man hovrer på dette feltet vil det stå «Objektet er stedfestet på veg uten metreringsretning og sideposisjon/felt kan ikke oppgis.». Hvis objektet har sideposisjon eller felt vil det dukke opp så snart metreringsretningen har blitt hentet inn. Hvis man vil se sideposisjon og felt med en gang kan man stedfeste på nytt og vi vil da hente inn metreringsretningen på veglenka. Alle veglenker forventes å ha fått metreringsretning innen
fredag morgeni løpet av helga.
Det er driftsproblemer med Datafangst, ser ut som om forbindelsen med databasen vår hikker. Utviklerteamet er i gang med feilsøking og -retting, dette innlegget oppdateres med mere info.
Datafangst 2022-2.0.1 er ute i PROD
Obs! Vi har et script som kjører og fyller inn metreringsretning på alle veger det er stedfestet på. Dette tar ca. et døgn å kjøre. Det betyr at vi har ikke metreringsretning på alle veger enda.
Om man har et objekt som er stedfestet på veg uten metreringsretning vil sideposisjon og felt være grået ut i vegobjekter-fanen og hvis man hovrer på dette feltet vil det stå «Objektet er stedfestet på veg uten metreringsretning og sideposisjon/felt kan ikke oppgis.». Hvis objektet har sideposisjon eller felt vil det dukke opp så snart metreringsretningen har blitt hentet inn. Hvis man vil se sideposisjon og felt med en gang kan man stedfeste på nytt og vi vil da hente inn metreringsretningen på veglenka. Alle veglenker forventes å ha fått metreringsretning innen fredag morgen. I løpet av helga. EDIT: Dette scriptet gir såpass stor belastning at vi må kjøre det i helga, når det er færre brukere.
Problemet med defekte lenker er løyst. Både nye og gamle lenker skal no fungere. Denne og fleire andre forbetringar er beskrive her: Vegkart (vegvesen.no)
Mange har lagra snarvegar og favorittar med ferdige filter i Vegkart for raskt å vise nyttig data. Det er og nytta i deling via e-post og dokument.
No er oppbygging av desse lenkene endra litt som gjer at dei gamle ikkje fungerer lenger. Vegkart nyttar eit 3.parts ferdig bibliotek med denne funksjonen for å bygge opp lenker. Vi ser no på om vi kan skru tilbake generering av lenker så dei gamle vil fungere igjen.
Vi vil oppdatere saka med informasjon om det let seg gjere eller alle lenkene må oppdaterast.
Det vert ny demo med presentasjon av endringar og forbetringar i Les-API med IND, Vegkart, Eksport og Elveg.
10/1-2022 09:30-10:30
Les-API:
Vegkart:
Eksport:
Elveg:
Demo er open for alle. Vi tek imot tilbakemeldingar og svarar på spørsmål rundt det vi har jobba med i siste Sprint.
https://teams.microsoft.com/l/meetup-join/19%3ameeting_MGI0N2NmZDgtM2U5YS00MWUwLTg3MjQtMmI2OGEyMTdlZWI1%40thread.v2/0?context=%7b%22Tid%22%3a%2238856954-ed55-49f7-8bdd-738ffbbfd390%22%2c%22Oid%22%3a%226d157507-7f0b-436a-917e-edcf23e091e1%22%7d