Fra dykkevideo til 3D-modell
Teknikken kalles fotogrammetri. Programvaren finner igjen de samme detaljene i overlappende videobilder og bruker dem til å beregne kameraposisjonene og et første sett med punkter i 3D. Deretter sammenlignes bildene for å lage en tettere punktsky. Fra punktene lages en sammenhengende overflate, som får farger og tekstur fra videoen.
Vi har jobbet med fotogrammetri under vann i flere år. I artikkelen vår fra 2021 om 3D-modeller fra Blueye-opptak viste vi modeller av vrak og konstruksjoner under vann, laget i spesialprogramvare. Med Blueye Cloud er dette nå tilgjengelig på nett, sammen med dykkeloggene og mediefilene du allerede synkroniserer fra Blueye-appen. Du kan lage, undersøke og dele modeller der du har resten av inspeksjonsdataene.
Blueye Cloud vurderer skarpheten og detaljene i videobildene, og bruker bevegelsene fra dykkeloggen til å velge hvilke bilder som skal være med. Når dronen beveger seg og snur, velges bilder fra nye vinkler. Når den står stille, reduseres antallet nesten like bilder. Systemet sjekker også om turbiditetsfilteret eller fargekorrigeringen på X3 Ultra var slått på, slik at behandlingen ikke gjentas. Kontrasten justeres for å gjøre det lettere å finne igjen detaljer mellom bildene, mens hvitbalansen justerer fargene i den ferdige modellen.
Du trenger ikke å hente ut stillbilder fra videoen, velge et intervall mellom bildene eller behandle dem selv. Dykkeloggen gir informasjon om dybde, orientering og posisjon som brukes til å skalere modellen.
Du kan dermed lage modeller uten å kjøpe en egen programvarelisens for fotogrammetri eller investere i en datamaskin med et kraftig skjermkort. Du velger opptakene og ser på resultatet i nettleseren. Blueye Cloud gjør beregningene.
Legg til videoer og trykk Bygg
La Blueye-appen synkronisere dykkeloggene og opptakene til Blueye Cloud. Opprett deretter et prosjekt og legg til dykkene du vil bruke. Du kan bare bruke video fra Blueye-droner, og dykkeloggen må være synkronisert sammen med videoen. Opptak fra både hovedkameraet og kameraer koblet til gjesteporten støttes. Du kan også bruke opptak som allerede ligger i Blueye Cloud.
Hovedkameraene på X3, X3 Ultra og X7 er kalibrert for bruk under vann. Bruker du et kamera på gjesteporten eller hovedkameraet på en eldre drone, får du et varsel før bygging om at målestokken kan være unøyaktig, og at rette linjer kan bli skjeve.
Åpne fanen 3D-modeller i prosjektet, klikk Ny 3D-modell, gi modellen et navn og velg videoene som viser samme objekt eller område. Du kan kombinere flere opptak, også fra forskjellige dykk. Trykk deretter Bygg. Målet vårt er at du skal kunne komme i gang selv om du har lite erfaring med fotogrammetri og ikke kjenner til programvaren som vanligvis brukes.
Kvaliteten Rask og automatisk bildeforbedring er valgt på forhånd. Standard og Høy bruker mer tid på beregningene for å få frem finere detaljer. I panelet Bilder kan du forhåndsvise og justere bildeforbedringen.
Når du trykker Bygg, viser Blueye Cloud forventet behandlingstid og hvor mange bilder som skal behandles, og ber deg bekrefte. Du kan følge fremdriften i arbeidsområdet eller la behandlingen fortsette og komme tilbake senere. Den som startet byggingen, får en e-post når modellen er klar, eller hvis byggingen mislykkes. Resultatet vises også under varselbjellen for organisasjonen.
Se nærmere på modellen og gjør målinger
Den ferdige modellen åpnes i et eget 3D-arbeidsområde. Dra for å snu den, zoom inn der et propellblad møter navet, eller slå på kameraposisjonene for å se hvordan propellen ble filmet. I Vis-menyen kan du velge mellom farget punktsky, teksturert mesh og trådmodell. Punktskyen kan vise detaljer som har blitt jevnet ut i den sammenhengende overflaten.
Du kan lagre en navngitt visning av en detalj du vil at en kollega skal se på. Alle som åpner modellen, kan klikke på navnet for å komme tilbake til samme utsnitt og vinkel. Originalvideoene ligger ved siden av modellen, med lenker tilbake til dykkene.
På en modell med målestokk i meter velger du Mål og klikker på to punkter på overflaten eller i punktskyen. Da får du avstanden i rett linje mellom punktene. Du kan lagre en tekst til målingen, for eksempel «Fra bladspiss til nav». Bare brukere med rollen Operatør eller Administrator kan lagre målinger og navngitte visninger i modellen.
Slik beregnes målestokken
Fotogrammetri beregner formen ut fra bildene. For å angi størrelsen i meter trenger Blueye Cloud en referanse fra dykkeloggen.
Med en DVL (Doppler Velocity Log) kan Blueye Cloud bruke et gyldig posisjonsspor fra dykket til å skalere og orientere modellen. Hvis loggen også inneholder en geografisk posisjon, kan modellen plasseres på prosjektkartet.
Du kan også lage modeller uten DVL. Blueye Cloud kan beregne en omtrentlig målestokk fra dybdesensoren og dronens helning, dersom dronen beveget seg opp eller ned forbi objektet under filmingen. Slike målinger merkes som omtrentlige. Hvis opptaket er gjort på nesten samme dybde hele veien, og det ikke finnes et brukbart posisjonsspor, kan modellen bli uten målestokk i meter. Da er måleverktøyet deaktivert.
Uten et posisjonsspor under vann blir plasseringen på kartet omtrentlig, basert på en registrert overflateposisjon hvis den finnes. Retningen er ukjent, og du kan flytte og rotere modellen på kartet.
Hvor nøyaktige målingene blir, avhenger av opptakene, kamerakalibreringen og hvor godt bildene passer sammen. Se etter varsler om målestokken, og sammenlign uklare områder med originalvideoen før du legger en måling til grunn.
Legg til flere opptak senere
Det første opptaket kan vise forsiden av propellen godt, men mangle deler av baksiden av bladene. Film en ny runde, velg Legg til videoer i den eksisterende modellen og trykk Bygg med de nye videoene. Opptakene kan være fra samme dykk eller fra en senere inspeksjon.
Ta med noe av området du allerede har filmet, slik at de nye bildene kan kobles til den eksisterende modellen. Blueye Cloud gjenbruker det som allerede er behandlet, og legger til de nye bildene før modellen oppdateres. Den forrige modellen er synlig mens behandlingen pågår. Hvis du endrer kvalitetsinnstillingen, må hele modellen bygges på nytt.
Deling, innbygging på nettsider og eksport
Når du deler prosjektet med en kunde, kan kunden snu modellen, åpne de lagrede visningene og se målingene sammen med opptakene fra dykkene. På en modell med målestokk i meter kan kunden også gjøre egne målinger under gjennomgangen. Disse lagres ikke i modellen. En offentlig lenke til prosjektet kan åpnes uten Blueye-konto og uten å installere programvare.
Se 3D-modellene i eksempelprosjektet vårt, eller åpne propellmodellen og modellen av kaiveggen ved Dora direkte.
Du kan også bygge inn en 3D-modell på din egen nettside, slik at besøkende kan se på modellen uten å forlate siden. Modellen av kaiveggen ved Dora nedenfor er et eksempel på dette.
I 3D-arbeidsområdet kan du velge Eksporter for å laste ned modellen og bruke den i annen programvare. Eksportverktøyene er ikke tilgjengelige via offentlige delingslenker. Du kan velge mellom følgende formater:
- GLB: overflatemodellen med farger og tekstur samlet i én fil.
- STL: overflatens geometri uten farger, til bruk i CAD-programmer og 3D-utskrift.
- PLY: den fargede punktskyen, til videre analyse og behandling i punktskyprogramvare.
Trenger du full kontroll over rekonstruksjonen, kan du fortsatt bruke originalvideoene og dykkeloggene til å gjøre arbeidet på din egen datamaskin. Da velger du selv programvare, henter ut bildene og bestemmer innstillingene for behandlingen.
Gode opptak gir bedre modeller
Fotogrammetri trenger skarpe, overlappende bilder av et objekt som står stille. Her er noen råd når du skal filme til din første modell:
- Kjør rolig rundt objektet. Flytt kameraet til nye posisjoner, ikke bare endre vinkelen. Hold objektet i bildet mens du beveger deg.
- Sørg for god overlapp mellom bildene. De samme detaljene bør være synlige i flere bilder. Når du starter en ny runde eller et nytt opptak, ta med noe av området du allerede har filmet.
- Hold bildet klart og belysningen jevn. Unngå å virvle opp sedimenter og å endre belysningen brått. Uskarpe bilder, refleksjoner og overflater med få synlige detaljer gjør det vanskeligere å koble bildene sammen. Slå av digital zoom, slik at opptakene stemmer med kamerakalibreringen.
- Varier dybden hvis du ikke har DVL. Kjør opp eller ned en meter eller mer mens du holder objektet i bildet, fremfor å sirkle rundt på samme dybde.
Se på både punktskyen og den teksturerte overflaten for å kontrollere hvilke deler av objektet som er godt gjengitt.
Tilgjengelig i Blueye Cloud
3D-fotogrammetri er tilgjengelig nå på cloud.blueye.no. For å lage modeller trenger du et Blueye Cloud Pro-abonnement.
Et kort, stødig opptak av en propell eller et annet objekt du kjenner godt, er et fint sted å begynne. Velg kvaliteten Rask for å prøve det ut. Vi vil gjerne se resultater fra inspeksjonene dine og høre hva som fungerer, og hva som kan bli bedre. Bruk tilbakemeldingsknappen i Blueye Cloud.
