Usar edifícios e terrenos ao seu redor no SDK do Android (Kotlin/Java)

As APIs Streetscape Geometry oferecem a geometria do terreno, dos edifícios ou de outras estruturas em uma cena. A geometria pode ser usada para oclusão, renderização ou colocação de conteúdo de RA com APIs de teste de hit. Os dados da geometria do Streetscape são obtidos por meio de imagens do Google Street View.

Testar o exemplo

O app de exemplo geospatial_java (link em inglês) demonstra como receber e renderizar geometrias do Streetscape.

Configurar a API Geospatial

Para usar a geometria do Streetscape, é necessário configurar a API Geospatial no seu projeto. Siga as instruções em Como ativar a API Geospatial para configurar a API Geospatial.

Ativar geometria da paisagem urbana

A API Geospatial acessa dados de geometria do Streetscape quando GeospatialMode é definido como GeospatialMode.ENABLED e StreetscapeGeometryMode está definido como StreetscapeGeometryMode.ENABLED.

Java

Config config = session.getConfig();
// Streetscape Geometry requires the Geospatial API to be enabled.
config.setGeospatialMode(Config.GeospatialMode.ENABLED);
// Enable Streetscape Geometry.
config.setStreetscapeGeometryMode(Config.StreetscapeGeometryMode.ENABLED);
session.configure(config);

Kotlin

session.configure(
  session.config.apply {
    // Streetscape Geometry requires the Geospatial API to be enabled.
    geospatialMode = Config.GeospatialMode.ENABLED
    // Enable Streetscape Geometry.
    streetscapeGeometryMode = Config.StreetscapeGeometryMode.ENABLED
  }
)

Conseguir a geometria do Streetscape em uma sessão do ARCore

Use Session.getAllTrackables() e StreetscapeGeometry.class para filtrar resultados.

Java

session.getAllTrackables(StreetscapeGeometry.class);

Kotlin

session.getAllTrackables(StreetscapeGeometry::class.java)

Entender o StreetscapeGeometry

StreetscapeGeometry contém informações sobre um edifício:

• StreetscapeGeometry.getType()
  Identifica a StreetscapeGeometry como terreno ou edifício.
• StreetscapeGeometry.getMesh()
  Extraia um polígono Mesh que corresponda a esse terreno ou edifício.
• StreetscapeGeometry.getMeshPose()
  Descreve a origem da geometria. Todos os pontos em Mesh precisam ser transformados por StreetscapeGeometry.getMeshPose().
• StreetscapeGeometry.getQuality()
  Fornece a qualidade dos dados da malha. Os níveis de detalhamento são descritos no padrão CityGML 2.0.

Construção LOD 1

O StreetscapeGeometry.Quality.BUILDING_LOD_1 consiste na construção de plantações deslocadas para cima em direção a um topo plano. A altura das construções pode ser imprecisa.

Construção LOD 2

StreetscapeGeometry.Quality.BUILDING_LOD_2 terá geometria de maior fidelidade. As paredes e os telhados de malha combinarão melhor com a forma do edifício. Recursos menores, como chaminés ou saídas de ventilação, ainda podem furar para fora da malha.

Entender o Mesh

Mesh é uma malha de polígonos que representa uma reconstrução de superfície da geometria da paisagem urbana. Cada Mesh inclui um buffer de vértice e um buffer de índice:

• Mesh.getVertexListSize()
  Recupera o número de vértices na malha.
• Mesh.getVertexList()
  Extraia as posições concatenadas dos vértices da malha em coordenadas relativas a StreetscapeGeometry.getMeshPose().
• Mesh.getIndexListSize()
  Recupera o número de índices nessa malha.
• Mesh.getIndexList()
  Consiga os índices de vértices que compõem uma face.

Anexar conteúdo de RA a um StreetscapeGeometry

Há duas maneiras de anexar conteúdo de RA ao Streetscape Geometry:

• Ative a Profundidade geoespacial e use um teste de hit de profundidade. Esse é o método mais fácil e recomendado.
• Use Trackable.createAnchor() para criar uma âncora em uma determinada posição anexada a uma StreetscapeGeometry. Essa âncora vai herdar o estado de rastreamento do StreetscapeGeometry pai.

Realize um teste de hit no StreetscapeGeometry

Frame.hitTest() pode ser usado para fazer teste de hit com a geometria do Streetscape. Se cruzamentos forem encontrados, HitResult vai conter informações de poses sobre o local do hit, bem como uma referência à StreetscapeGeometry que foi atingida. Essa geometria da paisagem urbana pode ser transmitida a Trackable.createAnchor() para criar uma âncora anexada a ela.

Java

for (HitResult hit : frame.hitTest(singleTapEvent)) {
  if (hit.getTrackable() instanceof StreetscapeGeometry) {
    Pose hitPose = hit.getHitPose();
    hit.getTrackable().createAnchor(hitPose);
  }
}

Kotlin

for (hit in frame.hitTest(singleTapEvent)) {
  if (hit.trackable is StreetscapeGeometry) {
    val hitPose = hit.hitPose
    hit.trackable.createAnchor(hitPose)
  }
}

Ativar profundidade geoespacial

A Profundidade geoespacial combina a geometria do Streetscape com a entrada de sensor local para melhorar os dados de profundidade. Quando a profundidade geoespacial está ativada, as imagens de profundidade de saída e de profundidade bruta são modificadas para incluir a geometria rasterizada do Streetscape, além da profundidade observada localmente. Isso pode melhorar a precisão das poses usando a Profundidade.