Como criar aplicativos de realidade mista de baixo código no Power Apps, AI Builder e HoloLens

A Power Platform de baixo código da Microsoft é uma peça-chave de seu conjunto de software de negócios. Ao ficar entre as ferramentas de produtividade do Microsoft 365 e os aplicativos de linha de negócios do Dynamics 365, é uma maneira de criar fluxos de trabalho personalizados e adicionar suas próprias experiências de usuário. Como um bônus adicional, você obtém o aos Serviços Cognitivos do Azure para IA como um serviço e conectores que se vinculam a aplicativos de terceiros.

O resultado é uma maneira rápida de distribuir o código conforme necessário, preenchendo o que é frequentemente chamado de “lacuna do aplicativo corporativo”. As ferramentas da Power Platform estão prontas para uso tanto por usuários que precisam de um aplicativo, mas não há nada para atender a essa necessidade, quanto por desenvolvedores profissionais que precisam lançar uma solução rapidamente. Tecnologias como a linguagem PowerFX e o e ao Visual Studio Code facilitam trazer a Power Platform para as cadeias de ferramentas de desenvolvimento tradicionais, apoiando o desenvolvimento de equipes de fusão interdisciplinares e multifuncionais para projetar, construir e implantar aplicativos.

VEJA: Comandos do Windows, Linux e Mac que todos precisam saber (PDF grátis) (TechRepublic)

Se você criou um aplicativo no Excel ou no Access, pode criar um no Power Platform, especialmente usando suas ferramentas do Power Apps. Há três maneiras de criar aplicativos do Power Apps: usando aplicativos de tela para arrastar e soltar controles em uma superfície de design, anexando código a eles ou usando aplicativos baseados em modelo para ir direto dos dados para o código. Os aplicativos de tela oferecem mais flexibilidade, pois podem ser usados ​​para criar uma ampla variedade de tipos diferentes de aplicativos usando muitos tipos diferentes de dados. Eles também são como você pode hospedar realidade mista em seu aplicativo de baixo código.

Plataforma de energia no metaverso

Uma tecnologia que está recebendo muito interesse no momento é a realidade mista ou, como está se tornando conhecido, o metaverso. A Microsoft tem muita experiência no uso de conteúdo 3D em realidade virtual e aumentada (VR/AR), com ferramentas incorporadas ao Windows e Azure, bem como e a conteúdo de realidade mista para dispositivos Android e iOS usando seus SDKs de realidade aumentada (kits de desenvolvimento de software ).

Os experimentos iniciais da Microsoft com realidade mista corporativa foram ferramentas de e, oferecendo aos trabalhadores de primeira linha o a e em tempo real com colegas de trabalho olhando através de seus olhos (ou pelo menos sua câmera HoloLens) e anotando o mundo para eles ou fornecendo exemplos em tamanho real de equipamentos para treinamento e planejamento.

Esses conceitos fazem parte de como a Microsoft aborda a realidade mista no Power Apps — como uma ferramenta em vez de um truque. Isso não quer dizer que eles não possam ser usados ​​como parte de um aplicativo de marketing, mas há muito mais sobre como a Microsoft vê a tecnologia.

O benefício, é claro, é que o uso do Power Apps reduz o conhecimento necessário para criar um aplicativo de realidade mista. Como resultado, em vez de ter que aprender Unity ou um ambiente de desenvolvimento 3D semelhante, tudo o que você precisa é de um aplicativo Canvas e os controles certos. Isso torna a construção de um protótipo uma questão de minutos, independentemente dos dispositivos que você está direcionando.

Adicionando realidade mista a um aplicativo do Power Apps

Os controles de realidade mista do Power Apps baseiam-se no trabalho da equipe Babylon.js. Uma ferramenta para construir imagens 3D na web usando JavaScript, agora foi integrada ao React Native para uso em dispositivos móveis fora do navegador. A Microsoft já estava usando a estrutura React Native para fornecer os controles do Power Apps Mobile, portanto, usá-la para fornecer conteúdo de realidade mista fazia muito sentido.

Trabalho teve que ser feito para integrar a versão Native do Babylon com React Native, bem como com o ARKit do iOS e o ARCore do Android. Para PCs que usam as ferramentas da Web do Power Apps, há integração com o kit de ferramentas WebXR.

Embora você não precise entender o back-end para criar a realidade mista do Power Apps, os controles resultantes dão e aos principais recursos de que seus aplicativos precisam, incluindo o fornecimento de âncoras para exibições, bem como testes de acerto e detecção de plano. Isso agora significa que você pode testar o conteúdo de realidade mista 3D usando o Babylon em PCs antes de movê-lo para o Power Apps e usá-lo em dispositivos.

VEJA: Kit de contratação: Desenvolvedor Back-end (TechRepublic )

Usar os controles é relativamente simples. O conteúdo é armazenado no back-end do aplicativo e carregado conforme necessário, onde é exibido usando o controle Exibir no MR Power Apps usando as dimensões que você definiu. Seu dispositivo se torna uma janela de visualização para um mundo de realidade mista, colocando objetos no chão ou na parede para você se movimentar.

Você não quer usar essa ferramenta o tempo todo; provavelmente será uma maneira de pegar um item de um catálogo e mostrá-lo onde pode ser usado. Talvez seja um móvel em uma casa, ou talvez seja um equipamento industrial no chão de uma fábrica. Os usuários clicam em um botão em seu aplicativo para iniciar a visualização de realidade mista, substituindo a visualização que estavam usando.

Reunindo Power Apps, sensores de dispositivos e IA

Além de usar o Power Apps para adicionar itens à realidade aumentada, você pode usar ferramentas de realidade mista para medir o ambiente ao seu redor. Isso pode ser útil se você estiver criando um aplicativo para ajudar a calcular os custos de construção.

Adicionar o controle de câmera de medição permite que os usuários escolham um ponto inicial e, em seguida, desloquem para medir um espaço, com uma sobreposição mostrando as medições atuais. Isso usa os sensores de profundidade integrados na maioria dos telefones modernos; você obterá os melhores resultados se um telefone tiver LIDAR ou um sensor preciso semelhante. Misturar as ferramentas de medição com o controle de visualização pode ajudar no planejamento da instalação de equipamentos, mostrando onde algo pode se encaixar com segurança.

As coisas ficam ainda mais interessantes quando você mistura essas ferramentas com o Power Apps AI Builder. Aqui, você obtém o de baixo código aos Serviços Cognitivos do Azure, combinando modelos pré-criados com recursos personalizados.

Você pode usar os controles de câmera do Power Apps e seus recursos de reconhecimento de objetos para, por exemplo, detectar qual versão de um equipamento precisa de manutenção, carregando automaticamente o modelo de realidade mista correto para comparação. O aplicativo pode então iniciar os Guias do Dynamics 365 apropriados para auxiliar na manutenção, usando um telefone AR ou, mais útil, um HoloLens de viva-voz. Uma amostra da equipe de defesa do desenvolvedor do Azure mostra como você pode usar as ferramentas para identificar diferentes hardwares.

Construindo o futuro do desenvolvimento de aplicativos com o Power Apps

Construir aplicativos complexos de realidade mista como esse costumava ser difícil, exigindo muitos recursos do desenvolvedor. Ao usar o Power Apps, as empresas podem aproveitar sua capacidade de conectar rapidamente diferentes aplicativos, usando câmeras de dispositivos e serviços em nuvem, juntamente com fluxos de trabalho simples.

O resultado pode não ser tão bonito ou tão completo quanto um aplicativo especialmente projetado, mas vai fazer o trabalho e fazê-lo mais do que o suficiente. Além disso, você pode ter algo funcionando em questão de dias como uma prova de conceito ou uma forma de resolver problemas rapidamente.