Caminhos de integração do Microsoft Fabric para ISVs

O Microsoft Fabric oferece três caminhos distintos para que ISVs (Fornecedores Independentes de Software) se integrem perfeitamente ao Fabric. Para um ISV que começa nesta jornada, queremos percorrer vários recursos que temos disponíveis em cada um desses caminhos.

Interoperabilidade com Fabric OneLake

O foco principal com o modelo Interop é permitir que os ISVs integrem suas soluções com a Fundação OneLake. Para interoperabilidade com o Microsoft Fabric, fornecemos integração usando uma infinidade de conectores no Data Factory e no Real-Time Intelligence. Também fornecemos APIs REST para OneLake, atalhos no OneLake, compartilhamento de dados entre locatários do Fabric e espelhamento de banco de dados.

As seções a seguir descrevem algumas das maneiras pelas quais você pode começar a usar esse modelo.

OneLake APIs

• O OneLake oferece suporte a APIs e SDKs Gen2 existentes do Azure Data Lake Storage (ADLS) para interação direta, permitindo que os desenvolvedores leiam, escrevam e gerenciem seus dados no OneLake. Saiba mais sobre as APIs REST do ADLS Gen2 e como se conectar ao OneLake.
• Como nem todas as funcionalidades do ADLS Gen2 são mapeadas diretamente para o OneLake, o OneLake também impõe uma estrutura de pastas definida para dar suporte a espaços de trabalho e itens do Fabric. Para obter uma lista completa de comportamentos diferentes entre OneLake e ADLS Gen2 ao chamar essas APIs, consulte Paridade de API do OneLake.
• Se você estiver usando o Databricks e quiser se conectar ao Microsoft Fabric, o Databricks funciona com APIs do ADLS Gen2. Integre o OneLake com o Azure Databricks.
• Para aproveitar ao máximo o que o formato de armazenamento Delta Lake pode fazer por você, analise e entenda o formato, a otimização de tabela e o V-Order. Otimização da tabela Delta Lake e V-Order.
• Quando os dados estiverem no OneLake, explore localmente usando o Explorador de Arquivos do OneLake. O explorador de arquivos OneLake integra perfeitamente o OneLake com o Explorador de Arquivos do Windows. Este aplicativo sincroniza automaticamente todos os itens do OneLake aos quais você tem acesso no Explorador de Arquivos do Windows. Você também pode usar qualquer outra ferramenta compatível com o ADLS Gen2, como o Gerenciador de Armazenamento do Azure.

APIs de inteligência em tempo real

O Fabric Real-Time Intelligence é uma solução abrangente projetada para suportar todo o ciclo de vida dos dados em tempo real, desde a ingestão e o processamento de fluxo até a análise, visualização e ação. Criado para lidar com dados de streaming de alta taxa de transferência, ele oferece recursos robustos para ingestão, transformação, consulta e armazenamento de dados, permitindo que as organizações tomem decisões oportunas e orientadas por dados.

• Os fluxos de eventos permitem que você traga eventos em tempo real de várias fontes e os encaminhe para vários destinos, como Lakehouses, bancos de dados KQL no Eventhouse e Fabric Activator. Saiba mais sobre a API Eventstreams e Eventstreams.
• Você pode ingerir dados em fluxo contínuo no Eventstreams através de vários protocolos, incluindo... Kafka, Hubs de Eventos, AMQP e uma lista crescente de conectores listados aqui.
• Depois de processar os eventos ingeridos usando a experiência sem código ou usando o operador SQL (Visualização), o resultado pode ser encaminhado para vários destinos de malha ou para pontos de extremidade personalizados. Saiba mais sobre os destinos da Eventstreams aqui.
• As casas de eventos são projetadas para streaming de dados, compatíveis com Real-Time hub e ideais para eventos baseados no tempo. Os dados são automaticamente indexados e particionados com base no tempo de ingestão, oferecendo recursos de consulta analítica incrivelmente rápidos e complexos em dados de alta granularidade que podem ser acessados no OneLake para uso em todo o conjunto de experiências do Fabric. As Eventhouses suportam APIs e SDKs existentes da Eventhouse para interação direta, permitindo que os desenvolvedores leiam, escrevam e gerenciem seus dados em Eventhouses. Saiba mais sobre a API REST.
• Se você estiver usando Databricks ou Jupyter Notebooks, poderá utilizar a Kusto Python Client Library para trabalhar com bancos de dados KQL no Fabric. Saiba mais sobre Kusto Python SDK.
• Você pode utilizar os conectores existentes Microsoft Logic Apps, Azure Data Factory ou Microsoft Power Automate para interagir com suas Eventhouses ou Bancos de Dados KQL.
• Os atalhos de banco de dados em Inteligência em Tempo Real são referências incorporadas dentro de um eventhouse a um banco de dados de origem. O banco de dados de origem pode ser um Banco de Dados KQL em Inteligência em Tempo Real ou um banco de dados do Azure Data Explorer. Os atalhos podem ser usados para a partilha direta de dados dentro do mesmo inquilino ou entre inquilinos. Saiba mais sobre como gerenciar atalhos de banco de dados usando a API.

Data Factory na plataforma Fabric

• Os pipelines possuem um extenso conjunto de conectores, permitindo que os ISVs se conectem sem esforço a uma infinidade de armazenamentos de dados. Quer esteja a interagir com bases de dados tradicionais ou soluções modernas baseadas na nuvem, os nossos conectores garantem um processo de integração suave. Visão geral do conector.
• Com nossos conectores Dataflow Gen2 suportados, os ISVs podem aproveitar o poder do Fabric Data Factory para gerenciar fluxos de trabalho de dados complexos. Esse recurso é especialmente benéfico para ISVs que procuram simplificar o processamento de dados e as tarefas de transformação. Conectores de fluxo de dados Gen2 no Microsoft Fabric.
• Para obter uma lista completa dos recursos suportados pelo Data Factory no Fabric, confira este Blog do Data Factory no Fabric.

Atalhos multicloud

Os atalhos no Microsoft OneLake permitem unificar seus dados entre domínios, nuvens e contas, criando um único data lake virtual para toda a empresa. Todas as experiências de malha e mecanismos analíticos podem apontar diretamente para suas fontes de dados existentes, como OneLake em locatário diferente, Azure Data Lake Storage (ADLS) Gen2, contas de armazenamento do Amazon S3, Google Cloud Storage(GCS),fontes de dados compatíveis com S3 e Dataverse por meio de um namespace unificado. A OneLake apresenta aos ISVs uma solução transformadora de acesso a dados, unindo perfeitamente a integração entre diversos domínios e plataformas de nuvem.

• Saiba mais sobre os atalhos do OneLake
• Saiba mais sobre o OneLake, uma cópia lógica única
• Saiba mais sobre os atalhos do banco de dados KQL

Partilha de dados

O Compartilhamento de Dados permite que os usuários do Fabric compartilhem dados entre diferentes locatários do Fabric sem duplicá-los. Esse recurso aprimora a colaboração, permitindo que os dados sejam compartilhados "no local" a partir de locais de armazenamento do OneLake. Os dados são partilhados como de leitura única, acessíveis através de vários mecanismos de computação Fabric, incluindo SQL, Spark, KQL e modelos semânticos. Para usar esse recurso, os administradores do Fabric devem habilitá-lo nos locatários de compartilhamento e recebimento. O processo inclui a seleção de dados dentro do hub de dados ou espaço de trabalho do OneLake, a definição de configurações de compartilhamento e o envio de um convite para o destinatário pretendido.

• Saiba mais sobre o Compartilhamento de Dados

Espelhamento de base de dados

O espelhamento no Fabric oferece uma experiência fácil para evitar ETL (Extract Transform Load) complexo e integrar os seus dados existentes no OneLake com os restantes dos seus dados no Microsoft Fabric. Você pode replicar continuamente os seus dados existentes diretamente no OneLake do Fabric. No Fabric, você pode desbloquear cenários poderosos de Business Intelligence, Inteligência Artificial, Engenharia de Dados, Ciência de Dados e compartilhamento de dados.

• Saiba mais sobre espelhamento e os bancos de dados suportados.

O espelhamento aberto permite que qualquer aplicativo grave dados de alteração diretamente num banco de dados espelhado no Fabric. O espelhamento aberto foi projetado para ser extensível, personalizável e aberto. É um recurso poderoso que estende o espelhamento no Fabric com base no formato de tabela Delta Lake aberta. Depois que os dados chegam ao OneLake in Fabric, o espelhamento aberto simplifica o tratamento de alterações de dados complexas, garantindo que todos os dados espelhados estejam continuamente atualizados e prontos para análise.

• Saiba mais sobre o espelhamento aberto e quando o utilizar.

Desenvolver na plataforma Fabric

Com o modelo Develop on Fabric, os ISVs podem criar seus produtos e serviços sobre o Fabric ou incorporar perfeitamente as funcionalidades do Fabric em seus aplicativos existentes. É uma transição da integração básica para a aplicação ativa dos recursos que o Fabric oferece. A principal área de integração é via APIs REST para várias experiências Fabric. A tabela a seguir mostra um subconjunto de APIs REST agrupadas pela experiência de malha. Para obter uma lista completa, consulte a documentação da API REST do Fabric.

Criar uma carga de trabalho Fabric

O modelo de carga de trabalho Build a Fabric foi projetado para capacitar ISVs a criar experiências personalizadas na plataforma Fabric. Ele fornece aos ISVs as ferramentas e os recursos necessários para alinhar suas ofertas com o ecossistema da Fabric, otimizando a combinação de suas propostas de valor exclusivas com os amplos recursos da Fabric.

O Microsoft Fabric Workload Development Kit oferece um kit de ferramentas abrangente para que os desenvolvedores integrem aplicativos ao hub do Microsoft Fabric. Essa integração permite a adição de novos recursos diretamente no espaço de trabalho do Fabric, aprimorando a jornada de análise para os usuários. Ele fornece aos desenvolvedores e ISVs um novo caminho para alcançar os clientes, oferecendo experiências familiares e novas e aproveitando os aplicativos de dados existentes. Os administradores de malha têm a capacidade de gerenciar quem pode adicionar cargas de trabalho em uma organização.

Centro de Carga de Trabalho

O Workload Hub no Microsoft Fabric serve como uma interface centralizada onde os utilizadores podem explorar, gerir e aceder a todas as cargas de trabalho disponíveis. Cada carga de trabalho no Fabric está associada a um tipo de item específico que pode ser criado nos espaços de trabalho do Fabric. Ao navegar pelo Workload Hub, os usuários podem facilmente descobrir e interagir com várias cargas de trabalho, aprimorando suas capacidades analíticas e operacionais.

Os administradores de malha têm o direito de gerenciar a carga de trabalho a disponibilidade, tornando-os acessíveis em todo o locatário ou em capacidades específicas. Essa extensibilidade garante que o Fabric permaneça uma plataforma flexível e escalável, permitindo que as organizações adaptem seu ambiente de carga de trabalho para atender aos dados em evolução e aos requisitos de negócios. Ao integrar-se perfeitamente à estrutura de segurança e governança do Fabric, o Workload Hub simplifica a implantação e o gerenciamento da carga de trabalho. Cada carga de trabalho vem com uma experiência de avaliação para os usuários começarem rapidamente. A seguir estão as cargas de trabalho disponíveis:

• 2TEST: Uma carga de trabalho abrangente de garantia de qualidade que automatiza testes e verificações de qualidade de dados.

  

• Qualidade de dados do Informatica Cloud: permite traçar o perfil, detetar e corrigir problemas de dados, como duplicatas, valores ausentes e inconsistências, diretamente em seu ambiente de malha.

  

• Lumel EPM: permite que os usuários corporativos criem aplicativos de gerenciamento de desempenho empresarial (EPM) sem código sobre os modelos semânticos.

  

• Neo4j AuraDB com Graph Analytics: Crie modelos gráficos a partir de dados do OneLake, analise e explore visualmente conexões de dados, consulte seus dados e execute qualquer um dos 65+ algoritmos integrados com uma experiência perfeita no Fabric Console.

  

• Osmos AI Data Wrangler: Automatiza a preparação de dados com wranglers de dados alimentados por IA, tornando a transformação de dados sem esforço.

  

• Power Designer: Uma ferramenta para criação de modelos de relatório e estilo a nível empresarial, proporcionando melhoria nos designs dos relatórios do Power BI.

  

• Celonis Process Intelligence: Permite que as organizações exponham a classe exclusiva de dados e contexto da Celonis no Microsoft Fabric.

  

• Profisee Master Data Management: permite que os usuários combinem, mesclem, padronizem, corrijam e validem dados de forma eficiente, transformando-os em produtos de dados confiáveis e prontos para consumo para análise e IA.

  

• Quantexa Unify: aprimora as fontes de dados do Microsoft OneLake fornecendo uma visão de 360 graus com recursos avançados de resolução de dados.

  

• SAS Decision Builder: Ajuda as organizações a automatizar, otimizar e dimensionar seus processos de tomada de decisão.

  

• Statsig: Traz visualização e análise de dados diretamente para o seu armazém.

  

• Teradata AI Unlimited: Combina o mecanismo analítico da Teradata com os recursos de gerenciamento de dados do Microsoft Fabric por meio das funções no banco de dados da Teradata.

  

• SQL2Fabric-Mirroring by Striim: Solução de replicação de código zero totalmente gerenciada que espelha perfeitamente os dados locais do SQL Server para o Microsoft Fabric OneLake

  

À medida que mais cargas de trabalho ficam disponíveis, o Workload Hub continuará a servir como um espaço dinâmico para descobrir novos recursos, garantindo que os usuários tenham as ferramentas de que precisam para escalar e otimizar suas soluções orientadas por dados.