Reúna os dados de que você precisa, exatamente onde você precisa

Em tempos de dados infinitos, é fundamental fazer uma coleta mais inteligente.

Como especialista e profissional de análise, sei em primeira mão que a coleta de dados em vários ativos e canais digitais pode ser assustadora. Esse é especialmente o caso quando o número de dispositivos conectados à Internet global ultrapassa 21 bilhões em 2023. Felizmente, nosso atual sistema de endereçamento da Internet pode lidar com muitos desses dispositivos, ou seja, até 3,4×10E38 (isso é 34 seguido de 37 zeros).

Desses 21 bilhões de dispositivos, cerca de 66% são compostos por dispositivos da Internet das Coisas (IoT), que geram dados sobre sua operação, recursos e configurações. Chame isso de caixas pretas conectadas ou telemetria com esteroides, mas esses dispositivos estão enviando dados para os provedores de serviços que usam esses dados para aprimorar os produtos.

Essa escala de coleta de dados fornece não apenas o combustível ideal para IA e aprendizado de máquina, mas também os meios para estabelecer linhas de base de desempenho e exceções. Modelos de uso de recursos, insights e planos de ação podem ser derivados de um poço de informações tão insondável.

(Re)introdução do Measurement Protocol (protocolo de medição).

Como esses dispositivos medem a atividade, você pergunta? Esta publicação é uma desculpa perfeita para analisar o Measurement Protocol do Google Analytics 4 como um método alternativo de coleta de dados que pode ajudá-lo a medir todos os dados de IoT de que você precisa e torná-los compatíveis com o modelo de dados simples que você adotou e adora. O Measurement Protocol foi introduzido no início da década de 2010 com a versão anterior do Google Analytics, o agora extinto Universal Analytics. Naquela época, o Measurement Protocol era usado de maneiras muito criativas, portanto, vê-lo renascer no GA4 é uma ótima oportunidade para (re)descobrir esse recurso menos conhecido, porém poderoso, do Google Analytics.

Em essência, o Measurement Protocol é uma API que permite que você envie eventos diretamente para os servidores do Google Analytics, evitando a necessidade de kits de desenvolvimento de software volumosos e integrações complexas. O mínimo de software do Measurement Protocol significa que ele pode ser facilmente incorporado em qualquer sistema que possa chamar um URL. Como você pode imaginar, isso pode ser usado para toda a IoT - tudo, desde quiosques a pontos de venda e dispositivos de IoT. Algumas vantagens claras incluem:

• Protocolo padrão, por isso é compatível com uma ampla gama de dispositivos e plataformas
• Fácil de usar, mesmo para desenvolvedores com pouca experiência
• Escalável, para que possa ser usado para coletar dados de um grande número de usuários
• Segurança, por meio do uso de chaves secretas de coleta de dados

Devido à sua abordagem leve, usar o Measurement Protocol significa que você pode coletar apenas os dados de que precisa. A falta de um mecanismo de consentimento explícito do usuário na maioria dos dispositivos de IoT o incentivará a adotar uma abordagem de privacidade em primeiro lugar, portanto, concentre-se na telemetria e não nos dados pessoais.

Descobrir o funcionamento interno do Measurement Protocol.

Como tudo isso funciona? Bem, ao criar uma propriedade do Google Analytics 4 (GA4) para o seu projeto de IoT, primeiro você precisa criar uma nova propriedade da Web e, em seguida, basta clicar nesse fluxo de dados recém-criado para acessar o painel de segredos da API do Measurement Protocol.

A próxima etapa é criar uma chave, à qual você fará referência nas chamadas à API do Measurement Protocol. Tudo o que você precisa fazer é fornecer um apelido para sua chave e usar o ID fornecido em suas chamadas de API. Como você pode ver na lista abaixo, nossos Data.Monks a utilizam bastante!

Depois que as chaves estiverem configuradas, anote o ID de medição do GA4 para o fluxo de IoT e use o código para criar um URL para o serviço de Measurement Protocol que combine tudo o que precisamos, inclusive os parâmetros do evento. No exemplo abaixo, nossa geladeira conectada enviará um evento quando a porta da geladeira estiver aberta.

O URL desejado deve ter a seguinte aparência:

https://www.google-analytics.com/mp/collect?measurement_id={your ID}&api_secret={your key}

Agora precisamos enviar o URL acima como uma solicitação POST, com um payload JSON contendo os parâmetros de evento que queremos enviar. Lembre-se de que, como esse não é um evento do GA4 enviado de um navegador ou de um aplicativo móvel, não há detecção e coleta automáticas de elementos extras, como ocorre com a medição aprimorada do GA4. Na verdade, o Measurement Protocol mede apenas o que você envia. A partir daí, publique a solicitação em sua linguagem de programação favorita - Python, no meu caso.

Com certeza, o evento será registrado na interface em tempo real do GA4 e as ocorrências subsequentes farão parte dos seus relatórios do GA4 - e serão transmitidas ao BigQuery se você tiver vinculado sua propriedade ao Google Cloud Platform.

E, é claro, como tenho certeza de que você já adivinhou, criar painéis sobre a atividade dos seus dispositivos é muito fácil no Google Looker Studio. Isso é tudo o que há para fazer!

É hora de experimentar você mesmo o Measurement Protocol do GA4.

Vimos que o Measurement Protocol como outras plataformas de coleta de dados em nível de evento, usa um formato amigável de API para enviar dados ao Google Analytics. Do ponto de vista técnico, essa é uma implementação muito fácil e eficiente, portanto, sinta-se à vontade para ser criativo em todos os seus projetos de IoT.

Discutimos o uso do Measurement Protocol principalmente para dispositivos de IoT (ou qualquer dispositivo que não seja um computador, telefone celular ou console de jogos). Tendo isso em mente, você também pode usá-lo como um método de troca de dados em um ambiente de nuvem como uma chamada de retorno de API após a conclusão de um processo. Isso significa que o protocolo de medição funciona muito bem com o Cloud Functions ou com filas de mensagens como o Google Pub/Sub ou o Kafka.

Por fim, voltando à observação que fiz sobre IA, esse tipo de medição é, de fato, uma maneira ideal de coletar combustível para um modelo de IA/ML, mas a IA também pode ser usada para acionar o evento certo no momento certo e com a carga de dados certa. Nesse ponto, a IA pode improvisar e melhorar seu plano de coleta de dados pretendido, começar a enviar eventos fora do escopo de seu programa original e revelar ainda mais insights. Juntamente com o Cloud ML do Google Cloud Platform, os resultados podem surpreendê-lo!

Em resumo, aqui estão suas principais conclusões sobre o Measurement Protocol:

• Mecanismo simples: qualquer sistema que possa gerar um URL pode usá-lo
• Incentiva a coleta de dados concisa, compacta e favorável à privacidade
• Pode ser usado em qualquer coisa, sobre qualquer coisa
• Aproveita o poder do modelo de dados simples do Google Analytics 4
• Pequena pegada de software: consumo de recursos muito limitado
• Complementa uma estratégia de IA e abre novas oportunidades