Pular para o conteúdo principal
Procore

Administrador: monitore o uso e os créditos de IA

Fundo

A guia Relatórios na área Torre de Controle do Datagrid ajuda os administradores de conta a monitorar o uso do agente e o consumo de crédito. Seja você um cliente da Datagrid ou um cliente do Procore AI (Digital Coworker), esses relatórios fornecem visibilidade no nível da conta sobre tendências de consumo de crédito do usuário, custos de crédito de armazenamento de dados, uso do agente e métricas de engajamento do usuário.

Este tutorial ajuda você a acessar e fazer uso dos dados de uso da sua conta, o que pode ajudá-lo a definir grades de proteção opcionais na guia Orçamento ou a tomar decisões no nível da conta sobre metas de expansão e uso de IA.

Coisas a considerar

  • Permissões de usuário necessárias:

    • As permissões de 'Administrador' no Datagrid são necessárias para acessar os recursos da Torre de Controle.

      • A função "Administrador da empresa" do Procore é mapeada para a função "Administrador" no Datagrid, enquanto a função "Administrador do projeto" do Procore é mapeada para "Membro" no Datagrid. Portanto, o "Administrador do projeto" não pode acessar automaticamente os recursos da Torre de controle no Datagrid, como esses guardrails de orçamento. 

  • Clientes de IA do Procore: 

    • Todos os níveis dos pacotes do Digital Coworker (Starter, Pro e Enterprise) têm acesso à Torre de Controle, incluindo orçamento e relatórios.

    • Pré-requisitos: Como os recursos da Torre de controle estão acessíveis atualmente apenas por meio do produto Datagrid autônomo e não no Procore, o administrador do Procore deve executar a sequência de credenciamento detalhada em Habilitar Procore AI antes de poder acessar os recursos da Torre de controle no Datagrid.

Passos

  1. Entrar em app.datagrid.ai
    Observação: Os clientes do Procore com uma assinatura ativa do Digital Coworker Procore AI devem fazer login no Datagrid por meio do SSO do Procore.

  2. Verifique se você está no espaço de equipe correto . Se sua empresa tiver mais de um espaço de equipe, selecione o que deseja no menu suspenso na parte superior do painel de navegação esquerdo.

  3. No canto inferior esquerdo da página de aterrissagem, clique em Torre de Controle.

  4. Clique na guia Relatórios .

  5. Localize o filtro suspenso intervalo de datas no canto superior direito e ajuste os parâmetros de exibição conforme necessário: Últimos 7 dias, Últimos 30 dias, Últimos 60 dias ou Últimos 90 dias.

  6. Analise os dados de acordo com seus objetivos. Explore abaixo para obter mais informações sobre nossos tipos de relatório.

Consumo de Crédito por Categoria



O gráfico de barras de Consumo de Crédito por Categoria visualiza o consumo de crédito por operação de nível macro: Inteligência e Geração, Ingestão e Configuração de Dados, Atividade e Infraestrutura e Armazenamento de Dados. 

Categoria de Crédito

Operações Monitoradas

Inteligência e Geração

Execução de bate-papo em tempo real, raciocínio de agente em várias etapas e geração de carga útil de texto.

Ingestão e configuração de dados

Processamento inicial de arquivos, análise de documentos e renderização vetorial de arquivos históricos de projetos.

Atividade e Infraestrutura

Webhooks de back-end, manutenção de conexão e tráfego de orquestração ativa.

Indexação Multimodal

A taxa fixa diária diária calculada em 3 créditos por GB/dia.

Métricas Globais



A seção Métricas Globais tem cartões que monitoram a quantidade de bate-papos, espaços de equipe, agentes e usuários. Esses números oferecem uma visão ampla do cenário e da adoção do seu ecossistema de IA. 

No canto de alguns cartões há um número vermelho ou verde mostrando as mudanças líquidas para o intervalo de datas escolhido. Por exemplo: Com o filtro intervalo de datas definido como "7 dias" no canto superior direito da janela Relatórios, você pode ver que o total de Agentes de IA para a conta é 106, com um +10 verde. Isso significa que 10 novos agentes foram criados nos últimos 7 dias, elevando o número total para 106. Se você alterar o intervalo para '30 dias', poderá ver um número verde maior, mas o total permanecerá 106. 

  • Total de bate-papos: Mostra o volume cumulativo de prompts de conversação em tempo real executados por suas equipes. 

    • Cada vez que um usuário digita uma mensagem no compositor de prompts e pressiona ENTER ou clica na seta de envio, esse contador aumenta em um. Para usuários de IA do Procore: as interações no Datagrid e no painel lateral de IA do Procore contam para esse ponto de dados. 

  • Espaços de equipe: Exibe o número total de espaços de equipe (projetos) ativamente mapeados e em execução na conta. 

  • Agentes de IA: Rastreia o número total de modelos de agente pré-criados ou personalizados em execução em seus projetos.

  • Usuários ativos: O número de membros exclusivos da equipe usando as ferramentas de IA em toda a conta.

Ranking de Atividades



Na seção Ranking de atividades , as tabelas de classificação ajudam a identificar onde a adoção de IA é mais alta entre os três principais espaços de equipe (projetos), agentes e usuários em toda a conta. No momento, você só pode ver os totais de uso para os três principais usuários em cada área, não para todos os usuários. 

  • Teamspaces mais ativos: Classifica os espaços de trabalho do projeto por volume geral de bate-papo. Use este cartão para ver quais projetos estão confiando mais no utilitário do agente em tempo real.

  • Agentes mais utilizados: Identifica quais modelos de agente específicos (por exemplo, Revisor de Envios para Aprovação, Agente de Pesquisa Profunda) estão executando mais consultas em segundo plano.

  • Usuários mais engajados: Os três principais usuários da ferramenta, juntamente com o total de chats e o quanto essa quantidade é maior ou menor do que era no período anterior. 

Ao lado de muitos dos totais, há um número vermelho ou verde mostrando as mudanças líquidas para o intervalo de datas escolhido. Por exemplo: Com o intervalo de datas definido como "7 dias" no canto superior direito da janela Relatórios, você pode ver um usuário com 72 bate-papos e um +20 verde ao lado. Isso significa que o usuário enviou 72 chats para a IA no total, e 20 deles foram nos últimos sete dias. Se você alterar o intervalo para '30 dias', poderá ver um número verde maior, mas o total permanecerá 72.

Detalhamento de uso



Para obter uma auditoria mais granular do livro-razão, role até a seção Detalhamento de uso e selecione um dos seguintes tipos de conjunto de dados. Para cada um desses relatórios, você pode classificar por uma coluna específica para identificar padrões. 

Por exemplo, classifique por Nome do Agente no relatório "Prompts do Usuário & Atividade" para identificar quais ferramentas de automação especializadas estão recebendo a maior adoção do usuário, permitindo que você identifique fluxos de trabalho de projeto de alto desempenho e padronize estratégias de habilitação bem-sucedidas em outros espaços de equipe ativos. 

Prompts do usuário & Atividade

Esse relatório captura o texto real usado cada vez que um usuário interagiu com a IA em qualquer espaço de equipe (projeto) na conta. Essas consultas brutas do usuário, juntamente com processamento semântico de back-end e palavras-chave, podem mostrar tendências em toda a sua organização ou oferecer suporte conformidade auditoria.

  1. Escolha Prompts do usuário & Atividade na lista suspensa na seção "Detalhamento de uso".

  2. Role para visualizar os dados do relatório, que incluem:

    • Data: Data do calendário da interação do usuário.

    • Usuário: Nome da pessoa que enviou o prompt. 

    • Nome do agente: Nome do agente fornecido ou personalizado chamado durante a interação. Campos em branco indicam o assistente de plataforma padrão. 

    • Espaço da equipe: O projeto específico onde a sessão ativa ocorreu. 

    • Prompt do usuário: A cadeia de caracteres de texto bruta e não filtrada inserida no bate-papo pelo usuário final. 

    • Tarefa: O rótulo de classificação atribuído pela orquestração do sistema camada (por exemplo, planejamento de ação, recuperação semântica, recuperação sql) para rotear a solicitação com base na intenção do usuário detectada. 

    • Palavras-chave: Termos de pesquisa principais e substantivos isolados da entrada do usuário pelo sistema para procurar arquivos no banco de dados do projeto. 

    • Consulta reescrita: A cadeia de caracteres de pesquisa semântica gerada pelo modelo de raciocínio da IA para maximizar a precisão da recuperação dos dados do projeto. 

  3. Opcionais: Clique no botão Exportar para que o relatório seja baixado para sua dispositivo e você possa visualizar os dados na íntegra, usá-los para análise externa ou criar apresentações. 

Consumo de Crédito dos Usuários

Esse relatório mostra um log de transações detalhado de cada fração de um crédito consumido pela atividade do usuário, juntamente com o nome do usuário, a ação do sistema e muito mais.

  1. Escolha Consumo de crédito do usuário na lista suspensa na seção "Detalhamento de uso".

  2. Role para visualizar o log de transações discriminado que rastreia cada fração de um crédito consumido pela atividade do usuário. Revise as colunas para auditar itens específicos:

    • Créditos: Custo de crédito exato deduzido (exibido como um valor decimal negativo).

    • Usuário: Membro da equipe que iniciou a chamada do sistema.

    • Ação: O que o sistema estava fazendo (por exemplo, interação do agente, executar pipeline de importação, processamento de conjunto de dados).

    • Tipo de recurso: O ativo técnico camada usado para executar essa ação (por exemplo, Agente, Pipeline de Dados, Conjunto de Dados, Conhecimento).

    • Recurso: Nome específico do conector ou ativo usado (p. ex., Conector Procore, Agente de segurança do local).

  3. Opcionais: Clique no botão Exportar para que o relatório seja baixado para sua dispositivo e você possa visualizar os dados na íntegra, usá-los para análise externa ou criar apresentações. 

Teamspaces Consumo de Crédito

Esse relatório mapeia os custos de infraestrutura diretamente para ambientes de projeto específicos. Ele expõe os itens de linha de armazenamento de conjunto de dados automatizado, permitindo que você rastreie o custo do volume de dados que cada espaço de equipe (projeto) está mantendo em seu índice vetorial ativo.

  1. Escolha Consumo de crédito de Teamspaces na lista suspensa na seção "Detalhamento de uso".

  2. Role para visualizar os custos de infra-estrutura em andamento mapeados diretamente para ambientes de projeto específicos. As colunas incluem:

    • Créditos: Mostra o custo de crédito exato deduzido (exibido como um valor decimal negativo).

    • Espaço da equipe: Identifica o membro da equipe que iniciou a ação. 

    • Ação: Identifica o que o sistema estava fazendo (por exemplo, Aprendizado do Agente (Vetorização), Interação do Agente, Processamento do Conjunto de Dados).

    • Tipo de recurso: O ativo técnico camada usado para executar essa ação (p. ex., Agente, Pipeline de Dados, Conjunto de Dados, Conhecimento).

    • Recurso: O aplicativo que fez a tarefa. 

    • Data: Data do calendário em que a ação ocorreu. 

  3. Opcionais: Clique no botão Exportar para que o relatório seja baixado para sua dispositivo e você possa visualizar os dados na íntegra, usá-los para análise externa ou criar apresentações.