Métricas de qualidade de IA do Procyon
Ao comparar mecanismos de inferência em cargas de trabalho de visão computacional, também é importante considerar a precisão, além do desempenho bruto. A conversão dos diferentes modelos de IA entre formatos e a quantização com diferentes precisões para execução usando diferentes mecanismos de inferência pode afetar a qualidade do reconhecimento de objetos em uma determinada imagem.
Para apoiar comparações entre plataformas, executamos nossos próprios testes medindo a precisão dos mecanismos de inferência suportados pelo Benchmark de visão computacional de AI Procyon.
O gráfico interativo a seguir mostra os modelos de visão computacional e mecanismos de inferência testados por UL Solutions. Ao longo do eixo X estão as precisões dos modelos testados, enquanto ao longo do eixo y você pode encontrar os motores e dispositivos de IA. Os dados são agrupados de acordo com a métrica de qualidade específica do caso de uso de IA e a precisão do modelo.
Isso foi testado pelos benchmarks da UL para os modelos usados no Benchmark de visão computacional de IA (v1.8.449 para Windows e v1.1.80 para macOS) e a qualidade real dos modelos pode variar dependendo da fonte do modelo e do conjunto de dados de teste.
Licenciamento de benchmark Procyon
Solicite uma cotação Setor público Licença de imprensaO licenciamento flexível permite que você escolha os benchmarks individuais que melhor atendem às suas necessidades. Compre apenas um benchmark ou adicione mais em qualquer combinação.
- Licenciamento flexível e anual por benchmark.
- Opções de licenciamento simples e local disponíveis.
- Suporte prioritário por e-mail e telefone.
Leia mais sobre o conjunto Procyon
Saiba maisProcyon é um novo conjunto de benchmark da UL que estamos criando especificamente para usuários profissionais da indústria, empresas, governo, varejo e imprensa. Cada benchmark Procyon fornecerá uma experiência familiar e consistente, compartilhando um design comum e um conjunto de recursos. Os benchmarks Procyon medem o desempenho em uma variedade de casos de uso do mundo real. Oferece benchmarks para inferência de IA, produtividade de escritório, duração da bateria, edição de fotos e edição de vídeo.
