Diga Algo: Segmento de Prompt Modelo Qualquer Coisa
Diga qualquer coisa: Segmento de Prompt do Modelo de Qualquer Coisa é uma extensão do Chrome desenvolvida pela Brilliantly. Ela permite prompts de linguagem natural para o Modelo de Segmento de Qualquer Coisa (SAM) usando embeddings CLIP. Com esta extensão, os usuários podem usar prompts de linguagem natural para interagir com o Modelo de Segmento de Qualquer Coisa da Meta.
Ao contrário da demonstração da Meta, a extensão da Brilliantly não é a mesma codificação usada pela Meta. É uma camada construída em cima dela, utilizando CLIP da OpenAI e a implementação de Gradient-weighted Class Activation Mapping de kevinzakka. A extensão é projetada para diversão e os resultados podem variar em termos de qualidade. Alguns modos de falha são explicáveis, como mapeamento de gradiente impreciso, enquanto outros podem estar completamente errados.
