InternGPT: Expandindo interações com ChatGPT além do apontamento
- Name
- Amber de Ligt
Published on
Enquanto o ChatGPT revolucionou a forma como nos comunicamos com a IA, um novo paradigma está surgindo que se expande sobre essa base. Esse desenvolvimento, InternGPT, oferece uma experiência interativa mais enriquecida, utilizando não apenas linguagem, mas também o apontamento para controlar o ChatGPT. Esse sistema expande as fronteiras da comunicação visual com a IA.
Os detalhes do InternGPT
InternGPT, frequentemente abreviado como iGPT, vai além de ser um simples sistema interativo visual. InternGPT significa interação, não verbal e ChatGPT, e combina esses componentes para criar uma experiência única de interação. Em sua essência, ele se baseia em um dispositivo de apontamento para operações como clicar, arrastar e criar, estendendo efetivamente as capacidades do ChatGPT.
Desenvolvido como um projeto de código aberto por pesquisadores do OpenGVLab da Universidade de Ciência e Tecnologia da China, o InternGPT se baseia no modelo ChatGPT. Como uma extensão transformadora desse grande modelo de chatbot baseado em linguagem, o InternGPT promete uma série de possibilidades, desde geração de texto e tradução de idiomas até o desenvolvimento de material criativo e ofertas de respostas úteis a consultas.
InternGPT: Uma Ferramenta Emergente para Interação Digital
Embora o InternGPT ainda esteja em desenvolvimento, ele mostra promessa de se tornar uma ferramenta poderosa em uma ampla variedade de aplicações. Por exemplo, sua capacidade de interagir com outros softwares, como ferramentas de edição de imagem, amplia seu potencial de impacto em várias indústrias. Essa interatividade permitirá uma integração perfeita entre a comunicação baseada em texto e a manipulação visual, desbloqueando inúmeras possibilidades.
Instalação e Configuração do InternGPT
A instalação do InternGPT requer alguns pré-requisitos básicos, incluindo Linux, Python 3.8+, PyTorch 1.12+, CUDA 11.6+ e Memória GPU de pelo menos 17G para carregar ferramentas básicas. Uma vez criado e ativado o ambiente Python, as dependências do Python são instaladas usando o comando pip.
Posteriormente, o serviço iChat Gradio é lançado com os componentes necessários, como HuskyVQA, SegmentAnything e ImageOCRRecognition. Para aqueles que desejam habilitar o recurso de assistente de voz, um passo adicional de geração de um certificado usando OpenSSL é necessário.
Recursos Interativos do InternGPT
O InternGPT é mais do que apenas uma maneira inovadora de interagir com o ChatGPT. Ele fornece uma série de recursos, incluindo um diálogo multimodal que possibilita interações relacionadas a imagens. Por exemplo, os usuários podem fazer upload de uma imagem e, em seguida, participar de uma conversa sobre a imagem carregada, gerando comandos como "O que há na imagem?" ou "Qual é a cor de fundo da imagem?"
Além disso, o InternGPT oferece suporte a operações interativas de imagem. Os usuários podem selecionar uma área específica de uma imagem, realizar reconhecimento óptico de caracteres naquele local, ou até mesmo remover ou substituir a área mascarada em uma imagem. Esses comandos podem melhorar significativamente a manipulação e a geração de imagens, com base na entrada dos usuários.
O InternGPT também permite aos usuários criar novas imagens a partir de um único arquivo de áudio ou de uma combinação de áudio e texto. Esse recurso de criação de imagens é ainda expandido com a capacidade de desenhar em um quadro branco digital e gerar imagens a partir desses rabiscos, abrindo possibilidades criativas.
Você pode acessar o GitHub do InternGPT aqui (opens in a new tab).
Conclusão: InternGPT - O Futuro da Interação com Inteligência Artificial
Como uma nova interface interativa para o ChatGPT, o InternGPT é um esforço pioneiro que promete mudar a forma como interagimos com a IA. Com sua capacidade de unir linguagem e apontamento para comunicação visual, o InternGPT estende as fronteiras do que é possível com a IA, quebrando as barreiras entre a comunicação baseada em texto e visual. Conforme o desenvolvimento progride, esperamos ver a variedade de aplicações que essa ferramenta inovadora pode beneficiar.