Este é o aplicativo do Windows denominado Tokenizers, cuja versão mais recente pode ser baixada como v0.14.1.zip. Ele pode ser executado online no provedor de hospedagem gratuito OnWorks para estações de trabalho.
Baixe e execute online este aplicativo chamado Tokenizers with OnWorks gratuitamente.
Siga estas instruções para executar este aplicativo:
- 1. Baixe este aplicativo em seu PC.
- 2. Entre em nosso gerenciador de arquivos https://www.onworks.net/myfiles.php?username=XXXXX com o nome de usuário que você deseja.
- 3. Carregue este aplicativo em tal gerenciador de arquivos.
- 4. Inicie qualquer emulador on-line OS OnWorks a partir deste site, mas um emulador on-line melhor do Windows.
- 5. No sistema operacional OnWorks Windows que você acabou de iniciar, acesse nosso gerenciador de arquivos https://www.onworks.net/myfiles.php?username=XXXXX com o nome de usuário que deseja.
- 6. Baixe o aplicativo e instale-o.
- 7. Baixe o Wine de seus repositórios de software de distribuição Linux. Depois de instalado, você pode clicar duas vezes no aplicativo para executá-lo com o Wine. Você também pode experimentar o PlayOnLinux, uma interface sofisticada do Wine que o ajudará a instalar programas e jogos populares do Windows.
Wine é uma forma de executar software Windows no Linux, mas sem a necessidade de Windows. Wine é uma camada de compatibilidade do Windows de código aberto que pode executar programas do Windows diretamente em qualquer desktop Linux. Essencialmente, o Wine está tentando reimplementar o suficiente do Windows do zero para que possa executar todos os aplicativos do Windows sem realmente precisar do Windows.
SCREENSHOTS
Ad
Tokenizadores
DESCRIÇÃO
Tokenizadores rápidos de última geração, otimizados para pesquisa e produção. Tokenizers fornece uma implementação dos tokenizers mais usados atualmente, com foco em desempenho e versatilidade. Esses tokenizers também são usados em Transformers. Treine novos vocabulários e tokenize, usando os tokenizers mais usados atualmente. Extremamente rápido (treinamento e tokenização), graças à implementação do Rust. Leva menos de 20 segundos para tokenizar um GB de texto na CPU de um servidor. Fácil de usar, mas também extremamente versátil. Projetado para pesquisa e produção. Rastreamento de alinhamento completo. Mesmo com a normalização destrutiva, sempre é possível obter a parte da frase original que corresponde a qualquer token. Faz todo o pré-processamento: truncamento, preenchimento, adiciona os tokens especiais que seu modelo precisa.
Funcionalidades
- Treine novos vocabulários e tokenize, usando os tokenizers mais usados atualmente
- Extremamente rápido (treinamento e tokenização), graças à implementação do Rust. Leva menos de 20 segundos para tokenizar um GB de texto na CPU de um servidor
- Fácil de usar, mas também extremamente versátil
- Projetado para pesquisa e produção
- Rastreamento de alinhamento completo
- Truncamento, preenchimento, adicione os tokens especiais que seu modelo precisa
Linguagem de Programação
Ferrugem
Categorias
Este é um aplicativo que também pode ser obtido em https://sourceforge.net/projects/tokenizers.mirror/. Ele foi hospedado em OnWorks para ser executado online da maneira mais fácil a partir de um de nossos Sistemas Operativos gratuitos.
