Stopwords✋

Você pode estar se perguntando o que são essas stopwords?

Basicamente, este é um conceito da PNL e significa as palavras mais usadas em uma frase. Por exemplo, artigos como A,An, The e verbos auxiliares is, are, was etc. Há uma boa quantidade de palavras em inglês em que as usamos com frequência para construir uma frase. Mesmo que removamos essas stopwords de uma frase, ainda podemos entender o significado básico dela.

Deixe-me mostrar-lhe um exemplo,

Parágrafo Original: Uma palavra de parada é uma palavra comumente usada que um mecanismo de pesquisa foi programado para ignorar, tanto ao indexar entradas para pesquisa quanto ao recuperá-las como resultado de uma consulta de pesquisa.

Vamos começar,

Primeiro precisamos ter pacotes pré-definidos nltk e stopwords

importar nltk

nltk.download('palavras de parada')

de nltk.corpus importar stopwords

Em seguida, vamos pegar uma lista de stopwords usando

stop_words = stopwords.words('english')

Em seguida, podemos ter nosso próprio método personalizado para verificar uma palavra no parágrafo original presente na lista de stopwords ou não. Com base nisso, podemos obter sentenças sem stopwords.

Anexo o trecho de código.

Esses conceitos são usados ​​para obter o significado básico de uma frase específica. No próximo blog, vamos discutir mais um conceito de PNL.

Fique atento…

Se você tiver alguma sugestão ou dúvida, poste-a nos comentários.

Suggested posts

Implementando Memória Associativa

Implementando Memória Associativa

Escrito por Shashata Sawmya e Harveer Singh Com o advento das grandes redes neurais e os avanços tecnológicos cada vez maiores que levam os métodos atuais ao seu limite absoluto, o foco tem sido criar uma ferramenta abrangente que visa fazer tudo. No entanto, a maioria das tarefas não precisaria de redes profundas incrivelmente intensivas, mas ainda algo mais versátil do que modelos matemáticos básicos.

Como executar plugins ChatGPT gratuitamente usando Langchain

Como executar plugins ChatGPT gratuitamente usando Langchain

Você deve ter ouvido falar sobre todos os novos plug-ins poderosos do ChatGPT, como navegador, intérprete de código, etc. Mas há um problema, o acesso aos plug-ins é limitado a uma lista de espera e, portanto, muitos não têm acesso a ela.

Related posts

A revolução no local de trabalho: os principais especialistas discutem o trabalho híbrido e remoto

A revolução no local de trabalho: os principais especialistas discutem o trabalho híbrido e remoto

No atual cenário de negócios em rápida evolução, o conceito de trabalho híbrido e remoto ganhou um impulso sem precedentes. À medida que as empresas continuam a se adaptar às mudanças nas necessidades e expectativas de seus funcionários, especialistas de várias áreas se reuniram para discutir os benefícios, os desafios e o futuro dessa forma transformadora de trabalhar.

pronomes são super assustadores

Isso me atinge De repente, como tantas vezes acontece É o meio do caminho tudo de novo <Não, não aquele no Pacífico, seu marrom, aquele no carnaval> Todas as manchetes em voz alta…..

A Mentira do Cowboy

Como as megacorporações venderam aos americanos uma mentira robusta

A Mentira do Cowboy

É uma manhã brilhantemente dourada nas colinas do oeste, enquanto os primeiros raios de sol iluminam a grama congelada nas planícies. Um rebanho de gado Angus plácido, preto e maciço, é recortado contra o nascer do sol enquanto segue por uma trilha batida até um local que todos conhecem bem; a barra de café da manhã.

A perseguição aos cristãos: o crime de ódio do qual não falamos

Esqueça a islamofobia: cristãos (e judeus) são as principais vítimas de crimes de ódio religioso.

A perseguição aos cristãos: o crime de ódio do qual não falamos

Qualquer mente racional sabe que os círculos políticos e midiáticos são dominados pela esquerda, até mesmo pela extrema esquerda, um estado de coisas que cria um desequilíbrio no discurso político. No campo da religião, esse desequilíbrio é bem visível: jornais e redes de esquerda não se apressam em defender a fé cristã.