Árvore de decisão!

Foto de Vladislav Babienko no Unsplash

Uma Árvore de Decisão é um dos algoritmos de aprendizado de máquina supervisionados mais fundamentais para problemas de classificação e regressão. Funciona muito bem com conjuntos de dados complexos e também é muito fácil de entender. Como o nome sugere, esse algoritmo funciona dividindo todo o conjunto de dados em uma estrutura semelhante a uma árvore com base em algumas condições e, em seguida, fornecendo previsões com base nessas condições.

Dois tipos de árvores de decisão

  • Árvore de decisão para variável categórica

from sklearn.tree import DecisionTreeClassifier

Neste, temos um alvo contínuo ou variáveis ​​de saída. Por exemplo, temos que prever a renda de uma pessoa dependendo da ocupação, educação, idade, etc.

from sklearn.tree import DecisionTreeClassifier

  • Entropia: A entropia medirá a pureza presente no conjunto de dados. A entropia está entre 0 e 1. É dada por,
  • E = -p*log2(p) – q*log2(q)
    

    Ginni = 1 - sum(Pi**2)
    

Diferentes Algoritmos para Árvore de Decisão

  • ID3 (Dicotomizador Iterativo): É um dos algoritmos utilizados para construir uma árvore de decisão para classificação. Ele usa o ganho de informação como critério para encontrar os nós raiz e dividi-los. Aceita apenas atributos categóricos.
  • C4.5: É uma extensão do algoritmo ID3, e melhor que ID3, pois lida com valores contínuos e discretos.
  • CART (Algoritmo de Classificação e Regressão): É o algoritmo mais popular usado para construir uma árvore de decisão. Ele usa a impureza Ginni como o cálculo padrão para selecionar nós raiz, no entanto, também podemos usar a entropia para os critérios. Este algoritmo funciona tanto em problemas de regressão quanto em problemas de classificação.
  • As árvores podem ser visualizadas.
  • Simples e fácil de entender e interpretar.
  • Ele pode ser usado para problemas de regressão e classificação.
  • Ele pode lidar com variáveis ​​contínuas e categóricas.
  • O dimensionamento e a normalização (Feature Scaling) não são necessários.
  • Ele irá lidar com os valores ausentes.
  • Robusto para outliers.
  • overfitting são muito altos para árvores de decisão. (Baixa Viés, Alta Variação)
  • Uma pequena alteração nos dados pode causar instabilidade no modelo devido à abordagem gulosa.
  • Não é adequado para grandes conjuntos de dados. (Use Floresta Aleatória)

Neste artigo, vimos o que é árvore de decisão, os tipos de árvore de decisão, diferentes algoritmos de árvores de decisão, as vantagens e desvantagens da árvore de decisão.

Obrigado por ler. Por favor, deixe-me saber nos comentários abaixo ou então me envie um ping no LinkedIn se você tiver alguma dúvida.

me encontre no LinkedIn | GitHub | E-mail

Boa Aprendizagem!!! ^_^

Suggested posts

Implementando Memória Associativa

Implementando Memória Associativa

Escrito por Shashata Sawmya e Harveer Singh Com o advento das grandes redes neurais e os avanços tecnológicos cada vez maiores que levam os métodos atuais ao seu limite absoluto, o foco tem sido criar uma ferramenta abrangente que visa fazer tudo. No entanto, a maioria das tarefas não precisaria de redes profundas incrivelmente intensivas, mas ainda algo mais versátil do que modelos matemáticos básicos.

Como executar plugins ChatGPT gratuitamente usando Langchain

Como executar plugins ChatGPT gratuitamente usando Langchain

Você deve ter ouvido falar sobre todos os novos plug-ins poderosos do ChatGPT, como navegador, intérprete de código, etc. Mas há um problema, o acesso aos plug-ins é limitado a uma lista de espera e, portanto, muitos não têm acesso a ela.

Related posts

A perseguição aos cristãos: o crime de ódio do qual não falamos

Esqueça a islamofobia: cristãos (e judeus) são as principais vítimas de crimes de ódio religioso.

A perseguição aos cristãos: o crime de ódio do qual não falamos

Qualquer mente racional sabe que os círculos políticos e midiáticos são dominados pela esquerda, até mesmo pela extrema esquerda, um estado de coisas que cria um desequilíbrio no discurso político. No campo da religião, esse desequilíbrio é bem visível: jornais e redes de esquerda não se apressam em defender a fé cristã.

A Mentira do Cowboy

Como as megacorporações venderam aos americanos uma mentira robusta

A Mentira do Cowboy

É uma manhã brilhantemente dourada nas colinas do oeste, enquanto os primeiros raios de sol iluminam a grama congelada nas planícies. Um rebanho de gado Angus plácido, preto e maciço, é recortado contra o nascer do sol enquanto segue por uma trilha batida até um local que todos conhecem bem; a barra de café da manhã.

3 maneiras comprovadas de melhorar sua habilidade de escrita

Os benefícios de escrever e estratégias para ajudá-lo a fazê-lo

3 maneiras comprovadas de melhorar sua habilidade de escrita

Em 2022, com o lançamento do GPT-3, a habilidade de escrita parece se tornar menos importante. Com a IA, pessoas com redação ruim também podem gerar funcionários de qualidade.

Criando um ambiente de trabalho seguro

Criando um ambiente de trabalho seguro

“Ele vai me proteger quando eu estiver em perigo. Ele me esconderá em sua tenda.