Como usar filtros colaborativos baseados em itens na análise preditiva - dummies
Um dos recomendadores da Amazon os sistemas de análise preditiva usam filtragem colaborativa baseada em itens - distribuindo um enorme inventário de produtos do banco de dados da empresa quando um usuário visualiza um único item no site. Você sabe que está olhando para um sistema de filtragem colaborativo baseado em itens (ou, muitas vezes, em um sistema baseado em conteúdo), se mostrar as recomendações em ...
Como usar o Suavização de Dados em Analisadores Preditivos - dummies
O alisamento de dados em análises preditivas é, essencialmente, tentando para encontrar o "sinal" no "ruído" descartando pontos de dados que são considerados "ruidosos". A idéia é afiar os padrões nos dados e destacar as tendências às quais os dados estão apontando. A implicação por trás do suavização de dados é que os dados consistem em duas partes: uma ...
Como Usar Analisados Supervisionados para Treinar Modelos Preditivos - dummies
Em análises supervisionadas, tanto de entrada como de preferência O resultado é parte dos dados de treinamento. O modelo de análise preditiva apresenta os resultados corretos como parte de seu processo de aprendizagem. Esse aprendizado supervisionado supõe exemplos pré-classificados: o objetivo é obter o modelo aprendido a partir da classificação anteriormente conhecida para que ele possa rotular corretamente o ...
Como usar o Apache Mahout para Analytics Predictive - dummies
Uma ferramenta de código aberto que é excepcionalmente útil em A análise preditiva é Apache Mahout. Esta biblioteca de aprendizagem em máquina inclui versões em grande escala do clustering, classificação, filtragem colaborativa e outros algoritmos de mineração de dados que podem suportar um modelo de análise preditiva em larga escala. Uma maneira altamente recomendada de processar os dados necessários para esse modelo é executar Mahout em ...
Como usar Regressões Lineares na Análise Preditiva - regressão linear dummies
É Um método estatístico que analisa e encontra relações entre duas variáveis. Na análise preditiva, ele pode ser usado para prever um futuro valor numérico de uma variável. Considere um exemplo de dados que contém duas variáveis: dados passados consistindo nos tempos de chegada de um trem e seu tempo de atraso correspondente. Suponha que ...
Como usar o Analytics Predictive para satisfazer clientes - dummies
Concorrência global leva as empresas a baixar os preços para atrair novos clientes. Por sorte, as análises preditivas podem ajudar aqui. As empresas se esforçam para agradar seus clientes e ganhar novos; os clientes exigem cada vez mais produtos de alta qualidade a preços mais baratos. Em resposta a essas pressões, as empresas se esforçam para oferecer o equilíbrio certo de qualidade e preço, no momento certo, ...
Como Usar K-means Algoritmos de Cluster na Análise Preditiva - dummies
K é uma entrada ao algoritmo para análise preditiva; representa o número de agrupamentos que o algoritmo deve extrair de um conjunto de dados, expressado algébricamente como k. Um algoritmo K-means divide um determinado conjunto de dados em k clusters. O algoritmo executa as seguintes operações: Escolha k itens aleatórios do conjunto de dados e rotulá-los ...
Como usar o modelo de Markov em Analytics Predictive - dummies
O modelo de Markov é um modelo estatístico que pode ser usado em análises preditivas que dependem fortemente da teoria da probabilidade. (É o nome de um matemático russo cuja principal pesquisa foi na teoria da probabilidade.) Aqui está um cenário prático que ilustra como funciona: Imagine que você quer prever se o time X ganhará o jogo de amanhã. O
Como usar o Python para selecionar as variáveis corretas para a Ciência dos Dados - dummies
Selecionando o as variáveis certas no Python podem melhorar o processo de aprendizagem na ciência dos dados reduzindo a quantidade de ruído (informação inútil) que pode influenciar as estimativas do aprendiz. A seleção variável, portanto, pode efetivamente reduzir a variância das previsões. Para envolver apenas as variáveis úteis no treinamento e excluir os redundantes, você ...
Como visualizar os resultados analíticos do seu modelo: agrupamentos ocultos, classificações de dados e outliers - manequins
Visualização dos resultados de sua análise preditiva realmente ajuda as partes interessadas a entender os próximos passos. Aqui estão algumas maneiras de usar técnicas de visualização para reportar os resultados dos seus modelos às partes interessadas. Como visualizar agrupamentos ocultos em seus dados O agrupamento de dados é o processo de descobrir grupos ocultos de itens relacionados dentro de ...
Como visualizar análise preditiva' Dados brutos - manequins
Uma imagem vale mais que mil palavras - especialmente quando você está tentando obter um bom controle sobre seus dados de análise preditiva. No passo de pré-processamento, enquanto você está preparando seus dados, é uma prática comum visualizar o que você tem na mão antes de continuar para o próximo passo. Você começa usando uma planilha tal ...
Máquina Aprendendo em Academia com Weka - dummies
Weka (também disponível na Sourceforge. Net) é uma coleção de máquinas algoritmos de aprendizagem escritos em Java e desenvolvidos na Universidade de Waikato, na Nova Zelândia. O objetivo principal do Weka é realizar tarefas de mineração de dados e, inicialmente, as escolas o usaram como ferramenta de aprendizado. Agora, a ferramenta está incluída como parte da inteligência de negócios Pentaho ...
Identificando dados faltantes para aprendizado de máquina - manequins
Mesmo se você tiver exemplos suficientes em treinamento para treinamento simples e complexos algoritmos de aprendizado de máquina, eles devem apresentar valores completos nas características, sem dados faltantes. Ter um exemplo incompleto torna a conexão de todos os sinais dentro e entre recursos impossíveis. Os valores que faltam também dificultam o aprendizado do algoritmo durante ...
Analisando os conceitos básicos de estatística, aprendizado de máquina e métodos matemáticos na ciência dos dados - manequins
Se as estatísticas foram descritas como a ciência de derivar informações sobre os dados, então, qual a diferença entre um estatístico e um cientista de dados? Boa pergunta! Embora muitas tarefas na ciência dos dados exigem um pouco de conhecimento estatístico, o alcance e a amplitude do conhecimento e da base de habilidades de um cientista de dados são distintos de ...
Fazendo sentido de dados para o crescimento do comércio eletrônico - dummies
Ciência da informação no comércio eletrônico atende a mesmo propósito que faz em qualquer outra disciplina - para obter informações valiosas de dados brutos. No comércio eletrônico, você está procurando informações de dados que você pode usar para otimizar o retorno de investimento de marketing da marca (ROI) e gerar crescimento em todas as camadas do funil de vendas. Como ...
Aprendendo máquina: criando seus próprios recursos em dados - manequins
ÀS vezes os dados brutos que você obteve de vários As fontes não terão os recursos necessários para executar tarefas de aprendizado de máquina. Quando isso acontece, você deve criar seus próprios recursos para obter o resultado desejado. Criar um recurso não significa criar dados do ar. Você cria novos recursos a partir de dados existentes. Compreendendo a necessidade ...
Fazendo Impactos Positivos com Inteligência Ambiental - dummies
Elva é um exemplo brilhante de como as tecnologias de inteligência ambiental podem ser usadas para ter um impacto positivo. Esta plataforma gratuita de código aberto facilita o mapeamento de causas e relatórios de visualização de dados para monitoramento de eleições, violações de direitos humanos, degradação ambiental e risco de desastres em países em desenvolvimento. Em um de seus projetos mais recentes, Elva trabalha com ...
Modelagem Demanda de Viagem em Atividade Criminal - manequins
Modelar a demanda de viagem de atividade criminosa permite descrever e prever a padrões de viagens de criminosos para que a aplicação da lei possa usar essa informação no planejamento de resposta tática. Se você quiser prever as rotas mais prováveis que os criminosos tomarão entre os locais de onde começam e os locais onde ...
Modelagem matemática com cadeias de Markov e métodos estocásticos - manequins
Um modelo estocástico é uma ferramenta que você pode usar para estimar resultados prováveis quando uma ou mais variáveis do modelo são alteradas aleatoriamente. Uma cadeia de Markov - também chamada de uma cadeia de Markov de tempo discreto - é um processo estocástico que atua como um método matemático para encadear uma série de variáveis geradas aleatoriamente que representam ...
Minerando seus dados usando Data Science - dummies
Na era dos grandes dados, parece ser organizações de todas as formas e os tamanhos estão em busca de contratação. Eles querem contratar cientistas de dados para que eles possam usar dados e tomada de decisão informada para agregar valor à sua organização e permanecerem competitivos. Infelizmente, a maioria das organizações e seus gerentes de contratação realmente não entendem ...
Valores em falta em seus dados - dummies
Um dos problemas de dados mais freqüentes e mais complicados a serem tratados é a falta de dados. Os arquivos podem estar incompletos porque os registros foram descartados ou um dispositivo de armazenamento preenchido. Ou certos campos de dados podem não conter dados para alguns registros. O primeiro desses problemas pode ser diagnosticado simplesmente verificando contagens de registros para arquivos. ...
Novas Oportunidades de Trabalho com Aprendizado de Máquinas - manequins
Você pode encontrar mais do que alguns artigos que discutem a perda de empregos que o aprendizado da máquina e suas tecnologias associadas irão causar. Robôs já realizam uma série de tarefas que costumavam empregar humanos, e esse uso aumentará ao longo do tempo. Você também deve ter considerado como esses novos usos podem potencialmente custar-lhe ...
Do processo de mineração de dados - manequins
O processo padrão entre indústrias para mineração de dados (CRISP-DM) é a estrutura dominante do processo de mineração de dados. É um padrão aberto; qualquer um pode usá-lo. A lista a seguir descreve as várias fases do processo. Compreensão do negócio: obtenha uma compreensão clara do problema que você está solucionando, de como isso afeta sua organização e seus objetivos de endereçamento ...
Otimizando as opções de validação cruzada na aprendizagem de máquinas - dummies
Ser capaz de validar uma hipótese de aprendizagem de máquina permite efetivamente Otimização adicional do algoritmo escolhido. O algoritmo fornece a maior parte do desempenho preditivo em seus dados, dada a sua capacidade de detectar sinais a partir de dados e ajustar a verdadeira forma funcional da função preditiva sem superação e gerando muita variação das estimativas. Não ...
Novela Visualização em Análise Preditiva - dummies
Uma visualização pode representar uma simulação (uma representação pictórica de um cenário de que-se ) na análise preditiva. Você pode acompanhar uma visualização de uma previsão com uma simulação que se sobrepõe e suporta a previsão. Por exemplo, o que acontece se a empresa parar de fabricar o Produto D? O que acontece se um desastre natural atinge o escritório em casa? ...
Analytics preditivo: saber quando atualizar seu modelo - manequins
Tanto quanto você não pode gostar , o seu trabalho de análise preditiva não acabou quando o seu modelo é atualizado. A implantação bem sucedida do modelo na produção não é hora de relaxar. Você precisará monitorar de perto sua precisão e desempenho ao longo do tempo. Um modelo tende a se degradar ao longo do tempo (alguns mais rápidos do que outros); e ...
Modelos espaciais preditivos para análise do crime - dummies
Você pode incorporar modelos estatísticos preditivos em métodos de análise de crime para produzir análises que descreva e preveja onde e quais tipos de atividades criminosas provavelmente ocorrerão. Os modelos espaciais preditivos podem ajudá-lo a prever o comportamento, localização ou atividades criminosas dos reincidentes. Você também pode aplicar métodos estatísticos para dados espaço-temporais para verificar ...
Análise preditiva para manequins Cheum Sheet - dummies
Um projeto de análise preditiva combina a execução de detalhes com o pensamento de imagem grande. Essas dicas úteis e listas de verificação ajudarão a manter seu projeto nos trilhos e fora da floresta.
Preparando seus dados para análise preditiva - manequins
Quando você definiu os objetivos do modelo, o próximo passo na análise preditiva é identificar e preparar os dados que você usará para construir seu modelo. A seguinte informação toca as atividades mais importantes. A sequência geral de passos parece assim: identifique suas fontes de dados. Os dados podem ser em formatos diferentes ou ...
Distribuições de probabilidade na análise estatística de dados grandes - dummies
Distribuições de probabilidade é uma das muitas técnicas estatísticas que podem ser usado para analisar dados para encontrar padrões úteis. Você usa uma distribuição de probabilidade para calcular as probabilidades associadas aos elementos de um conjunto de dados: Distribuição binomial: você usaria a distribuição binomial para analisar variáveis que podem assumir apenas um dos dois valores. Para ...
Impedindo desvios de privacidade de dados - dummies
A privacidade de dados é um grande problema para mineradores de dados. Os relatórios de notícias que descrevem o nível de dados pessoais nas mãos da Agência de Segurança Nacional do governo dos EUA e as violações de fontes de dados comerciais aumentaram a conscientização e preocupação do público. Um conceito central na privacidade de dados é informação de identificação pessoal (PII) ou qualquer dado que possa ...
Análise de regressão na análise estatística de dados grandes - análise de regressão de dados
É Usada para estimar a força e a direção da relação entre variáveis que estão linearmente relacionadas entre si. Duas variáveis X e Y dizem estar relacionadas linearmente se a relação entre elas pode ser escrita na forma Y = mX + b onde m é a inclinação, ou ...
O aumento dos dados abertos e seu papel em Analytics Predictive - dummies
Open Data pode tornar-se uma ferramenta muito útil para análises preditivas. Bob Lytle, o CEO da Relação. e, mais recentemente conhecido como o antigo CIO da TransUnion Canada, está liderando os esforços no uso da informação pública como fonte de dados alternativa e estratégica para modelagem preditiva nos setores de serviços financeiros e seguros. Abrir ...
Técnicas quantitativas de Análise de Dados Exploratórios (EDA) - dummies
Embora a EDA se baseie principalmente em técnicas gráficas, ele também consiste em algumas técnicas quantitativas. Este artigo discute dois destes: estimativa de intervalo e teste de hipóteses. Estimativa de intervalo A estimativa de intervalo é uma técnica que é usada para construir uma gama de valores dentro dos quais uma variável provavelmente cairá. Um exemplo importante disso ...
O papel das estatísticas na aprendizagem de máquinas - manequins
Alguns sites on-line você acreditaria que as estatísticas e a aprendizagem em máquina são duas tecnologias completamente diferentes. Por exemplo, quando você lê Statistics vs. Machine Learning, lute! , você tem a ideia de que as duas tecnologias não são apenas diferentes, mas são absolutamente hostis uns aos outros. O fato é que as estatísticas e a aprendizagem por máquinas têm um ...
Recorrendo à validação cruzada na aprendizagem de máquinas - manequins
ÀS vezes, o aprendizado automático requer que você precise recorrer à validação cruzada. Um problema notável com a divisão do conjunto de trem / teste é que você realmente está introduzindo um viés em seu teste, porque você está reduzindo o tamanho de seus dados de treinamento na amostra. Quando você divide seus dados, você pode estar realmente mantendo alguns exemplos úteis do treinamento. ...
Procurando Dados com o Portal de Dados Federal - dummies
Antes de começar a procurar dados para extrair dados . gov, o portal de dados federal, você deve entender uma coisa: não há dados no site. Dados. O gov é o lar de um catálogo de dados, uma lista de nomes de conjuntos de dados com detalhes como descrições, formatos e URLs para obter dados e informações adicionais. Os dados em si ...
Semelhança Métricas Usadas na Ciência dos Dados - manequins
Tanto o agrupamento como a classificação baseiam-se no cálculo da semelhança ou diferença entre dois Os pontos de dados. Se o seu conjunto de dados é numérico - composto de apenas campos e valores do número - e pode ser retratado em um gráfico n-dimensional, então existem várias métricas geométricas que você pode usar para dimensionar seus dados multidimensionais. Um gráfico n-dimensional ...
Vendo o que você precisa saber ao começar na Ciência dos dados - manequins
Tradicionalmente, grandes dados são o termo para dados que tem incrível volume, velocidade e variedade. As tecnologias de banco de dados tradicionais não são capazes de lidar com grandes dados - são necessárias soluções inovadoras de engenharia de dados. Para avaliar seu projeto se ele se qualifica como um grande projeto de dados, considere os seguintes critérios: Volume: Entre 1 terabytes / ano e 10 petabytes / ano Velocidade: ...
Análise temporal para prevenção e monitoramento do crime - dummies
A análise temporal dos dados da criminalidade produz análises que descrevem padrões em atividade criminosa baseada no tempo. Você pode analisar os dados do crime temporal para desenvolver análises prescritivas, quer através de meios tradicionais de análise criminal, quer através de uma abordagem de ciência dos dados. Saber como produzir análises prescritivas a partir de dados do crime temporal permite que você forneça apoio à decisão para ...