Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 08 Hive Join Escreva uma consulta Hive em um arquivo chamado /home/horton/solutions/flights_weather.hive que satisfaça os seguintes critérios: Use Tez as the execution engine O resultado da consulta deve gerar uma nova tabela Hive chamada flight_weather armazenada como um arquivo […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 07 Definir e preencher uma tabela ORCFile Defina uma tabela Hive chamada sfo_weather que satisfaça todos os seguintes critérios: Uma tabela gerenciada pelo Hive Os dados são armazenados no formato ORCFile A tabela deve ser preenchida com os registros […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 06 Analisando dados com o Hive Escreva uma consulta em HiveQL e salve as consultas em um único arquivo de texto chamado /home/horton/solutions/flightdelays.hive para cada uma das tarefas abaixo: Calcule o arrdelay médio dos voos que desembarcam em Denver […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 05 Use HCatalog com Pig Escreva um script Pig e salve na máquina local em /home/horton/solutions/flightdelays_nonzero.pig que satisfaça todos os seguintes critérios: Execute uma consulta Pig usando o Tez como o mecanismo(engine) de execução Carregue os dados da tabela […]
Aula 05 – Curso de Python – Listas Aulas baseadas no livro Python para Desenvolvedores do Luiz Eduardo Borges. Que fazer esse curso com certificação? Acesse: https://workover.com.br/python-codigo-fluente Voltar para página principal do blog Todas as aulas desse curso Aula 04 Aula 06 Automatize tarefas do dia a dia com […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 04 Definindo uma tabela externa no Hive Defina uma tabela no Hive denominada flightdelays que corresponde aos dados armazenados no diretório /user/horton/flightdelays_clean no HDFS. A tabela deve satisfazer todos os seguintes critérios: A tabela deve ser externa com o […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 03 Analisando dados usando Pig Escreva um script Pig e salve na máquina cliente como /home/horton/solutions/cleaned_total.pig que calcula o número de linhas nos arquivos /user/horton/flightdelays_clean no HDFS. Armazene a saída do seu script em um novo diretório no HDFS […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 02 Limpando os dados usando Pig Observe que os valores são separados por vírgulas nos arquivos flightdelays no HDFS contêm dados históricos de atrasos de vôos de linhas aéreas. As colunas nos arquivos correspondem ao seguinte esquema: Year, Month, […]
Certificação Hortonworks Hadoop FS – Certificação HDP hortonworks Simulado da prova de certificação HDP Hortonworks TAREFA 01 Crie um novo diretório no HDFS chamado /user/horton/flightdelays Coloque os arquivos do /home/horton/datasets/flightdelays na máquina local no /user/horton/flightdelays no HDFS Script: -- Cria o diretório /user/horton/flightdelays no HDFS hadoop fs -mkdir flightdelays -- Copia todos os arquivos do diretório local /home/horton/datasets/flightdelays […]
Certificação Hortonworks Hadoop FS – Máquina horton na AWS Instanciando uma máquina hortonworks HDPCDeveloper Practice Exam na AWS (Amazon Web Services) Essa é a segunda aula do mini curso preparatório para certificação Hortonworks, onde é ensinado a criar uma instância da máquina da Hortonworks na AWS ( Amazon Web Services ), onde existe um simulado […]
Aula 01 – Certificação Hortonworks Hadoop FS – Instanciando a máquina hortonworks na AWS
Certificação Hortonworks Hadoop FS – Máquina horton na AWS Instanciando uma máquina hortonworks HDPCDeveloper Practice Exam na AWS (Amazon Web Services) Esse é um mini curso preparatório para certificação Hortonworks, onde é ensinado a criar uma instância da máquina da Hortonworks na AWS ( Amazon Web Services ), onde existe um simulado para treinamento preparatório […]
Criando uma primeira aplicação com Django e mysql Testes automatizados no django 04 – Visão geral e revisão https://docs.djangoproject.com/pt-br/1.11/intro/tutorial05/ Apresentando testes automatizados Escrevendo nosso primeiro teste Testes automatizados no django. Esse post é uma revisão das últimas três aulas, principalmente das duas últimas referentes aos testes da nossa app Polls. Há uma explicação mais detalhada […]
Criando uma primeira aplicação com Django e mysql Testes automatizados 03 https://docs.djangoproject.com/pt-br/1.11/intro/tutorial05/ Apresentando testes automatizados Escrevendo nosso primeiro teste TESTE A VIEW A aplicação de enquete da forma como está, irá publicar qualquer Question, incluindo aquelas que o campo pub_date está no futuro. Devemos refatorar o código. Definindo um pub_date no futuro deveria fazer com […]
Criando uma primeira aplicação com Django e mysql Testes automatizados 02 https://docs.djangoproject.com/pt-br/1.11/intro/tutorial05/ Apresentando testes automatizados Escrevendo nosso primeiro teste Nós identificamos um bug Há um pequeno bug na aplicação polls para corrigirmos: O método Question.was_published_recently() retorna True se a Question foi publicada dentro do último dia (o que está correto), mas também, se o campo […]
Criando uma primeira aplicação com Django e mysql Testes automatizados – test-driven development https://docs.djangoproject.com/pt-br/1.11/intro/tutorial05/ Apresentando testes automatizados O que são testes automatizados? Testes são rotinas simples que checam o funcionamento do seu código. Testes funcionam em diferentes níveis. Alguns testes podem ser aplicados a um pequeno detalhe (um determinado método de um modelo retorna o […]
Criando uma primeira aplicação com Django e mysql Criando um formulário no django https://docs.djangoproject.com/pt-br/1.11/intro/tutorial04/ Vamos atualizar nosso template de detalhamento da enquete (“polls/detail.html”), para que ele contenha um elemento HTML <form> Vamos editar o arquivo: polls/templates/polls/detail.html <!-- Pega o texto da question e coloca no h1 --> <h1>{{ question.question_text }}</h1> <!-- Caso um erro seja […]
Aula 04 – Curso de Python – Strings Aulas baseadas no livro Python para Desenvolvedores do Luiz Eduardo Borges. STRINGS EM PYTHON (TEXTO EM PYTHON) Que fazer esse curso com certificação? Acesse: https://workover.com.br/python-codigo-fluente Voltar para página principal do blog Todas as aulas desse curso Aula 03 Aula 05 Automatize […]
Criando uma primeira aplicação com Django e mysql Levantando um erro 404 https://docs.djangoproject.com/pt-br/1.11/intro/tutorial03/ Agora, vamos abordar a view detail da Question – a página que mostra as questões para uma enquete lançada. Aqui está a view detail () reescrita: /mysite/polls/views.py from django.http import Http404 from django.shortcuts import render from .models import Question # ... def […]
Aula 03 – Python – Operações aritméticas, operações lógicas e operações bit-a-bit (bitwise) 02
Aula 03 – Curso de Python Aulas baseadas no livro Python para Desenvolvedores do Luiz Eduardo Borges. OPERADORES Operações aritméticas, operações lógicas e operações bit-a-bit (bitwise) continuação. Que fazer esse curso com certificação? Acesse: https://workover.com.br/python-codigo-fluente Voltar para página principal do blog Todas as aulas desse curso Aula 02 Aula 04 […]
Aula 02 – Python – Operações aritméticas, operações lógicas e operações bit-a-bit (bitwise)
Aula 02 – Curso de Python Aulas baseadas no livro Python para Desenvolvedores do Luiz Eduardo Borges. OPERADORES Operações aritméticas, operações lógicas e operações bit-a-bit (bitwise) Que fazer esse curso com certificação? Acesse: https://workover.com.br/python-codigo-fluente Voltar para página principal do blog Todas as aulas desse curso Aula 01 Aula 03 Automatize tarefas […]
