Ja'TA'va na Mente

  Fala galera do mal, mais uma vez seu amigo kakaroto vulgo miranha dando as caras na área. Hoje venho aqui falar sobre um assunto muito legal e lhes pergunto: "Vocês tem dado ultimamente ?" 👹. Calma tigre, estamos falando do conceito de dados. Com o advento da famosa Grande Dado (Big Data) este assunto retorna a tona para ajudar os jovens mancebos. Então Lets Lá! No nosso dia-a-dia ouvimos muito sobre dados e informação. Mas sabemos qual a real diferença entre esses dois termos? No primeiro momento podemos até achar que tudo é a mesma coisa, pensar que os conceitos são os mesmos, mas na verdade não são. Dados versus Informação: Qual a diferença? Ambos constituem alicerces para a construção do conhecimento. Sem dados e informações isto seria impossível. Mas afinal, qual seria a diferença então? O dado não possui significado relevante e não conduz a nenhuma compreensão. Representa algo que não tem sentido a princípio. Portanto, não tem valor algum para embasar conclusões, mu...

Oi! Eu sou o Goku! Estamos aqui mais uma vez para falar sobre um assunto bem comum hoje e que, provavelmente você já se perguntou: Qual o banco de dados devo usar? Qual tipo? For Why? Vamos tentar esclarecer algumas coisas e, com isso, vocês poderão ter maior autonomia e certeza para a escolha certa. Vamos lá! SQL SQL é a sigla para   “Structured Query Language”   que significa, traduzindo para o português, “Linguagem de Consulta Estruturada”. Trata-se de uma linguagem de consulta a banco de dados relacionais. Com o SQL, você pode executar vários comandos para criar, alterar, gerenciar, consultar, dentre outras informações no seu banco de dados. Costumamos dizer que bancos SQL seguem uma modelagem relacional, pois estes se baseiam no fato de que todos seus dados sejam guardados em tabelas. NoSQL NoSQL   (Not Only SQL)   é o termo utilizado para banco de dados não relacionais de alto desempenho, onde geralmente não é utilizado o SQL como linguagem de cons...

Fala Galera! Vamos começar nosso tuto sobre esta grande tecnologia. O que é Big Data? Dados grandes é uma coleção de grandes conjuntos de dados que não podem ser processadas utilizando computação tradicional técnicas. Não se trata de uma técnica única ou uma ferramenta, ao contrário, envolve muitas áreas de negócios e tecnologia. O que vem nos dados grandes? Dados grandes envolve os dados produzidos por diferentes dispositivos e aplicações. Abaixo estão alguns dos campos que vêm sob a égide de dados grandes. Dados da caixa preta : é um componente do helicóptero, aviões e jatos, etc. Ele capta vozes da tripulação de voo, as gravações de microfones e fones de ouvido, e as informações sobre o desempenho da aeronave. Mídias Sociais os dados : mídias sociais, tais como o Facebook e o Twitter manter as informações e as opiniões postadas por milhões de pessoas em todo o mundo. Os dados : Bolsa de Valores bolsa de valores dos dados contém informações sobre a 'comprar'...

Fala Galerinha, passei um tempo sumido devido a necessidade de um tempo dedicado a estudo de coisas novas pra trazer ao nosso blog. Nestes estudos, acabei focando um pouco sobre as premissas do tão falado BiiiiiiiiG Data, isso mesmo. E nest post, vou mostrar pra vocês uma técnica para importação de fontes através de sqoop de forma incremental. Então vamos lá! . Introdução O Sqoop é uma ferramenta projetada para transferir dados entre o Hadoop e bancos de dados relacionais ou mainframes. Você pode usar o Sqoop para importar dados de um sistema de gerenciamento de banco de dados relacional (RDBMS) como MySQL ou Oracle ou um mainframe para o HDFS (Hadoop Distributed File System), transformar os dados no Hadoop MapReduce e exportar os dados de volta para um RDBMS . O Sqoop automatiza a maior parte desse processo, confiando no banco de dados para descrever o esquema para os dados a serem importados. O Sqoop usa o MapReduce para importar e exportar os dados, o que fo...