Postagens

Mostrando postagens de julho 10, 2022

Migração de dados com KafkaConnect

Imagem
 Salve meus amigos como estão vocês cês tão bão né? Para migração e equalização de dados, viu-se a necessidade da criação de uma estrutura para sincromização do banco de dados legado, com o banco de dados da nova plataforma. Para esta solução, segue algumas possibilidades abaixo:   Kafka connect é uma estrutura para conectar o kafka com ecossistema externo, como sistemas de arquivos, bancos de dados usando o conector kafka. O cluster Kafka Connect oferece suporte à execução e dimensionamento de conectores. Os conectores Kafka são componentes prontos para uso, que podem nos ajudar a importar dados de sistemas externos para tópicos Kafka e exportar dados de tópicos Kafka para sistemas externos.  O que é o Kafka Connect? O Kafka connect é usado para realizar a integração de fluxo entre o kafka e outros sistemas, como bancos de dados, serviços em nuvem, índices de pesquisa, sistemas de arquivos e armazenamentos de valores-chave. Facilita o fluxo de dados de diferentes fontes para o kafka

Dado x Informação x Conhecimento

Imagem
  Fala galera do mal, mais uma vez seu amigo kakaroto vulgo miranha dando as caras na área. Hoje venho aqui falar sobre um assunto muito legal e lhes pergunto: "Vocês tem dado ultimamente ?" 👹. Calma tigre, estamos falando do conceito de dados. Com o advento da famosa Grande Dado (Big Data) este assunto retorna a tona para ajudar os jovens mancebos. Então Lets Lá! No nosso dia-a-dia ouvimos muito sobre dados e informação. Mas sabemos qual a real diferença entre esses dois termos? No primeiro momento podemos até achar que tudo é a mesma coisa, pensar que os conceitos são os mesmos, mas na verdade não são. Dados versus Informação: Qual a diferença? Ambos constituem alicerces para a construção do conhecimento. Sem dados e informações isto seria impossível. Mas afinal, qual seria a diferença então? O dado não possui significado relevante e não conduz a nenhuma compreensão. Representa algo que não tem sentido a princípio. Portanto, não tem valor algum para embasar conclusões, mu