Blog BigDataCorp | Bem-vindo à nova era dos dadosNo mundo atual, ninguém duvida que os dados são essenciais. O mercado inteiro já reconhece que informações de qualidade são fundamentais para reduzir custos, automatizar processos e vender mais. A maioria das empresas vem evoluindo de forma significativa sua capacidade de trabalhar com dados internos, mas poucas desenvolveram a capacidade de incorporar o volume gigantesco de informações que está disponível no ambiente público da internet em seus processos.
Reconhecendo esse desafio de coleta e integração de dados externos, a BigDataCorp construiu o maior catálogo de dados públicos do país, reunindo dados vindos de milhares de fontes de informação de uma forma estruturada e simples de ser utilizada. Nesse conteúdo, vamos explorar um pouco o catálogo de dados, e como ele pode apoiar o processo de descoberta e utilização da Plataforma de Dados da BigDataCorp.
Sumário
- Afinal, o que é o catálogo de dados?
- O que você vai encontrar no catálogo de dados?
- Como o catálogo de dados pode te ajudar na descoberta de novas informações e na construção de novas soluções e serviços?
- Como atualizamos e mantemos o mais completo catálogo de dados do mercado?
Afinal, o que é o catálogo de dados?
O principal produto da BigDataCorp é a Plataforma de Dados. Dentro da plataforma de dados, você vai encontrar informações sobre pessoas, empresas, produtos, e diversas outras entidades. O catálogo de dados, como o próprio nome indica, é uma documentação on-line que apresenta todos os dados que a Plataforma de Dados disponibiliza para uso.
Mas não é só isso. O catálogo de dados também funciona como a documentação técnica, que ensina para os desenvolvedores como eles podem integrar a Plataforma de Dados em seu código, e como eles podem fazer o tratamento dos dados que são retornados nas consultas.
O catálogo de dados funciona ainda como uma documentação comercial, trazendo dentro do seu conteúdo a tabela de preços detalhada para cada uma das consultas que são disponibilizadas dentro da Plataforma de Dados da BigDataCorp.
O que você vai encontrar no catálogo de dados?
Ao acessar o catálogo de dados, você vai encontrar algumas informações diferentes, reunidas para apoiar a sua jornada de utilização da Plataforma de Dados da BigDataCorp. O primeiro conteúdo disponibilizado é a descrição da Plataforma, bem como descrições de alto nível dos principais tipos de informação que estão disponíveis dentro dela.
Na área de “documentação técnica“, você vai encontrar o catálogo de dados propriamente dito. O catálogo lista todas as entidades que têm dados organizados para acesso dentro da Plataforma de Dados, e, para cada uma das entidades, você vai encontrar os diferentes datasets disponíveis. Além de entidades mais óbvias, você vai encontrar também a lista completa de informações que estão no marketplace de dados da Plataforma, e todas as consultas on-demand que são oferecidas. Vamos explicar um pouco mais sobre cada um desses termos:
Entidades: Pense nas entidades como um primeiro nível de organização da informação, para simplificar o seu uso. Se você quiser buscar informações de indivíduos, vai acessar os dados de “Pessoas”. Se quer dados de CNPJs, vai acessar os dados de “Empresas”. Os dados de produto, por sua vez, estão dentro da entidade “Produtos”, e assim por diante.
Datasets: Os datasets são conjuntos de atributos que foram agrupados para simplificar o seu uso, de acordo com um tema. O dataset de “Dados Cadastrais Básicos”, por exemplo, traz informações como o nome, nome da mãe, data de nascimento, CPF e outros dados básicos de uma pessoa. Cada um desses datasets foi pensado para atender a uma finalidade específica, e você pode combinar tantos datasets quanto queira em suas buscas.
Marketplace de Dados: O Marketplace de Dados é a parte da Plataforma de Dados que reúne informações – novamente sobre a forma de datasets – que vêm dos parceiros da BigDataCorp. Separamos esses conjuntos de dados para evitar a confusão sobre a origem da informação pelos clientes.
Consultas On-Demand: Consultas On-Demand são chamadas onde a informação solicitada está sendo acessada e recuperada no momento em que a consulta é realizada, ao invés de ficar armazenada dentro da Plataforma de Dados. Elas possuem um tempo de resposta mais demorado, e podem impactar o desempenho de uma chamada, e, por isso, ficam em um espaço separado.
Além da descrição de todos os datasets e dados disponíveis, você encontra ainda no catálogo de dados a tabela de preços para cada um dos datasets disponíveis nas diferentes entidades. As tabelas de preço da BigDataCorp estão publicamente acessíveis para qualquer pessoa, e praticamos os mesmos preços para todos os clientes, seguindo o nosso princípio de transparência de preços e serviços.
Junto com a tabela de preços e a descrição dos dados, está disponível também uma documentação técnica, que descreve como você pode integrar a Plataforma de Dados aos seus sistemas internos através da nossa API. Os exemplos estão disponíveis em diferentes linguagens de programação, para suportar qualquer necessidade.
Finalmente, na seção de “novidades”, você encontra uma descrição resumida de todas as novidades que foram liberadas dentro da Plataforma de Dados recentemente. Essa seção é um ótimo recurso para se manter a par de todas as dezenas de lançamentos que temos todos os meses.
Como o catálogo de dados pode te ajudar na descoberta de novas informações e na construção de novas soluções e serviços?
A descrição completa dos datasets disponíveis na Plataforma de Dados traz um detalhamento descritivo das informações disponíveis em cada um deles, assim como exemplos de como e onde essas informações podem ser aplicadas para diferentes casos de uso. Ao buscar na documentação pelo seu caso de uso, é possível encontrar novas informações que podem te ajudar a resolver problemas de uma forma diferente, mais eficiente, ou com menor custo.
Além de permitir a pesquisa de maneira mais simples e objetiva, o catálogo de dados também exibe todas as informações disponíveis dentro da Plataforma de Dados, o que possibilita a descoberta de novos dados de forma exploratória simples e direta. Na seção de “novidades” do catálogo, você encontra todos os novos datasets sendo liberados, com uma descrição de possíveis aplicações.
Todo esse conteúdo é preparado por nosso time de especialistas em dados e suas aplicações, e direcionado para apoiar os clientes na construção de soluções para os seus desafios.
Como atualizamos e mantemos o mais completo catálogo de dados do mercado?
A BigDataCorp, como primeira datatech do Brasil, opera os maiores e mais complexos processos de captura e estruturação de dados do mercado. Através de processo, não só mantemos todos os dados que disponibilizamos atualizados com uma frequência inigualável, mas também estamos continuamente encontrando novas fontes de informação sobre as diferentes entidades que estão mapeadas na plataforma de dados.
Essas novas fontes de informação, uma vez mapeadas, são tratadas e incorporadas à Plataforma de Dados, seja na forma de novos atributos contidos nos datasets existentes ou como datasets inteiramente novos. Lançamos centenas de atualizações por ano, para garantir que nossos clientes tenham sempre acesso às melhores, mais completas e mais atualizadas informações do mercado.
Fale ainda hoje com o nosso time e descubra o que os nossos dados podem fazer pelo seu negócio!