Big Data é uma mudança tão grande para as empresas que pode facilmente parecer opressor. O projeto BigDataEurope atende empresas interessadas a meio caminho, fornecendo uma pilha integrada de ferramentas para manipular, publicar e usar recursos de dados em grande escala.

Olhando para a longa lista de projetos financiados pelo Horizonte 2020 e o amplo espectro de tópicos que estão sendo cobertos, seria fácil esquecer que o maior programa de investigação e inovação da UE até à data visa abordar sete grandes preocupações sociais:saúde e bem-estar; Comida, agricultura e bioeconomia; energia; transporte; das Alterações Climáticas; liberdade e segurança; e o lugar da Europa num mundo em mudança.

O que é ainda mais fácil de esquecer é o fato de que esses tópicos aparentemente muito diferentes e os setores de atividades relacionados compartilham pelo menos uma característica comum:como eles poderiam se beneficiar da inovação digital, e mais especificamente de Big Data.

Para garantir que eles façam, the BigDataEurope (Integrando Big Data, Software e comunidades para enfrentar os desafios sociais da Europa) criou sete comunidades e tentou entender melhor o que eles precisariam de Big Data. O resultado é uma plataforma capaz de ingerir dados de uma variedade de fontes, que pode ser adaptado para atingir aplicações inovadoras em todos os sete desafios do H2020.

Que lacunas você pretendia preencher com este projeto e como isso é importante?

É amplamente reconhecido que a análise de grandes quantidades de dados (Big Data) influencia profundamente a nossa economia e a sociedade como um todo. Contudo, é importante que as tecnologias correspondentes não estejam disponíveis apenas para um pequeno círculo de empresas, mas também pode ser amplamente utilizado por empresas e iniciativas menores, bem como na pesquisa e na academia.

A BigDataEurope preencheu essa lacuna primeiro, fornecendo uma plataforma para a realização de aplicativos de Big Data, e, em seguida, discutindo os requisitos e aplicações piloto com as comunidades que representam os desafios sociais identificados pelo programa-quadro H2020.

O que torna sua abordagem inovadora?

Vários eventos organizados com grupos de partes interessadas nos fizeram perceber que, além de volume e velocidade, a variedade de dados é um aspecto fundamental a ser tratado em aplicações sociais.

Para atender a esse requisito, planejamos e produzimos uma camada de descrição de dados semânticos para Big Data. Esta camada usa vocabulário e gráficos de conhecimento, e permite que as comunidades desenvolvam um entendimento comum de seus dados e, ao mesmo tempo, interligam e integram esses dados em um nível técnico.

Quais foram as principais dificuldades que você enfrentou para reunir todos esses grupos de partes interessadas e fontes de dados, e como você os superou?

Um dos principais desafios reside nas diferentes terminologias, culturas e práticas encontradas em grupos de partes interessadas, o que também resultou em requisitos e pontos de vista muito diferentes. Enquanto, por exemplo, dados abertos já desempenham um papel fundamental em aplicativos de mobilidade, segurança de dados, privacidade e anonimização são de suma importância em cenários de saúde.

Abordamos esse desafio evitando o desenvolvimento de uma plataforma única para todos, em vez disso, integrando componentes que atendem a uma finalidade muito específica, como o processamento de dados de streaming ou anonimização. Como resultado, o usuário pode combinar e integrar os componentes de gerenciamento de dados mais adequados para qualquer cenário de aplicação concreto da plataforma BigDataEurope.

Quais são as vantagens de integrar todos esses dados? Você pode dar um exemplo da vida real?

O projeto produziu sete demonstradores mostrando o valor dos dados integrados para os diferentes desafios sociais. Isso incluiu, por exemplo, a previsão de tráfego rodoviário e congestionamento com base em dados de sensores históricos e atuais em combinação com informações de redes sociais.

Outro exemplo é a agricultura de precisão com o objetivo de fornecer a plantas como a videira uma nutrição ideal, fertilização e irrigação com base no clima e dados de pesquisa.

Os resultados do projeto atenderam às suas expectativas iniciais? Como assim?

No geral, a necessidade de lidar com a variedade de dados era algo que esperávamos e foi confirmado por meio de reuniões com as partes interessadas e a comunidade. Graças à abordagem de integração semântica seguida pela plataforma, conseguimos dar um passo a frente, mas ainda estamos um pouco distantes da visão de integrar e analisar perfeitamente grandes quantidades de dados agregados com o mínimo de esforço. Além do mais, a consideração da privacidade dos dados e da soberania dos provedores de dados exigirá mais atenção no futuro.

Como as partes interessadas podem começar a usar sua plataforma?

A plataforma, a documentação e as implementações dos pilotos são totalmente de código aberto e disponíveis para reutilização. Também, há vários parceiros do consórcio BigDataEurope (incluindo, por exemplo, Fraunhofer) que estão prontos para fornecer assistência e suporte.

Quais são seus planos de acompanhamento?

Os membros do consórcio estão desenvolvendo pesquisas sobre o tópico de gerenciamento de Big Data em seus próprios domínios. Por exemplo, já existem vários projetos H2020 recentemente iniciados que continuam a manter partes da plataforma BigDataEurope e a aprofundar a sua aplicação nos domínios da saúde e das ciências da vida.