Big Data ainda é uma coisa de elite:apenas as empresas mais ricas e experientes em TI têm a chance de arranhar a superfície de seu potencial. Tudo isso pode estar prestes a mudar graças a uma plataforma analítica de Big Data desenvolvida no projeto TOREADOR, que tratará automaticamente todos os principais problemas relacionados à preparação de dados sob demanda.

"As expectativas de Big Data são muito altas, mas a lacuna entre ambição e execução ainda é grande, especialmente para PMEs, "Dr. Ernesto Damiani suspira. E ele deve saber:desde o início de 2016, O Dr. Damiani está liderando um consórcio formado por 10 pessoas que procuram as razões para essas fortunas mistas e as possíveis soluções.

Se relativamente poucas PMEs incorporaram análises de Big Data em suas ofertas ou processos internos, é principalmente por duas razões. O primeiro é a falta de competência em análises de Big Data, como o Dr. Damiani explica. Uma empresa disposta, por exemplo, para adequar suas ofertas ao comportamento do cliente, usando um aplicativo gratuito, seria necessário recorrer a uma consultoria muito cara. Atualmente, é a única maneira de mapear as metas de negócios para uma classe de soluções de ciência de dados e tecnologia.

"Concretamente, o resumo do projeto pode ser algo ao longo das linhas de 'coletar os eventos gerados pelos aplicativos principais dos clientes e usá-los para treinar um classificador multicategoria de floresta aleatória escalável de seu comportamento a ser implantado em um serviço de nuvem pública', " ele diz.

O segundo motivo é o longo tempo de implementação e, novamente, o custo proibitivo das campanhas de Big Data, mesmo quando a abordagem da ciência de dados já foi identificada. Juntos, esses problemas têm mantido as PMEs e as empresas que não entendem de TIC longe da análise de Big Data, embora representem uma parte substancial da espinha dorsal de fabricação da UE.

A metodologia e o kit de ferramentas TOREADOR (plataforma de dados analíticos TrustwOrthy model-awaRE) oferecem uma solução para ambos os problemas:eles automatizam e comoditizam a análise de Big Data, ao mesmo tempo em que torna sua adaptação aos requisitos de clientes específicos de domínio muito mais fácil do que antes.

O framework TOREADOR suporta duas transformações automatizadas. O primeiro começa a partir de um modelo declarativo legível por máquina que coleta os objetivos do proprietário dos dados, e termina em um modelo procedural com reconhecimento de semântica independente de tecnologia que descreve a computação a ser realizada. Então, a segunda transformação baseia-se no modelo de procedimento para calcular um modelo de implantação dependente de tecnologia. Este último pode ser executado em uma plataforma Apache, nas instalações do cliente, em serviços comerciais em nuvem como AWS, como código Python executável na plataforma Azure ou como um contêiner Docker.

"Nossos modelos declarativos podem coletar interativamente os objetivos de negócios das campanhas de Big Data e permitir que o kit de ferramentas TOREADOR forneça conselhos automáticos sobre a viabilidade das soluções. Nossos modelos procedimentais fornecem uma descrição inovadora da computação analítica de Big Data na semântica OWL / S- padrões conscientes, e nossos compiladores traduzem esses modelos procedurais em fluxos de trabalho totalmente executáveis ​​ou mesmo em código Python paralelizado de forma nativa. Estamos olhando para um processo de desenvolvimento iterativo, onde os usuários não experientes em TI podem configurar rapidamente uma campanha, gerando um fluxo de trabalho executável em um serviço de nuvem pública, e então - se necessário - chame os desenvolvedores para gerar código Python independente, "Dr. Damiani explica.

Os parceiros do projeto já identificaram quatro pilotos industriais nas áreas de manutenção preventiva de motores de aeronaves, gestão preditiva de usinas de energia solar, análise de logs de aplicativos de negócios, e análise de clickstreams para aplicativos de comércio eletrônico.

"A plataforma TOREADOR está disponível e foi implantada nos quatro locais-piloto. Também foi disponibilizada como um pré-lançamento gratuito para membros selecionados da comunidade TOREADOR, que é composta por empresas europeias (várias delas PME) recrutadas com a ajuda da TAIGER (Espanha), uma PME inovadora no consórcio TOREADOR. Detalhes sobre esses primeiros usuários estão disponíveis em nosso website. Além do mais, a metodologia TOREADOR foi lançada para outros projetos europeus usando campanhas de Big Data como EVOTION, "Dr. Damiani diz.

A conclusão do projeto está prevista para o final de 2018. Até então, o consórcio pretende continuar ampliando o catálogo de serviços disponíveis na plataforma e dar exemplos de campanhas de Big Data habilitadas para TOREADOR, incluindo treinamento e implantação de modelos avançados de aprendizado de máquina.