• Home
  • Química
  • Astronomia
  • Energia
  • Natureza
  • Biologia
  • Física
  • Eletrônicos
  • Lidar com trilhões de arquivos de supercomputador ficou mais simples
    p Gary Grider, deixou, e Brad Settlemyer discutem o novo produto de software Los Alamos e Carnegie Mellon, DeltaFS, lançado no site de distribuição de software GitHub esta semana. Crédito:Laboratório Nacional de Los Alamos

    p Um novo sistema de arquivos distribuído para computação de alto desempenho disponível hoje por meio do site de colaboração de software GitHub fornece desempenho sem precedentes para a criação, atualizar e gerenciar um número extremo de arquivos. p "Projetamos o DeltaFS para permitir a criação de trilhões de arquivos, "disse Brad Settlemyer, um cientista da computação de Los Alamos e líder de projeto. O Laboratório Nacional de Los Alamos e a Carnegie Mellon University desenvolveram conjuntamente o DeltaFS. "Essa ferramenta ajuda os pesquisadores a resolver problemas clássicos em computação de alto desempenho, como rastreamento de trajetória de partículas ou detecção de vórtice. "

    p DeltaFS constrói um sistema de arquivos que parece ao usuário como qualquer outro sistema de arquivos, não requer hardware especializado, e é exatamente adequado para auxiliar o cientista em novas descobertas ao usar uma plataforma de computação de alto desempenho.

    p "Um dos maiores desafios, e objetivos principais do DeltaFS, estava escalando em milhares de servidores sem exigir que uma parte deles fosse dedicada ao sistema de arquivos, "disse George Amvrosiadis, professor assistente de pesquisa na Carnegie Mellon University e co-autor do projeto. "Isso libera os administradores de ter que decidir como alocar recursos para o sistema de arquivos, que se tornará uma necessidade quando as máquinas exascale se tornarem uma realidade. "

    Crédito:Laboratório Nacional de Los Alamos
    p O sistema de arquivos traz duas mudanças importantes na computação de alto desempenho. Primeiro, DeltaFS permite novas estratégias para projetar os próprios supercomputadores, mudando drasticamente o custo de criação e gerenciamento de arquivos. Além disso, DeltaFS melhora radicalmente o desempenho de consultas altamente seletivas, reduzindo drasticamente o tempo para a descoberta científica.

    p DeltaFS é um transiente, serviço definido por software que permite que os dados sejam acessados ​​de um punhado de até centenas de milhares de computadores com base nos requisitos de desempenho do usuário.

    p "As técnicas de armazenamento usadas no DeltaFS são aplicáveis ​​em muitos domínios científicos, mas acreditamos que, ao aliviar o gargalo de metadados, realmente mostramos uma maneira de projetar e adquirir sistemas de armazenamento HPC muito mais eficientes, "Settlemyer disse.


    © Ciência https://pt.scienceaq.com