A resposta é bem simples:o hélio vaza. O hélio é um átomo muito pequeno e o látex é bonito poroso na escala de um átomo de hélio (se você for comprar balões, você verá que existem balões "grau hélio", que tentam ser mais espessas e menos porosas).
o balança de peso que mantém um balão flutuando não deixa muito espaço para vazamentos, então, quando um pouco vaza, o balão cai.
Veja Como funcionam os balões de hélio para obter detalhes completos sobre o peso que um balão de hélio pode levantar!
Aqui estão alguns links interessantes: