Как вариант, присвоить всем нужным объектам определенный таг. В инициализации, либо в другом удобном месте, найти все объекты по тагу (см. документацию) и поместить в массив. Затем далее в коде все время работать именно с массивом нужных объектов.
Еще вариант использовать префабы, создавать, когда нужно и удалять когда нужно, вместо скрытия.