Секретными были почти любые вооружения.
А новые - считались особо секретными.
Пример - А.Ворожейкин писал, что когда ему позволили полетать на Як-9К (с 45 мм пушкой), ему было велено не распространяться, что пушка 45, а не 37 мм. Запрещено было также углубляться за линию фронта.
Тем не менее в войну любы новые вооружения проходили фронтовые испытания, где в условиях реальной войны проверялась их пригодность.