В выражениях на почте, на заводе, НА ФАБРИКЕ, на стадионе употребление предлога НА объясняется тем, что первоначально понятия «почта» , «завод» , «ФАБРИКА» , «стадион» не связывались с представлением о помещении или здании: почта когда-то была на почтовой станции, на которой содержали ямщиков и держали лошадей; завод, фабрика, стадион могли занимать открытую территорию и состоять из нескольких сооружений Поэтому вернуться с фабрики= ПОЙТИ НА ФАБРИКУ