Förr var Agö ett stort fiskeläge där många fiskare från Hudiksvall höll till under sommarmånaderna. Numera är hamnen för grund för att kunna användas som fiskehamn, men många av de röda små sjöbodarna, båthusen och stugorna finns kvar. På sommaren blir det liv och rörelse när sommargäster och fritidsbåtar anländer.