Elliott knöts 1973 till Arts Council i London, utsågs 1976 till chef för Museum of Modern Art i Oxford och var 1996–2001 chef för Moderna museet i Stockholm. Han utsågs därefter att leda uppbyggnaden av Mori Art Museum i Tokyo, som öppnades 2003, och var dess chef till 2006.