No se ha determinado con certeza cuándo comienza el gran interés de Baumeister por el arte no europeo. De todos modos, es probable que descubriera el arte africano alrededor de 1924, cuando conoció en París a sus colegas franceses Le Corbusier, Amedée Ozenfant y Fernand Léger. Las revistas de arte francesas como Cahier d'Art y Documents publicaban regularmente reproducciones de arte africano. Margarete Baumeister, la esposa del artista, descubrió una máscara Senufo procedente de Costa de Marfil en el subsuelo de la Galerie d'Art Contemporain.

Baumeister estuvo siempre muy vinculado con el antiguo Oriente. Las piezas de su colección tenían un gran valor para él, y en particular en los años treinta mostró un enorme interés por estas culturas, cuando leyó con entusiasmo los testimonios del arqueólogo Leonard Woolley, como Ur und die Sintflut (Ur y el diluvio) y Vor 5.000 Jahren (Hace 5.000 años). El motivo del arpa, que aparece en algunas de sus obras en torno a 1945, está tomado de Leiern aus Ur (Liras de Ur).

El artista se sentía especialmente atraído por la sabiduría, la filosofía y el arte del Asia oriental. Su colección comprende 46 piezas de origen asiático, entre ellas también una pequeña colección de xilografías chinas y japonesas. El objeto más importante entre ellas era para él el rollo caligrafiado en tinta china con el símbolo shou (larga vida) que data del siglo XIX y que había recibido como obsequio del Dr. Kurt Herberts en 1941.