La particolarita del campo, da cui il nome, deriva dalle tre statue incastonate nelle pareti di un antico corpo di fabbriche presenti nel campo. Le tre statue rappresentano tre uomini orientali di pelle scura (Mori).  I tre risultano essere tre fratelli Rioba, Sandi e Afani della famiglia Mastelli del Cammello che costruirono l'intera zona.

Un quarto lo si ritrova invece un po discosto sulla fondamenta

I tre fratelli erano stati chiamati Mastelli perché, secondo le cronache, ”possedevano migliaia di mastelli pieni di zecchini d’oro”.

Tra le tre statue quella più famosa risulta essere quella di Sior Antonio Rioba; nell'Ottocento la statua perse il naso e questo gli venne rifatto con un pezzo di ferro improvvisato. Da ciò nacque la leggenda che sfregandolo si avrebbe avuto fortuna

Secondo un'altra tradizione tra gli affari praticati c'era anche la gestione di una banca, attraverso la quale fu truffata una signora veneziana molto religiosa che pregò Santa Maria Maddalena di scagliare la sua maledizione sui tre mercanti. Per miracoloso prodigio i Mastelli divennero tre statue di pietra, che furono messe in una nicchia di Campo dei Mori a monito per quanti li vedevano.

Sulla fondamenta ai piedi del ponte c'è la casa gotica del XV secolo che fu dimora del pittore Tintoretto dove morì nel 1594

Poco distante un bassorilievo sulla facciata di Palazzo Mastelli (sul Rio della Madonna dell’Orto) raffigurante un uomo con il turbante, in veste orientale, che conduce un cammello, farebbe riferimento al commercio delle spezie esercitato dalla famiglia

L'interno del palazzo presenta una vera da pozzo e degli interessanti colonnati

mentre in campo si ritrova una ulteriore vera da pozzo una patera e un capitello:

Dal campo poi si accede alla splendida chiesa della Madonna dell'Orto con il particolare pavimento del sagrato a spina di pesce