Tvrz Nemile byla součástí hospodářského dvora na panství Zábřeh, na počátku 17. století patřila Ladislavu Velenu ze Žerotína, v roce 1590 je jako správce zmiňován Jan Huberck z Belnsdorfu. V roce 1617 Žerotín statek prodal Janovu synovi, regentovi zábřežského panství Kryštofu st. Hubrykovi (Huberckovi) z Belnsdorfu. Od 18. století sloužila budova jako selské stavení - západní část domu byla obytná, východní byla využívaná pro hospodářské účely. Objekt byl klasicistně upraven a prošel i dalšími novějšími utilitárními zásahy, zvláště v severní obytné části. Do východní části byla na přelomu 19. a 20. století vložena stájová klenba. Tvrz nebyla příliš reflektována odbornou literaturou a až z aktivity současného majitele byla budova v roce 2009 prohlášena za nemovitou kulturní památku a postupně obnovována.

Obdélný půdorys "palácové" tvrze je ve středu dispozice vybaven příčně řazenou vstupní síní. Od síně východně položené prostory jsou klenuté. Západní trakt má většinou plochostropé místnosti s fabiony. Prostor tzv. Kaple (název je mladšího původu a s původním využitím místnosti nijak nesouvisí) je situován v jihovýchodním nároží budovy. Je prolomen dvěma okenními otvory v původních pozicích, opatřených původními kamennými ostěními s přímými profilovanými překlady. Je zaklenut neckovou klenbou opatřenou štukovým dekorem. Základem kompozice jsou plastické štukové pásy vytlačovaného pletence. V patě klenby pás obíhá celou místnost, v vrcholu vymezuje obdélné zrcadlo, které je rozděleno do dvou polí. Další pletencové pásy dekorují hrany klenby a spojují pás u paty s vrcholovým zrcadlem. Vymezují pole, která jsou dále členěna perlovcovými pásky a nad delšími stranami klenby také kartušemi z vyřezávaného štuku. V kartuších jsou patrné fragmenty nástěnných maleb, u nichž není zřejmé, zda patří k autentickému vybavení prostory. Dekorativní systém doplňují ve vrcholových zrcadlech velké rozety rámované vždy čtyřmi andílčími hlavičkami. V bočních polích klenby jsou centrálně posazeny menší rozety a v rozích pásu v patě klenby jsou zasazeny lví hlavičky.   

Není zcela zřejmé, kdo byl objednavatelem štukové výzdoby prostor tvrze. S největší pravděpodobností to byl Ladislav Velen ze Žerotína, s jehož stavebními aktivitami je dekor prokazatelně propojen. Pro jednotlivé tlačené prvky (andílčí a lví hlavičky, rozety) byly využity stejné formy, jako pro výzdobu Žerotínova zámku v Tatenici (1606) na sousedním moravskotřebovském panství. Podobné dekorativní systémy a shodné formy pro drobné štukové prvky byly použity i na klenbě kostela sv. Jiří v Kunčině (kolem 1610) nebo v městském domě čp. 146 v Moravské Třebové. Dekorativní aparát odkazuje především ke slezským realizacím, jméno autora nebo stavební skupiny je dosud neznámé. Obdobné štukatury (nikoliv již prokazatelně stejné formy pro plastické prvky) najdeme také v Žerotínově městské rezidenci - manýristickém předdvoří zámku v Moravské Třebové (kolem 1615). Výstavbu tatenického zámku literatura spojuje se jménem moravskotřebovského stavitele Giovanniho Motally da Bonnamone (Plaček 1996, s. 338) a nověji hypoteticky také s okruhem prací stavitele Andrease Balzera ze slezské Nysy (Říhová 2011, s. 143), který působil na počátku 17. století v Moravské Třebové. 

Objednávka výzdoby tvrze mohla souviset i s aktivitami Kryštofa Hubryka st., který zakoupil statek Nemile v roce 1617. Není však pravděpodobné, že by se ještě po více než 10 letech v rámci stavební skupiny používaly stejné formy pro jednotlivé prvky jako v Tatenicích.