Une gravure datant de 1612 (de Claes Jansz Visscher) montre qu'un gros donjon se serait trouvé du côté Est du château (c'est-à-dire à l'arrière du château). Pour certains, il reste à savoir si ce donjon a vraiment existé! En effet, une étude de l'histoire de la construction du château effectuée sur place en 1972 ne semble pas avoir fourni la moindre preuve de l'existence passée du donjon.
Le professeur J.G.N. Renaud émit cependant en 1999 un certain nombre de critiques concernant l'étude du château de 1972, en particulier parce que celle-ci fut menée par un architecte qui alors « ne connaissait pas suffisamment bien l'évolution des châteaux en général » et qui ne reconnut donc pas les traces du donjon disparu, alors qu'un historien de la construction rodé reconnait ces traces au premier coup d'œil, comme le fit Renaud sur place. Renaud mentionne comme preuve de l'existence passée du donjon un relevé de mesures des soubassements du château datant d'avant les travaux de 1703, sur lequel le soubassement du donjon avec ses murs épais de 2,20 mètres, « est indéniablement visible ».
d'après:
Hupperetz, W. & B. Olde Meierink & R. Rommes (red.) (2005). Kastelen in Limburg. Burchten en landhuizen (1000-1800). Stichting Limburgse Kastelen, Uitgeverij Matrijs, Utrecht, p.159;
Renaud, J.G.N. (1999). “Iets over de gedaantewisselingen van het kasteel van Baarlo”, in: Castellogica nr III (1999), NKS, Doorn, p.361-364;