Dutra conheceu sua mulher, Santinha, em 1914, na casa do avô de Fernando Henrique Cardoso, de quem foi ajudante-de-ordens. Ela já era viúva e tinha uma filha. Muitos atribuem à ela a decisão de proibir o jogo no Brasil. Ela foi também a primeira mulher de presidente a forçar a nomeação de parentes para cargos públicos. Dona Santinha morreu em 1949 no Palácio Guanabara.
O decreto presidencial, de 30 de abril de 1946, que fechou os cassinos dizia: “Considerando que a tradição, moral, jurídica e religiosa do povo brasileiro, é contrária a exploração dos jogos de azar, fica decretado o fechamento dos cassinos em todo o território nacional.”
Dutra tinha um problema de pronúncia. Costumava trocar o “c” e o “s” pelo “x”.
