1931년 친일 단체인 토요회에 관여하게 되었다. 그러자 송진우는 그가 토요회에 관여하는 것에 대해서도 따끔하게 비판해 주었다. 송진우와의 언쟁 끝에 송진우는 그를 변절한 소인배라며 질타했다. 그러자 윤치호는 자신의 일기에서 “송진우 같은 이는 내가 토요회와 같은 모임에 관여하는 것에 반대한다. 물론 나도 그런 회의 멤버가 되고 싶지 않다”라며 불가피성을 역설하였다. 이후 각종 강연에 억지로 참여하였지만 그는 일부러 자신이 연장자라는 점을 이용, 맨 끝으로 순위를 미룬다음 "이미 훌륭한 연설은 앞의 연사들이 다 했으니 따로 할말이 없다"거나 "오늘의 좋은 말씀은 먼저 연사들이 다 말씀하셨다"며 강연을 우회적으로 회피하였다. 1932년 일제는 다시 그에게 사람을 보내 조선총독부 중추원 의원직을 제의하였으나 거절하였다.윤봉길, 이봉창 사건으로 이반된 한국인의 민심을 끌어들이려는 일제의 술책임을 간파하였기 때문이다.

일제는 끊임없이 조선인들에게 천황 폐하의 은혜를 역설했다. 그러나 윤치호는 '조선에 충만한 것은 천황의 은혜가 아니라 천황의 악의일 뿐이다'며 반박했다. 조선총독부와 일제는 일제가 한일병합 이후 조선에 철도, 도로, 항만 등과 공장 등 산업자본을 건설한 것을 홍보하며 일제가 조선을 근대화시켰다고 주장했다. 그러자 윤치호는 일본의 은혜 주장은 당치도 않다며 반박했다. '일본이 조선을 개발하는 것은 어디까지나 수탈을 쉽게 하기 위한 것이며, 그 도로와 철도와 교량, 항만이 파괴되었을 때 손해를 입는 것은 조선인이 아니라, 일본인'이라는 것이다.
윤치호로부터 변절한 소인배라고 질타를 받은 사람은?
송진우