Jdete na to od lesa?

Vždy od lesa. Nic jiného nezbývá, bydlím v lese.

Záleží na tom, jak kdo rčení chápe. Podívejte se do odkazu, v němž jsou výzanmy vysvětlené.

https://www.od­povedi.cz/sear­ch?q=j%C3%ADt%20na%20to%­20od%20lesa%20

Já spíš začínám od Adama, tedy od vzniku, v jazyce od etymologie, tedy kdy se slovo objevilo. Za zády mám etymologické slovníky, které mě jistí.

A na co?

Na kešku jdu někdy od lesa, jindy zase od cesty.