自転車をこぎすぎて、脚が痛い時は冷やす？温める？

基本はアイシング（冷やす）。
痛みの原因にもよりますが、運動をすると、筋肉が損傷し、痛みが脳に伝わり、それを受けて脳から周辺組織に対して筋肉を硬直させるよう命令が出されます。
アイシングによって痛感神経がマヒすると脳への痛みの伝達が弱まります。
痛みの原因が筋肉疲労であれば、上記のようにアイシングによる応急処置でもよいのですが、ずっと続くようであれば、病院で痛みの原因を確認した方がよい場合があります。