いろいろ経緯はおいといて
unityの物理演算用component、Rigidbody 2Dを使ったところ
ゆっくり下に動きはするものの、物理演算による落下とはほど遠い挙動。
Rigidbody2Dの方を確認してみても、Gravity Scaleには1が入っているし、問題無さげ。
試しにGravity Scaleを2にしてみたら下に移動する速度は上がったものの、やっぱりおかしい。
で、調べてみた結果、SpriteのアニメーションをやってるAnimatorのApply Root Motionが原因だったらしい。
チェックを外して実行してみたらちゃんと落下した。解決。