unity2Dでraycastの範囲を自由に編集したい

実現したいこと

unity2Dで、Imageの上にマウスカーソルを置いた時に
イベントトリガーのonPointerEnterで処理を実行させようとしています。

しかし、Imageの形が全て正方形のため、自由な形で判定を取る事ができません。
raycastの範囲を自由に編集する事はできないのでしょうか？

試したこと

PolygonCollider2Dで判定を取ってみました。
これだと衝突判定のみで、クリック時やonPointerEnterなどの判定ができませんでした。