図星～的の真ん中の点を狙って、的中させるが如し

誰か何かを考えていることを当てたりすることを
「図星」という。

これは、弓道に由来する。弓道は的に矢を当てるのだが、
その的は現在は霞的が主流だが、
かつては「星的（ほしまと）」がよく使われていた。

その星的の真ん中に描かれている点が
「図星」という。

その図星を狙って矢を放って当てることから派生して
相手が心の中で思っていることを当てるという意味で
使われるようになった。