UE4で使われるアイコンの解説が欲しい

素人です。

例えばサンプルのプロジェクトなど開くと、恐竜の頭のようなものが配置されてます。
それは親クラスはアクターのBPだったりするのですが、なんでアイコンが変わってるのでしょうか。

このようにレベル上、アウトライナやプロパティなど
UE4で使われるアイコンの解説があると、理解がしやすそうなのですが、そのアイコンイラストの説明はどこで観られますでしょうか。

公式マニュアルでも無いですか?

恐竜の頭 というのはおそらくBillboardのデフォルト設定のスプライトのことを指しているのだと思いますが、Actorによって意味合いが変わります。
Actorの作成者の意図によりますので、これといった明確な説明はできません。

その他のアイコンについては、公式ドキュメントやチュートリアルを見て覚えるのが良いでしょう。