出力側にはすべてディスプレイを接続する必要がありますか？

出力側のHDMI端子すべてにディスプレイを接続する必要はありません。

例えば4台用分配器に 1～3台だけディスプレイを接続しても動作可能です。

※OUTPUT1にディスプレイを接続していない場合、接続している中で一番小さい番号に接続されているディスプレイの解像度と音声フォーマットで映像と音声が出力されます。