さすがにSierraでiPhotoは辛いかも…と思ったけど、インストールしたら普通に使えちゃった
iPhoneにMacを信頼させてiPhotoを再起動した後は、読み込みも問題なくできたよ

iPhoneは5s（9.3.5）とSE（10.0.2）、MacはiMac 5K 2015（Sierra 10.12）
iPhotoのバージョンは9.6.1