没事了解决了。
因为这个文件夹上原本有一个不显示图片的媒体库，所以即便是建另一个媒体库，勾选了显示照片，jellyfin也仍然认为这个文件夹的媒体库都不应该显示图片。
重新建个文件夹放图片，再添加一个新的媒体库就好了。