Helmチャート内で、Chart.yamlのappVersionフィールドを変更した場合、チャート自体のversionフィールドも変更すべきか。

はい、チャートの変更としてバージョンを上げるのがセマンティックバージョニングの原則