コロナの影響なんも受けてないじゃん

相談です 
夫が不在でも、子供たちを連れて夫実家に顔を見せに行くって一般的ですか？ 

夫が多趣味で、休日、連休の度に様々な趣味で外出します。
今度の夏季休暇も友人と旅行に出かけるようです。 
ずっとこんな感じなので、結婚して以来夫実家に行った事ってほとんどありません。 

一方、私は自分の実家が好きなのでよく帰ります。
夫も快諾してくれてます。 

それを、夫側親戚（義父母ではない）に不平等だと叱られました。
実家と同じくらい義実家にも顔を出すべきだと。 

「夫がいつもいないので～」と断ったら、「貴方だけででも連れて行けばいいじゃない！」と言われ困惑してます。 

正直、夫に帰る気がないのに私も行きたくないし、一人で連れてくなんてしんどいです。
義実家と不仲ではありませんが…新幹線の距離です 
親に相談したら「たまには連れて行ってあげたら？」と言われますます困惑しました。 

夫は「行っても行かなくてもいいよ」と言っています。
自分が行く気は全くないようです 

お祝いとかは毎度貰ってますが…（お祝い返しはしてます） 
全然連れて行かないのは不義理でしょうか？