Là cầu thủ của Sài Gòn FC từ những ngày đội bóng này chuyển giao từ Hà Nội vào Sài Gòn, nhưng sau khi cùng đội bóng này giành chiếc HCĐ V.League 2020, Hữu Sơn cùng một loạt cầu thủ của Sài Gòn FC đã bị chủ tịch kiêm HLV trưởng Vũ Tiến Thành khi ấy thanh lý hợp đồng. Việc thanh lý hàng loạt những cầu thủ chủ chốt đã khiến Sài Gòn FC suýt lâm cảnh rớt hạng ở mùa giải 2021, may mà giải đấu đã dừng lại vì dịch Covid-19.
Hữu Sơn sau đó về thi đấu ở CLB Quảng Nam trong mùa giải 2021, với mục tiêu giúp đội bóng này thăng hạng V.League ở mùa giải 2022. Tuy nhiên, do giải đấu phải dừng lại vì dịch bệnh, nên kế hoạch đưa đội lên hạng cũng bất thành. Lẽ ra, tiền vệ này tiếp tục gắn bó với Quảng Nam ở mùa giải 2022, nhưng vì một số trục trặc trong hợp đồng, nên Sơn quyết định cho tay với đội bóng xứ Quảng.
Trên facebook cá nhân mới đây, Hữu Sơn đã viết: “Quyết định khó khăn, nhưng dường như đến lúc phải lựa chọn những gì tốt nhất dành cho mình. Dù quãng thời gian chưa phải là dài, nhưng cũng đủ để cảm nhận tình cảm mà anh em đội bóng và ban huấn luyện dành cho mình. Chúc cho đội bóng giành được những gì tốt đẹp nhất trong thời gian tới và cũng luôn tin tưởng vào khả năng của mọi người. Cảm ơn và tạm biệt!”
Sau đó, nhận lời mời của HLV Phùng Thanh Phương, chàng tiền vệ này đã quyết định quay lại tái hợp với Sài Gòn FC trong mùa giải mới. Quyết định này của Hữu Sơn âu cũng hợp lý, vì anh được chơi bóng trong môi trường quen thuộc với một số đồng đội từng gắn bó lâu năm. Đặc biệt là khi Sài Gòn FC không còn chủ tịch kiêm HLV trưởng Vũ Tiến Thành, hy vọng mọi việc sẽ tốt hơn cho CLB này.