Ngay từ nhỏ Phan Nhân đã tỏ ra là một cậu bé thông minh và có năng khiếu về nghệ thuật, đặc biệt là trong âm nhạc.

Lên đến bậc PTTH, xa gia đình lên Cần Thơ trọ học, những lúc buồn ông lại cùng bạn bè "nghêu ngao" vài câu hò Nam bộ chân chất, mộc mạc để vơi đi nỗi nhớ nhà.

Đặc biệt cứ mỗi khi đến tiết học môn thanh nhạc, là ông lại cảm thấy như có một niềm đam mê kỳ lạ cứ cuốn lấy ông vào trong từng giai điệu, nốt nhạc. Tốt nghiệp xong, theo tiếng gọi của quê hương ông gia nhập quân ngũ, tham gia kháng chiến chống Pháp, và cũng chính trong môi trường đó, Phan Nhân đã "tập tành" sáng tác như một nhạc sĩ nghiệp dư, bởi vốn âm nhạc của ông lúc đó chỉ là những gì ông đã được học ở bậc trung học.

Trong những cuộc liên hoan giao lưu của đơn vị với nhân dân, anh lính trẻ Phan Nhân thường tham gia góp vui bằng những bài hát do chính mình sáng tác, và được sự cổ vũ nhiệt tình của mọi người. Những câu động viên, khen ngợi của mọi người như tiếp thêm sức mạnh cho ông, thế là những bài hát lần lượt ra đời, mang chủ đề chính là tình quân dân như "cá với nước" keo sơn gắn bó trong cuộc chiến đấu chống giặc ngoại xâm.

Không sáng tác nhiều như những nhạc sĩ khác, nhưng những bài hát của Phan Nhân hầu như là những ca khúc vượt thời gian, để lại trong lòng thính giả nhiều tình cảm sâu sắc, trong đó có thể kể đến một số tác phẩm như: Hà Nội niềm tin và hy vọng, Em ở nơi đâu, Thành phố của tôi, Trên quê hương Minh Hải, Tình bạn già, Cây đàn guitar VictoHara...