是的，中国农业银行武汉市分行属于中国农业银行湖北省分行辖下的分支机构。中国农业银行是中国大陆的一家大型商业银行，下设多个省级分行，每个省级分行下又有多个市级分行和支行。武汉市作为湖北省省会，属于湖北省辖区，因此中国农业银行武汉市分行归属于中国农业银行湖北省分行的管辖范围内。