这个问题的设问本身是有问题的。徽商不等于安徽商人。徽商作为一个特定的历史名词，指的是徽州商人。徽州的地域范围要比安徽小得多。古代徽州的管辖区域，大体上对应现在的安徽省黄山市，当然有一部分被划到了安徽宣城和江西。所以古代徽州的管辖范围比当代的黄山市要略大一些。
徽商的崛起其实并不依赖于徽州本身的经济基础。事实上徽州在徽商崛起之前并不富裕，这是因为徽州的地形条件导致的。徽州属于山区，山多地少，在当时的生产条件下是不利于农业生产的，因此本身相对贫瘠。徽商的崛起依托的是明清之际推行的盐业专卖制度。徽商最早起家，实际上是在扬州做盐商生意。
扬州地处长江与运河的交汇处。自古以来就是繁华之地。同时背靠两淮盐业又成为了食盐的集散中心。徽州商人从新安江顺流直下到达杭州以后，沿运河北上就可以到达扬州。
在清代早期，徽州商人联合起来，将山西陕西商人排挤了出去，主导了扬州的盐业。此后，徽州商人步入鼎盛阶段。徽商对于扬州的发展贡献很大。现在的瘦西湖实际上就是由徽商开发出来的。扬州作为淮扬菜的中心城市之一，凭借的就是徽商在当时不惜代价，相互斗富，因此普遍在家中重金聘请厨师，研制菜品。扬州是中国手工业的中心城市之一，玉雕，牙雕，木雕技艺自成一派，影响深远。靠的其实也是盐商的资本扶持。戏曲行业的发展，实际上也颇为受惠于徽商。传说中的四大徽班进京背后其实都有盐商的经济支持。而这是近代京剧成型的一个先决条件。
扬州成就了徽商，徽商也回报了扬州。但是随着近代新式汽轮的出现，运河的航运价值迅速萎缩。晚清时期，由于运河的疏浚费用越来越高，所以清政府干脆放弃了运河漕运，改用上海沙船，从海上运输漕粮。后来干脆使用西式汽轮。运河的衰落使得扬州在中国历史上的辉煌就此告一段落。徽商的辉煌也随着扬州一同远去。
当然在晚清时期，也有少部分徽商放弃扬州开始前往上海，杭州等地经商，某些人也取得了不错的业绩，比如著名的红顶商人胡雪岩。不过在近代崛起的两大商帮，却再也没有了徽商的影子。一个是以江浙商人为主构建的江浙商人群体，一个是以闽粤商人，尤其是前往南洋经商获利的侨商为主体构建起来的南洋商人群体。
就安徽和浙江来说，自安徽在清代初年建省以后，在经济实力上就从来没有超越过浙江。这一点可以从清政府当时的赋税很明显的看出来。不过有一点倒必须要承认，在农业时代，浙江相对于安徽的优势不是很大。毕竟浙江整体来看平原面积也不是很大，浙南地区山区的情况也不比皖南地区好。安徽的平原面积其实是比浙江要多一些的，不过安徽很多平原地区长期遭受水患，农业产出是不稳定的。所以安徽的整体经济发展水平还是要比浙江略差一些。到了工业时代，沿海的浙江优势相对于安徽要明显的多。因此两者的经济差距就被逐步拉开了。