清代，祁门茶商发展很快。光绪以前，除东乡凫峰一带产销炒青绿茶外，祁门各地多产安茶，运往两广地区，畅销东南亚一带。当时县内有安茶号数十家，茶商上百人。据《祁门李氏宗谱》记载：清乾隆至咸丰年间，祁门南乡景石李氏做安茶生意的兢有李文煌等数人，他们或“远客粤东”或“贩茶浔沪”。

清光绪初年（１８７５年左右），祁红创制成功，因品质优异，成为国际市场上的畅锖货，极大地促进了祁门茶叶贸易的发展，做红茶生意的祁门人与日俱增，到光绪三十一年（１９０５），全县茶号已逾百家，红茶年产销量达６万余箱。

民国初年，随着祁红迭获国际大奖，声誉日隆，茶商人数也随之增加，全县茶号近两百家。二十年代，祁红出现首次低迷，产量下降，１９２８年祁红出口仅１万担左右，茶号