西汉时期出现了一个新行当“驵（zang3）侩”，《史记·货殖列传》“子贷金钱千贯，节驵侩”。驵就是骏马的意思。侩，就是拉拢撮合买卖的人的意思。驵侩就是市场上撮合马匹成交的，收取报酬的经纪人。
驵侩开始是马贩子，但后来业务延伸扩展到各行各业。封建社会，农村老百姓买卖农具和日常生活用品用不着中间商。但是汉代时，商品经济已经有了充足的发展，陆上和海上丝绸之路相继贯通。出现了许多豪商、富商。他们从事大宗商品交易，这就需要能够牵线搭桥、主持买卖中间人了。
对于这类中间人，诚信可靠经营尤为重要。晋代的《晋令》要求，驵侩在工作时，要明确写上自己的工作内容和工作特长。工作时候，要一只脚穿白鞋、一只脚穿黑鞋，表明在买方和卖方中持中间立场。
到了唐代，经济更加繁荣。出现了专门的中介机构“邸店”和“车坊”。唐中期以后“邸店”和“车坊”在长安、洛阳等大城市大规模地出现。“牙人”这一名词，也在唐代正式出现，安史之乱的祸首安禄山，就当过牙人。《旧唐书·安禄山传》载“禄山及长，解六蕃语，为互市牙郎”。安禄山在边境做的可是国际贸易，精通六国语言，也确实是个人才，也难怪他能将大唐帝国搅了个天翻地覆。
牙行的繁荣
牙行这个行当走向巅峰还是在明清时期。明代中期以后，资本主义萌芽在中国出现，商品经济空前的繁荣，市场网络在中国不断地扩展，牙人获得了广阔的生存空间。明清两代，牙人从业人数动辄成千上万。明崇祯年间，杨嗣昌向皇帝的奏疏中提到，一年从牙人那里征收的牙税就有六十七万五千两，为全年税收总额的六分之一。清雍正年间，湖北一省“经纪牙行共五千二百四十二户”。清嘉庆年间直隶省“额内额外牙行一万三千六百二名”。
繁华的都市，自然“万牙云集”。《扬州府志》载“扬、瓜、仪，经济不下万人”。在乡村市集，也开满牙行。据明嘉靖《莱芜县志》，莱芜县全县13个市集，共有牙行208家之多。
甚至在遥远的东北边疆，也遍及牙人的踪迹。在清代的关外的林海雪原中，鄂温克人、鄂伦春人将牙人称为“谙达”，达斡尔人将牙人称为“老客”、“买卖人”。
由于做牙人的利润相当丰厚，所谓“早上没饭吃，晚上有马骑”。在重利的吸引之下，从事牙人的买卖的人各式各样。
肥肉肯定会被官府看上。《明实录》载，不少皇亲国戚“私开牙行，侵渔民利”。还有不少读书人“弃儒从牙”。明末清初的思想家唐甄就做过牙人，并颇为自得，说“吕尚卖饭于孟津，唐甄为牙于吴市，其义一也”。
不过和封建时代的行业的一样，“龙生龙，凤生凤，老鼠儿子会打洞”，大多数牙人是子承父业，家族世代沿袭，所谓“祖父相传，认为世业。有业无业，概行充当”。
每个行业能做到头部富可敌国的也只是少数，大多数牙人也是小本经营。清嘉庆《松江府志》载，小牙人在集市上“晨挂一称于门，候买卖者交集户外，乃为之美恶而交易之”，甚至还有连店铺门面都没有“空手入市”的。
