11岁时柯尔特被送往格拉斯顿伯里的一个大农场中开始学习,这里的老师为他讲授了当时最先进的科学技术。柯尔特学习了火药的历史,认识了罗伯特·富尔顿(发明了蒸汽轮船的现代轮船之父)。这些发明家给年幼的柯尔特留下来极为深刻的印象,他也希望和这些人一样,将不可能变为可能,制造出一些新的创新发明。在某次与一名军人交谈时,这名军人表示双管步枪成功已大获成功,人类无法制造出可以在一次装弹就可以连续射击多次的步枪。柯尔特在当时就决定自己一定要像其他发明家一样,创造出一种可以连续射击的新式步枪。
16岁时柯尔特前往马萨诸塞州的阿默斯特学院开始学习航海术及其相关的船舶知识,但柯尔特自幼就是一个活跃又具有反叛精神的男孩,他的大学生活也随着一次他用烟火和同学玩耍导致的校园大火而提前结束。好在柯尔特的父亲为他安排登上一条名为科尔沃号的船舶进行更为实际的考察与学习。1830年这艘船进行了近一年的航行,而正是这段航行给了柯尔特灵感来设计未来的新式左轮手枪。
在科尔沃号上柯尔特着迷于船的舵盘,特别是通过使用离合器交替旋转并将其锁定在固定位置的这种机械原理。他觉得这种机械结构可以用于枪械设计,于是在船上他就用木板和金属锁扣制造了这种转动结构的原型。旅途结束后,他回到北美开始了进一步的学习并完善了自己设计。在当时他凭借推销工作的第一桶金,柯尔特得以有资金来完善自己的设计并聘请枪匠来进行试产。
18岁时柯尔特带着自己的左轮手枪试制品前往英国,在英国他取得了左轮手枪的专利,次年柯尔特在美国也取得了专利。取得专利后在父亲的支持下办了公司并生产这种新式手枪。按柯尔特本人的说法他并没有发明左轮手枪,他是在伊丽莎·科利尔所发明的旋转火石步枪基础之上进一步改进,让其结构更加简洁可靠并进一步降低了造价。