不过，“香孩儿”从此就成了赵匡胤的乳名了。
几年后，香孩儿到了读书的年龄，父亲正式给他取名叫赵匡胤。匡者，匡扶、保佑也；胤者，胤嗣、后代也。父亲对儿子确实是寄有厚望的。小匡胤也没有让父亲失望，少年时代，他不但书读得不错，而且同父亲一样，在习武方面也表现出天赋，“学骑射，辄出人上”，几年下来，已是一个弓马娴熟，小有名气的骑手了。
不过，赵家在赵匡胤长大的这十几年中却一步步衰落下来。赵弘殷本是后唐庄宗李存勖所宠爱的战将，自李存勖在兵变中被杀后，他就开始受到冷落。这期间，赵家又添了二男二女，家境也日益艰难起来。可以说，赵匡胤的青少年时代，是随着父亲走南闯北，打工卖艺度过的，从小就看尽了世间的眉高眼低，尝遍了生活的酸甜苦辣。
长时期的江湖漂泊生涯，养成了他喜打架，爱赌博，而且赌输不给，赌赢必要的赖皮性格。好在他生得方面大耳，身高力强，又会一些武艺，凡是与他家发生争斗的，多为败家。945年，赵匡胤结婚成家，当时19岁。成家应当立业，但家中窘迫潦倒的现状告诉赵匡胤，依靠家庭的帮助干一番事业的路子是走不通的。21岁那年，他毅然离家外出，决心在事业上闯荡一番。他先是去投奔几位从前的好友，但世态炎凉，他不但没有从这些有权有势的前辈那里得到关怀和帮助，反而受了不少的白眼和冷遇。
在流浪期间，据说赵匡胤还做了一件千里义送京娘的壮举。京娘是山西永济人，年方十七岁，随父母去曲阳烧香还愿遭劫，幸遇赵匡胤拔刀相救，千里护送，京娘感恩不尽，欲以终身相托。然而赵曰：“贤妹非是俺胶注鼓瑟，本为义气千里相送，今若就私情与那个响马何异？况施恩图报非君子所为。”京娘道：“恩兄高见，妾今生不能补报大德，死当衔环结草。”于是京娘投湖自尽，（后被追封为贞义夫人）京娘湖亦由此得名。
流浪生活是艰苦的，但赵匡胤并没有被压倒，相反，他的意志和性格磨炼得更为坚强，眼界也变得开阔了。期间，他在河南地面因打架闯了祸，官府派人四处捉拿。他先是逃到汉水边的重镇襄阳，住进了一家寺院。寺院的主持是一位年近百岁的老僧，饱经沧桑，阅世知人颇深。他见赵匡胤紫面丰颐，豹头环耳，虽满面风尘却掩不住英俊之气，一身破衣，却不带寒酸之态，心中暗暗称奇，待一交谈，更觉得其气度不凡。他告诉赵匡胤，汉水以南的各个政权比较稳定，而北方却战乱不止，乱世出英雄，所以应该北上，而不应南下。这位老者不但向赵匡胤“厚赠”了金钱，而且还将寺院中惟一的一匹驴送给他，让其骑驴北上。
于是他就偷偷溜过潼关，来到陕西，进入华阴地面。当知道官府捉拿的危险已悄然离去时，他才觉得腹内空虚，四肢无力，实在是一步也挪不动了。可是他怎么也没有想到，华山的陈抟老祖正在华山脚下恭候着他呢。
陈抟老祖，字图南，号扶摇子，毫州真源人，是北宋初年著名的道教学者和道教诗人。他在唐朝长兴年间举进士不第，便发誓不求禄仕，遂隐身山林，以山水为乐。据说他中历梁唐晋汉周五代，每闻换朝改姓，总是愀然不乐，闭门高卧。世间传他一睡经年，其实只是他忧心天下纷扰，百姓受苦，不愿出门。
传说他来华山隐居的路上，碰见一位老者肩挑箩筐，两只箩筐中各坐着一个男孩，当老头从他身边经过时，他大呼一声：“天下由此定矣！”高兴得差点从驴背上掉下来。此后逢人便说，那老头一肩挑了两盘龙。那老头，便是赵匡胤的父亲。
陈抟老祖算好赵匡胤这天要来华山避难，便装扮成一个卖桃老汉，挑着桃筐，拦在华山路口。越匡胤走一步，歇一步，又饥一渴，又困又乏，心里正盼着遇见个卖吃渴的，好吃一个饱哩，谁知瞌睡来了就有人递枕头。他老远望见两筐鲜桃，又红又大，顿时脚上来了劲儿，于是就一鼓作气跑了上去，不问三七二十一，狼吞虎咽地吃起来。不一会，两筐鲜桃便所剩无几。
吃罢桃，赵匡胤将嘴一抹，横下扁担，依着萝筐，倒头便睡，还不时把他那双大臭脚伸进陈抟老祖的怀里。陈抟老祖也不唤醒他，就在一旁悄悄地等着。一直等到日落西山，赵匡胤才醒来。可是他扛起盘龙棍，扭头就走。陈抟老祖连忙拦住说：“你这位壮汉，吃了我的桃，还躺在我的扁担上睡了一觉，睡醒了分文不讨，连个谢字都没有，扭头便走，讲不讲理呀？”
“要钱？要什么钱？多少钱？”赵匡胤从来就不懂得吃了东西还要付钱。陈抟并不生气，仍然心平气和地说：“得了，我看你也付不起，就要你一文钱吧。”赵匡胤一听哈哈大笑，想这老头好生奇怪，两筐桃子才要一文钱，于是慷慨大方地说：“好，一文钱就一文钱。”可是，他在身上摸了半天，连一文钱也没有摸出来，不由羞得面红耳赤。
陈抟老祖一看，一文钱难倒了英雄汉，忙找了个台阶给他下：“没有钱不要紧，只要你陪我下一盘棋，赢了我，就算你付了桃钱。”赵匡胤心想，别的我不会，下棋赌博我可是行家，我不光要赢桃钱，还要让你连家里的桃树都输个精光呢？
头一盘，赵匡胤赢了，他越发得意，硬要来第二盘。陈抟老祖说：“你还了桃钱，也就罢了。天色已晚，我要回家呢。”赵匡胤急忙拉住道：“别忙，老头，下一盘棋我还要赢你家的桃树呢。”陈抟老祖哈哈一笑说：“要是你输了呢？”赵匡胤说：“我就赌这根盘龙棍。”
谁知第二盘还没走几步，赵匡胤就败下阵来。陈抟二话不说扛起盘龙棍直奔华山而去。赵匡胤岂肯认输。跟在后面连喊带叫：“再来一盘，再来一盘！”就这样喊着叫着，等他追上陈抟时，已来到了东峰下棋亭。
此时明月当空，天宇如洗，山空谷静，万籁俱寂，只有清风徐徐吹来，山峦隐隐如黛。赵匡胤从未体味过如此美妙的情景，直觉得身处境外仙天，不由一阵阵如幻如痴。此时老汉已现回陈抟老祖原身，仍是一白发飘髯的老道长。直到他发现坐在石桌对面的已不再是卖桃老汉，而是一位白发飘髯的老道长时，才想起自己是追着卖桃老汉来再杀一盘的。
陈抟老祖指着眼前已摆好的棋盘说：“你追着来是想再赌一局，不知这次用什么作赌注呢？”赵匡胤知老者不是凡人，早已从心里佩服了许多。他知道自己身上空空如也，盘龙棍已输给对方，无论如何，也想不出拿什么作赌注，便又现了赖皮本性，信口开河说：“我赌华山！”
陈抟老祖正等着这句话呢，他当然满口应允，还说：“空口无凭，要写个文约为证。”赵匡胤想，华山又不是我的，输了就输了，立个文约又有何妨。陈抟老祖早就预备好笔墨纸砚，写了文约，还让赵匡胤押了指印，然后才坐下下棋。下了三盘，赵匡胤输了三盘。陈抟老祖高兴地说：“华山真的属我道家了？”赵匡胤却耍赖说：“山是道家的山，树是皇家的树。”陈抟一听此话，连忙跪倒口呼：“谢主龙恩！”赵匡胤不知这位道长为何行起君臣之礼，正想问个明白，陈抟老祖说：“壮汉身有九五之尊，日后便知。”
赵匡胤知自己有天子之位，信口开河输了华山，日后定遭世人谴责，心中悔恨，忙去抢夺文约。不料陈抟老祖轻轻吹一口气，文约就飞过谷涧，贴到棋亭对面三凤山的石壁上去了。据说至今字迹仍依稀可辨。
赵匡胤知自己耍赖不成，就请求陈抟指点迷津，早日成就立国大业。陈抟说：“枢密使郭威正在潼关招兵买马，征集良将，何不去投靠？”听了陈抟的指点，赵匡胤立即下山直奔潼关，随了郭威。
他先是在郭威手下当了一名偏将。当时，后汉名将郭威正拥兵自立，准备取后汉而代之。在战争中，赵匡胤有了英雄用武之地，他作战十分勇敢，能冲锋陷阵，又兼富有智谋，受到郭威的赏识。公元951年，郭威被部下拥立为皇帝，在拥立过程中，赵匡胤出了不少力，因此被提拔为东西班行首，当了一个中级禁军军官，总算有了安身立命之地。他也从此知道了禁军在维护皇帝安全中的作用了。这期间，他尤其对大将柴荣表现得非常忠诚，逐渐取得了柴荣的信任。
954年，周太祖郭威病逝，柴荣即位称帝，是为周世宗。周世宗的即位，为赵匡胤施展才华和抱负创造了极好的条件。这一方面因为赵匡胤是周世宗称帝前的亲信将领，自然会受到重用；另一方面，也是更重要的一点，因为周世宗是一个顺应历史趋势的英明君主，他后来所积极从事的统一中国的事业，为赵匡胤一类有才华的文武大臣提供了用武之地。
周世宗即位后，赵匡胤随之被调到中央禁军任职。同年二月，周世宗刚刚即位，北汉的刘崇便想趁机进攻，觉得周世宗在服孝期间必定不会出兵，于是要求辽（即契丹）派兵相助。辽穆宗派耶律敌鲁去助刘崇，又让杨衮率领一万铁骑兵和奚等部五万人，出兵一起攻打后周。
周世宗不顾冯道的阻拦，决意亲征，赵匡胤随驾出征。三月，两军在高平（今山西高平）展开了激战。杨衮见后周军队军纪严明，提醒刘崇不要轻敌，但刘崇却根本不听，反而出言不逊，杨衮气得领兵闪到一旁观战。
战斗开始不久，北汉军队就占了上风，后周大将樊爱能、何徵畏敌如虎，一见阵势不好，竟临阵逃脱，一时间后周军队阵脚大乱，情形十分危急。此时的赵匡胤却很冷静，在他的建议下，周世宗将身边的禁军分为二部：一部由张永德指挥，抢占制高点，居高临下，以密集的箭矢压住敌人的进攻；另一支由赵匡胤率领，从左翼直扑敌阵。
随后赵匡胤大喊一声，拍马上前，当先冲入敌阵。北汉军队受不住这突如其来的冲击，纷纷败退，后周军士气大振，人人奋力厮杀，终于大获全胜，几乎全歼北汉刘崇的军队。杨衮因为没有参战，领兵返回辽国。
高平之战，后周反败为胜，成为我国历史上一个著名的以少胜多的战例。赵匡胤以高平之战的出色表现受到了周世宗的进一步赏识，给他记了大功一次。战后，他不但被破格提拔为殿前都虞侯，成为后周禁军（皇帝亲军）的高级将领，而且还被委以整顿禁军的重任，深受周世宗柴荣的器重。在赵匡胤亲自主持下，后周禁军完成了汰除老弱、调选精壮和组建殿前司诸军三项工作。
也正是在这次整顿禁军的过程中，赵匡胤开始在军队中形成了自己的势力。他利用主持整顿的机会，将罗彦环、郭延斌、田重进、潘美、米信、张琼、王彦升等自己麾下的“委心”之人安排在殿前司诸军任中基层将领，同时又以自己高级将领的身份，主动与其他中高级将领交结，并同其中的石守信、王审琦、韩重斌、李继勋、刘庆义、刘守忠、刘廷让、王政忠、杨光义结拜为义社十兄弟，形成一个以赵匡胤为核心的势力圈子，开始掌管后周的军事大权。
从显德三年（956）到显德五年（958），周世宗对南唐前后发起过三次进攻，逼迫南唐将江北15州的土地割让给后周。在整个战役中，赵匡胤表现得最为突出，被提升为忠武军节度使兼殿前都指挥使。
自南唐战役以后，赵匡胤处事待物上与以前也大不相同了。以前，他只注重在军队中交结武将，现在对文人也比较重视了。赵普、王仁瞻、楚昭辅、李处耘等人都是在这前后被他罗致在麾下，成为心腹幕僚的。除此之外，他自己也开始留意研读经史，一改从前那种不喜读书的草莽作风。
显德六年（959）三月，后周宰相王朴突发脑溢血而死。赵匡胤平生最怕王朴，几天前，他还被王朴训斥得“唯唯而退”，现在，他终于可以松一口气了。这期间还发生了一件很蹊跷的事。周世宗在文书囊中得到一块木头，上面写着“点检作天子”，当时的殿前都点检是张永德，周世宗就撤了他的职，让赵匡胤当了殿前都点检、检校太傅，执掌禁军。这个职位是禁军的最高首领，和郭威当年在后汉所处的位置是完全一样的。禁军又是后周一支最精锐的部队。
此时，他只有三十岁，后来有人构陷岳飞，就说他说过自己“三十建节，唯本朝太祖如此”，但由此反映出赵匡胤确实年轻有为。
同年六月，周世宗去世，时年三十九岁。这一下，所有可能阻挡赵匡胤称帝作天子的障碍都没有了。形势变化之快，机遇得来之易，连赵匡胤自己也没有料到。
据说：世宗志在�