家康在关原合战结束，担任将军之后，才认真继续去完善江户城和江户的建筑。
小田原之战结束后，家康立刻进了江户城，但仅仅是稍做了修缮，自此之后常常在外。秀吉在世之时，他必须跟在京都、伏见、名护屋（佐贺县）秀吉的身边，后来又待在伏见、大阪，出阵关原合战，一直没有空安顿于江户城。
这回终于动真格地打算要建造江户城了。工程从家康成为将军的翌年开始，筑城用的石材以伊豆为主，此外，和歌山的浅野幸长、姬路的池田辉政、广岛的福岛正则、熊本的加藤清正、山口的毛利辉元、松山的加藤嘉明、德岛的蜂须贺至镇、小仓的细川忠兴、福冈的黑田长政、佐贺的锅岛直茂、高松的生驹一正、高知的山内一丰、洲本（兵库县）的胁坂安治、唐津（佐贺县）的寺泽广高、平户的松浦镇信、原（长崎县）的有马晴信、佐伯（大分县）的毛利高政、府内（大分县）的竹中重利、臼杵（大分县）的稻叶典通、柳川（福冈县）的田中吉政、津（三重县）的高田知信、鹿儿岛的岛津忠恒、饫肥（宫崎县）的伊东佑庆、津山（冈山县）的森忠政等诸大名也从各自本国运来石材。由于大多数采用船运方式，因此在途中遭遇暴风雨而沉的石料运输船就有上百艘之多。
至于出产好的木料的地方，就负责提供木料。日向高锅（宫崎县）的秋月种长、奥州中村（福岛县）的相马利胤等大名担任了这一职责。
这些大名都亲自监督工事。加藤清正等人命令道：“俸禄达一万石者每人必须出两个以上的大石。”现在残留著的皇居的巨大石基就是这些大名运来的。
相信看了以上的阵容，各位也会明白，几乎全国有影响的大名都在家康的安排下加入了江户城的筑城工程，家康的势力已是有目共睹了。江户城工事的完全结束，经历了四十年之久。当然诸大名在这漫长的时期内，让他们的儿子、孙子继续从事筑城的工作。
家康在庆长十（一六○五）年隐退，儿子秀忠成为了将军。隐退后的家康隐居在骏府城，但政治实权还是牢牢握在家康的手中。人们将家康称为大御所。江户城引隅田川之水，灌入内外二壕，这一直保留到现在。城分本丸、西之丸、二之丸和三之丸几座建筑。本丸是将军所居之处，西之丸是世子所居之处。现在的皇居就在西之丸，现在的二重桥则是西之丸的入口。
现在位于大手町的大手门是本丸的正门。除了正门，江户城周围还有三十六道门，由大名们负责警备，这些大门所在之处，被称为“江户三十六见付”，至今还留下“四谷见付”、“赤坂见付”之名。
庆长十二（一六○七）年，壮观的五层天守阁落成，但明历三（一六五七）年毁于火事，那以后一直没有天守阁。
在江户城变得越来越漂亮的同时，江户的町也越来越多，越来越热闹了。首先在江户造了诸大名的公馆，因为大名们必须将自己的妻子作为人质放在江户，再者，因为参勤交代的关系，大名自己也必须时隔一年地住在江户。
为了供给这些德川家的家臣和诸大名的家臣们的生活需要，许多商人和工匠住进了江户，从家康将江户作为居城还不到五十年的时间，市场和剧场等建筑也建起了，町的数量有三百町，人口达到了几十万。
家康为了建造这样大的町，掘神田山之土填海埋沼，造路修桥，挖掘水沟。现在的银座就是当年填海造起的町。这一工事同样也叫齐了诸大名，按每千石一人的比例提供人夫，据说总数达到了一万人。伊达政宗等以黄金二千六百枚、人夫十二万人之力打通了骏府台，那就是现在有名的茶之水。现在像尾张町、加贺町、出云町等町名就是当时从事埋填作业的大名起的。
大名们在江户的工事上花费了莫大的金钱，后来又被分摊到了骏府和名古屋城的工事。家康的目的是使大名们浪费金钱，令他们无法发动战争。
加藤清正等人不断地从事名古屋城的天守阁的建造工作。福岛正则对课役的辛苦发牢骚道：“适可而止吧，饶了我们行不行哪！”
清正听了说：“再多有不满的话，你就只好回国反抗德川家喽！”正则也只得沉默了。各大名们就是这样看家康的脸色行事。连关原之战中在西军方推波助澜的毛利家和岛津家，如今也不得不战战兢兢地派船运送石材，以助工事。
这些大名为了讨得家康的欢心，将妻子作为人质送去江户，是从关原合战之前的藤堂高虎、浅野长政开始的吧。关原合战之后，各大名自然纷纷将人质送往江户，因此江户有了大名公馆、幕府家臣们居住的公馆、一般町民的住家这三类区别。
在町人的町中，商人和工匠们也按照各自职业的种类聚集而居。所以江户可以说是由将军的城为中心，大名的町、武士的町、町人的町而构成的。大致武士的町在山手一带，町人的町在下町。
大名公馆位居贯通江户城东和南壕沟的内河左右，有大名小路之称。相当于现在的千代田区丸之内、日比谷、霞关、永田町等建筑街一带。
人们将江户的急剧发展视为家康的威光，越发对其敬畏不已。被称为隐居的大御所的家康虽然身在骏府，仍然注目著政务。因此诸大名不得不对江户的将军秀忠和骏府的家康两方应付，问候请安，即使这样大名们还是说著是、是，连连磕头。家康和外样大名的浅野、伊达、山内、岛津、毛利、细川、加藤这样的大大名相互之间还嫁女儿收养子，结成亲眷关系，这些大名们领受了家康的旧姓“松平”，还要禁不住谢天谢地。在这样忙得不亦乐乎的活动中，大名们越发被家康拉拢了。
看著家康的威势如日中天，满心欢喜的家康母亲以七十五岁的高龄而终。家康建造了传通院（东京都文京区）作为她的菩提寺（行法事之所），这就是世人所说的传通院夫人。
但即使是诸大名已对家康如此敬畏，这世上仍有家康放不下心的事。
那就是大阪的丰臣秀赖。