江马时盛和辉盛虽是父子，可是意见却不相同。时盛对武田信玄宣誓忠诚，而且名实相符的守著领地当武田的部将。时盛还送次子信盛去古府中当人质。可是，长男辉盛与父亲不同，他表面上假装服从武田，背地裏却想与上杉合作。在战国时代，这种表裏不一的行动最为人所忌，结果一定会被灭亡，可是辉盛却不明白这个道理。时盛很讨厌不老实的辉盛，与信玄商量想立次男信盛为後嗣。信玄接纳了时盛的要求，让信盛回神冈，可是信盛说他如果继承江马家，兄长辉盛一定会与他起争执，而他讨厌兄弟相争，因此趁著黑夜偷偷溜出神冈回古府中去了。
信玄体察江马信盛的心情，任他为侍大将，请他加入信玄的本营，并且建议时盛在不得已的情况下从侧室立个养子。事实上，时盛於信玄亡後的天正六年（一五七八），立侧室麻生野直盛的儿子庆盛为养子。
辉盛在越中中地山城得知这件事，於天正六年七月十六日派刺客暗杀父亲时盛，同年八月十九日又杀了养子江马庆盛，於是江马辉盛占据了高原乡，可是江马氏从此明显的衰退了。
天正九年，江马信盛跟随胜赖的军队攻击高天神城，结果战死。江马辉盛想在上杉势力与织田势力的中间地带生存，结果也於天正十年在与邻国三木自纲作战时败北。至此，江马氏实质上已经灭亡了。
这些都是以後的事，在元龟三年（一五七二）时，时盛和辉盛父子的感情还没有造成这种悲剧。
江马时盛很在意儿子辉盛与上杉谦信私通的事被信玄起了疑心，几次派使者去中地山城叱责辉盛，一方面又派使者去古府中。
（我的儿子辉盛不会做这种事，这一定是敌人上杉的谋略，故意宣称辉盛与上杉私通。）
时盛辩解著，可是内心则为辉盛的无情叹息。
这时，信玄派使者送信来了，大意是说江马辉盛和上杉私通的证据很明显，因此派木曾众去你那里调查事实，如果你有什么委屈，就对木曾众的大将说好了。
信玄看穿了江马辉盛的心，他知道辉盛确实私通上杉，可是要攻打江马辉盛，就必须派兵去越中不可。那么，前锋一定要由江马时盛来担任。这种同族作战双方都会厌恶，而且也很难以武力完全镇压。如果想完全镇压，只靠木曾众则嫌不足，必须再派更多大军。可是信玄认为西上才是大事，现在不是白白耗损一兵一卒的时候，因此，这一回让木曾众进入奥飞騨，不是为了战争，而是对中地山城主江马辉盛示威。
信玄把他的意思吩咐木曾众，指示内室近习曾根内匠当军监，所谓军监，即军队的监督，任务是陪在信玄的代理人山村三郎九郎良侯的身旁，看他们战争的方法，必要时也帮忙出主意，并且事後要向信玄报告结果。
对山村父子而言，这个军监是个恐怖的存在。曾根内匠是信玄内室的近习，换成现在的职务就是参谋本部将校。有这样的人跟在身旁，就不能随意做事，甚至於在这种时候乾脆什么事都向曾根内匠询问一下比较不会有事。
「江马时盛公出来到苎生茂城迎接，表示他很重视这件事。」
山村良利说著，看曾根内匠的脸一眼。江马时盛是奥飞騨与越中一郡的领主，他亲自到最前线的城堡迎接，是对木曾众表示最高的敬意。山村良利不知要不要接纳对方无条件欢迎木曾众的好意，在这种时候，考虑对方的立场，给对方面子之後会有很多麻烦，因此产生了难题。
但是曾根内匠不理会山村良利询问的眼光，他这种假装不知道的态度，更使山村良利困扰。不过，山村良利只梢梢想了一下，就马上做了个适切的回答了。山村良利对儿子良侯说：
「你率十骑去苎生茂城见江马时盛公，传达感谢他出迎的好意，但是我军经过长途跋涉，实在很疲倦了，因此，今天无法抵达神冈城，还是请他回神冈城等我军抵达就好了。」
这些话表示他感谢江马时盛的出迎，而请时盛在本城等他们到来，是尊重江马时盛的面子。
山村良利对儿子这么说後，再度看曾根内匠一眼，内匠依旧装做没有看见。
山村良利快马加鞭的去到了苎生茂城，对江马时盛转达了父亲山村良利的话，江马时盛深深感谢著，就回神冈城的公馆去了。
高原川是由东流向北西，愈向北，川面就愈宽，属於川的流域内的田地也逐渐增加，不过还不算很宽阔。这附近的情形和木曾川周围仅有一些农地的情形很相似，木曾众认为这和自己的故乡相似。
木曾众沿著高原川一直下来，来到岩井户，这里有第二个山城天元城，附近的耕地稍广。从岩井户下来半里左右，有双六川流进高原川，这里的川面就变宽了。沿双六川上溯一里左右有尻高城，这也是个山城。天元城与尻高城的城主都出来迎接木曾众。
木曾众再下到麻生野的杏子城，在这里住宿一晚。杏子城也是个山城，没有很多住宿的地方，因此木曾众分宿到农家，有的则在野外搭营帐。
杏子城距神冈城有一里。
江马氏以神冈城为中心，在一里以内的地方设洞城、八幡山城、政元城、寺林城、杏子城、鬼城、诹访城、伞松城等。这些城全都是守护神冈城的山城。
曾根内匠看著那些山城里纷纷来打招呼的城主等人的脸，心理想著这个奥飞騨的防备至少落後了二、三十年。
每隔一里设置一个城堡来防御战争的思想已经太古老了，因为武田信玄的军队之所以席卷信州，就是因为信浓的领主们想以小城堡为据点来作战。这种山城和山寨根本就无法防御大军，因此要建城时应该尽量建大城，至少要建个可以维持数十天的城，否则就没有意义了，现在已经到了这个时代，至少一郡都要有一个城。信玄在甲斐国内没有设置城，可是在信浓和上野及骏河都分别设置城堡，每一个城都能容纳一千或二千的兵力。
（即使如此，江马时盛只统治三千石左右的高原乡，为什么可以拥有这些城寨呢？）
三千石所领的话，大概可以拥有三至四个城寨，可是他设置了十二个，并且分别派有城主及家臣，这是一件很不容易的事情。
（他是接受越中的援助吗？）
曾根内匠这么想著，但马上否定了这个想法。永禄八年江马父子担任武田军的先锋，侵入越中的新川郡，占领了约五万石的领地。而且自从江马辉盛进入中地山城以来，时盛与辉盛虽为父子，感情却不怎么亲密，辉盛也没有想过要送钱给父亲，而且这些城寨都是以前就有的了。
（大概真的如大家所传说的，江马时盛除了三千石领地之外，还拥有相当於数万石的矿山吧？这个谜底马上可以揭晓了。）
曾根内匠这么想著。
翌晨，山村良利、山村良侯父子与曾根内匠三个人去神冈城见江马时盛。神冈城是在可俯看高原乡的台地之上，相当坚固。
「让您跑这么远真不好意思，有关辉盛的事，就如同我在信上所说的，他不会有二心的。」
时盛很快的开始替辉盛辩解。
「现在辉盛如何了？」山村良利说，他是想问辉盛为什么不亲自到这儿来辩解。
「因为越中呈现不太稳的状态，因此他不能离开城。」
时盛详细的说明了不稳的状态，主要是心向著上杉的越中势力正窥伺著中地山城。心向上杉的人是椎名康胤，如果他想向辉盛夺回旧地，当然会想出一些策略。因此辉盛不能把城交给部下而来高原乡。
「既然这样，只好由我们去中地山城了。」
山村良利说。这是个具威力的询问，如果辉盛集合了二千的兵在中地山城，当木曾众进城时，一定会发生会战。而时盛就必须当木曾众的先锋与儿子辉盛作战了。
时盛面露困惑的表情。
「希望您给我两三天的余裕，我派人快马加鞭的去叫辉盛来。」
从高原乡到中地山城一共有九里山道，不过，虽说是九里，中途有飞騨与越中的分界山。而时序虽已进入春天，峠道所积的残雪还很深。
「那么，我们就等两、三天吧！这其间我有一个要求，请让我们看看高原乡的矿山。」
山村良利夸张的对曾根内匠说。
「矿山？」
时盛马上变了脸色，因为他最不想让别人看的就是矿山。高原乡是沿著高原川的狭窄土地，境内几乎没有耕地可言。江马一族在这谷间建筑了总共十多个城寨，频频向邻国挑衅。他的原动力就是矿山，从矿山所获得的收入，使得江马党称霸奥飞騨。信玄从以前就一直在注意这矿山的事。
（你好好调查一下高原乡的矿山。）
曾根内匠由信玄这一句话而体察他的心意。被称为武田金柜的黑川金山的金子似乎已经用到底了，而当初侵入骏河所占领的安倍金山虽然还出产金子，可是富士金山似乎也已经到底了。武田要发动大军西上，一定需要多量的金子；西上要成功，也一定需要金子，而要统一天下，不知还需要多少金子。信玄因此下令曾根内匠去调查高原乡的矿山，如果高原乡的矿山是富矿的话，他想派遣专家用近代的方法进行矿石的采取与精炼。
「请一定带我参观矿山。」
山村良利再度的说，时盛无法拒绝。
「我们会带领您去参观，可是那真的是荒废的矿山……」
山村良利听了，故意不在意的说：
「时盛公，我从安倍金山带了对矿山很熟悉的人来，如果有什么问题可以发问吧？」
说著，就让安倍金山奉行、安倍加贺守天实、山师丹波弥十郎、测量师百川常陆以及精炼师大藏藤十郎（后来的大久保长安）等见时盛。
江马时盛在高原乡有好几个矿山，可是并没有正式采掘，都是用从前原始的方法来经营矿山的，因此看到武田家来了这么多矿山权威，觉得很震惊。
（高原乡的矿山是我们祖先代代传下来的，把这个交给别人，等於是国家被夺一样。）
江马时盛突然想到这个问题，他认为信玄早晚会向他要矿山的。
军监曾根内匠看到时盛眉间皱了起来，就说：
「江马时盛公，你不必担心，高原乡毕竟是江马公的领地，即使这块地有几百万的金子，武田家也无意横刀夺爱。只不过如果有金银却不去挖掘，实在太可惜了，因此我家主人说要把武田家的技术借给你们，这一点你明白吧？」
曾根内匠这一句「你明白吧」有如磐石般的沉重，等於是不让对方拒绝的意思。
「我明白了，请随您的意进行吧！」
时盛觉得被压迫得透不过气来，现在已经无法拒绝，只好由对方的意了。
这一天马上开始视察矿山，从古府中来的矿山专家们纷纷拿出测定器具和测量簿，跟随在带路人的後面。
时盛时代所挖掘的矿山，主要是和佐保银山、茂住银山，其他试掘的有平汤金山、天生金山、藏柱金山。专家调查得很详细，挖掘出来的矿石被整理成样本。
经过了三天的调查，还是没有调查完毕。
「约定的三天期限已经到了，却不见辉盛公来，是怎么回事呢？」山村良利责备时盛。
「请再等两天，我一定叫辉盛来。」
时盛要求著，可是山村良利主张说，既已违约，乾脆率大军越过国境去中地山城，军监曾根内匠也支持他的意见。本来这一回只是示威，可是由於辉盛的作法，不得不战了。
木曾众与江马众分别留下一百名兵来护卫调查矿山的人。江马时盛所率领的千名左右兵士走在前头，後面跟著两千名木曾兵，总共三千名军兵朝越中的国境迈进。
高谷点彦著的《中世江马氏的研究》记载当时高原乡通往新川郡的道路情形：
中地山城与高原乡的交通路径，主要是靠沿著常愿寺川上流和田川、经过有峰通往山之村的街道。
用现在的地图来看这些道路，在从神冈沿著高原川往北下十公里左右的地方，与从东边流过来的迹津川会合。沿著迹津山东上，有山之村。从前有道路由此越过国境通往有峰。或许不越过现在成为汽车道路的大多和峠，而越过稭稍东边的山峠也不一定。不管怎么样，由於飞騨与越中的国境山岳大多在一千公尺以上（大多和峠一三零七公尺），因此大军要越过并不那么容易。
木曾众以高原众为先锋，朝越中的国境前进。来到山之村时，看见国境的各山上都有雪。从山上吹下来的风很冷，不过不像从奥飞騨到越中时的积雪那么深。一想到要越过那个积雪山峠，就令人毛骨悚然。
他们在山之村住一晚，天亮时才向国境出发。这时有一骑快马加鞭的自大军後面追过来。
「三木自纲公来侵略了，三木公举旗了……」
他一面叫著，一面寻找主人江马时盛。
大军听到三木自纲举旗（武力侵略），马上停止移动。一般而言，如果不是情况很紧急，不会由骑马武士边跑边报告情况，通常都会找到大将直接向他禀告。
「什么？三木自纲举旗了？」
江马时盛问骑快马过来的武士。
「今天早晨去平汤金山调查的一行人被三木自纲的伏兵包围了。木曾众与高原众合力防守，真是苦战。我总算挣脱了敌人的重围，去苎生茂城、天元城、杏子城告急，然後就来这里了。」
他一口气说到这里就再也说下下去了，因为他气喘如牛。
接著又有两名骑士赶来。一个是木曾众，看来他是与敌人厮杀过了，脸和腿都受了伤。
「敌兵一共五百名，带著十梃洋枪，包围住退到平汤金山後山、重新布阵的我方。敌人似乎一直在增加兵力似的。」
山村良利接获了这个报告，就对军监曾根内匠说：
「我们退兵去与三木军作战，这样好吧？」
没什么好不好，总不能眼看著我方陷入苦战，还强行去越中。
「快，别说是一小时，就是半小时也很重要。」曾根内匠说。
命令很快传达下去，从木曾众当中选出二十骑来，不过十骑江马党比这二十骑早一步奔向平汤。
所谓十骑江马党，是�