岛津忠直之所以要掌握小谷地区，主要是因为第三次川中岛合战之中，武田晴信派人奇袭小谷城，直接杀入越后的糸鱼川地区，直接威胁长尾景虎本领。
占尽优势的长尾景虎因为众家臣的劝谏，只是在善光寺平击退武田军后，不得不撤军回国收复越后失地。
岛津忠直自然是记得这一点，才把小谷五人众的领地没收，留下一块飞地，同时他还要派遣自己的家臣进入小谷城为饭森春盛的与力。
不仅是饭森春盛，包括已经投降的渋田见政长和沢渡盛方都会有岛津家的家臣作为与力，他们不仅会监视几家的内政，同时也会参与其家中决策，大概就如大河剧里《女城主直虎》的小野家一般。
尽管岛津家已经基本平定了安雲郡，但在安雲郡最北端靠近越后和越中地方，还有一个历史悠久的名门——割嶽氏。
现任家督割嶽图书介那也是个硬骨头，一直到第四次川中岛合战后才被武田家攻破，虽然忠直敬佩他，但是也不妨碍他统一安雲郡。
岛津忠直派遣浅野忠广前去拜访割嶽图书介，忠广抵达其本据割嶽城，地势极其险峻，上山只有一条崎岖的小路，周围都是灌木丛，荆棘遍地，大规模的兵力无法展开。
待走上去，还可以看到几重隐藏在灌木丛里的堀。因此，割嶽图书介仅以三百余人抵挡武田十年，而不落城。
经过通报后，浅野忠广在割嶽武士的带领下进入城内，拜见割嶽图书介后，浅野忠广表明来意。
割嶽图书介微微皱眉道：“本家在此已有数百年，可从源平时代说起，不管是谁来了，此地皆是我说了算。
哪怕是朝廷封敕的太守还是幕府封敕的守护，本家都可以拒绝他们的命令！此本家几百年来的特权。
何况你家殿下不过是小笠原守护安排的守护代，何德何能，让本家听从号令？若想让本家听令，且拿天子诏书来。”
浅野忠广表情严肃道：“殿下正在集结信州一切力量来对抗武田晴信，而且小笠原守护殿下死在恶贼晴信手中，阁下作为信州国人，难道不应该齐聚在一起，为守护殿下报仇吗？”
割嶽图书介摇头道：“这与本家没有任何关系，没有人可以命令本家，唯有天子诏书可以，至于武田晴信若来，便让他来，本家与自家郎党才不会怕他。”
说罢，割嶽图书介直接起身离去，浅野忠广无奈，只能离去。
割嶽图书介顽固的态度让忠直十分不喜，他冷笑道：“在这信州，我不想见到有脱离我手中的势力！灭了他！”
很快，忠直调集兵马，凑了一千人前去围攻割嶽城，割嶽城易守难攻，不过忠直早已经制定了作战计划。
岛津军以火箭射入满山的灌木丛之中，很快大火遍及整座山头，不过大火距离割嶽城十步处就不得寸进了。
大火烧了一天一夜，附近的势力都可以看到这场大火，到了第二天晚上，出浦盛清带人炸了割嶽城的城墙。
翌日一早，山田五右卫门，小笠原长家等数人领兵攻城。割嶽图书介丝毫不惧，带领麾下郎党三百余人拼死奋战，在死伤百余人后，割嶽图书介被小笠原长家一箭射中肩膀，被家臣拖着退入本丸。
不过本丸城墙再次被炸出一个缺口，割嶽图书介虽拼死奋战，但最终伤重战死，所属三百余郎党尽皆战死，无一人投降。图书介亲眷在橹楼里点火自焚，无一生还。
山田五右卫门看着熊熊烈火，喘着气道：“何其壮烈啊！”
小笠原长家点点头道：“割嶽氏在信州数百年，便是仰仗这险峻地势，才这般桀骜不驯，只是未曾想殿下能攻破此城。图书介死战不降，也是全了这自家名声，不辱没这家门了。”
下午时分，忠直看着素未谋面的割嶽图书介首级，微微摇头道：“何苦如此，落得一个身死族灭的下场。来人，送下去厚葬吧。”