Dès le mois de septembre (1945) le bruit court que le missionnaire ne pourra se maintenir longtemps à Yerkalo ; les anciens propriétaires des terrains vendus à la Mission s’agitent, se liguent, réclament à cor et à eri, gratuitement, les biens que leurs pères ont vendus très cher. Le Père Tornay résiste au chantage, non pas tant pour préserver de maigres revenus que pour ne pas exposer les chrétiens à devoir abandonner des terrains que leur travail a mis en valeur. Dans les premiers jours d’octobre, la lamaserie de Karmda commence l’offensive ; l’économie du jeune Gakhia somme le missionnaire de quitter les lieux et de lui remettre la propriété de la Mission que le Gt de Lhasa lui a octroyée, moyennant finances, Le Père Tornay lui répond qu’il est à Yerkalo par ordre de ses supérieurs et qu’il ne quittera la place que sur leur ordre. Le missionnaire n’avait pas attendu ces alertes pour mettre Mgr Valentin au courant de ce qui se tramait et ce dernier avait intéressé à l’affaire les autorités chinoises, thibétaines et étrangères. C’est sur leur concours et aussi sur la justice de sa cause que le Père Tornay comptait pour résoudre la crise, car seul, que pouvait-il contre une meute déchaînée? Il a dans ses lettres et ses rapports exposé la situation, raconté ses angoisses, ses espoirs. La lutte était par trop inégale et, après quatre mois de luttes, le 25 janvier 1946, le Père Tornay, la mort dans l’âne dut abandonner son troupeau. En quittant ce poste, le seul poste missionnaire en territoire soumis au Gt thibétain, il ne sera pas sans intérêt de résumer l’histoire de sa fondation et de son développement.