布里亚特人选择不归清朝，是多种复杂因素交织的结果，主要体现在以下几个方面：
1. 文化与宗教差异：
布里亚特人是蒙古人的一支，信奉藏传佛教。而清朝是以汉族文化为主导，信奉儒家思想。两种文化存在巨大差异，难以融合。清朝虽然对少数民族采取了一定的包容政策，但对于宗教信仰的约束却十分严格。布里亚特人担心自己的宗教信仰和传统文化会受到压制和侵蚀，因此选择远离清朝的统治。
2. 自治权丧失：
清朝统一蒙古后，虽然设立了盟旗制度，保留了一定的自治权，但实际上清朝政府对蒙古各部的控制力不断加强。布里亚特人原本生活在西伯利亚南部，拥有相对独立的政治和社会结构。他们担心归顺清朝后，原有的自治权将被剥夺，沦为清朝的臣民，失去自由。
3. 经济利益考量：
布里亚特人主要从事游牧业，对土地和草场有着高度的依赖。清朝统一后，对蒙古地区的资源控制更加严格，布里亚特人的经济利益可能会受到损害。他们担心清朝会征收重税，或者将他们的草场分配给汉族移民，导致他们的生计受到威胁。
4. 担忧被强制编入八旗：
清朝实行八旗制度，将归顺的蒙古人编入八旗，进行军事化管理。布里亚特人担心被强制编入八旗后，会失去原有的游牧生活方式，被迫从事军事活动，成为清朝的战争工具。
5. 俄罗斯的影响：
在清朝与俄罗斯争夺西伯利亚的过程中，布里亚特人处于两大势力的夹缝之中。他们虽然最终选择臣属于清朝，但对俄罗斯的影响力仍然有所顾忌。部分布里亚特人选择不归清朝，也与俄罗斯方面的影响有关，希望通过保持独立来避免卷入中俄之间的冲突。
总而言之，布里亚特人选择不归清朝，是出于对文化宗教差异、自治权丧失、经济利益受损、被强制编入八旗以及俄罗斯影响等多方面的考虑。他们更倾向于保持原有的生活方式和独立地位，而不是成为清朝的臣民。