卫率，又因洪州总管郭衍，亦曾与其谋划夺嫡，于是召为左监门率。
隋文帝杨坚又移废太子杨勇至东宫，锢置幽室，令杨广管束。
很多大臣都认为杨勇罪不至被废，而且废立太子是大事，但隋文帝不听。
杨勇也自认罪不至被废，屡屡要求面见隋文帝，想要告诉隋文帝有关自己的冤屈，但都被皇太子杨广给拦下，无法达成他的心愿。情急之下，杨勇爬到树上，大声呼喊隋文帝，希望隋文帝听见后可以见他一面。
杨广为了彻底铲除杨勇，于是和杨素商量对策。杨素于是趁机向隋文帝进谗言说：“杨勇已经心神丧失了，被妖魔附身，魂都收不回来了。”
隋文帝杨坚闻言，也这么觉得，因此杨勇终究无法与隋文帝见到面。
杨勇遂如罪犯一般，不许自由。从此九重远隔，永不得见天日了。
先是隋文帝攻克陈朝，天下多想望太平，监察御史房彦谦，私语亲友道：“主上忌刻苛酷，太子卑弱，诸王擅权，天下虽得暂安，不久必生祸乱。”
房彦谦之子房玄龄，亦秘密对乃父说道：“主上本无功德，徒用诈术取天下，诸子又皆骄奢不仁，将来必自相诛夷，危亡即不远了。”
当初开皇初年的时候（公元581年），沛国公郑译等人重定乐律，制黄钟调。
万宝常虽然只是一个艺人，郑译等人也常常叫他来一起商量，但他的主张大多不被采纳。后来，郑译的乐曲编成，上奏到隋文帝之处，皇帝杨坚召见万宝常，问他这些乐曲是否可行。
万宝常说：“这是亡国之音，陛下您不应听这种声调！”
隋文帝听后，感到很不高兴。
万宝常就极力说明这种声调表现了哀怨、淫邪、放肆的情绪，不是庄重的雅音，请求用水尺为准，来调正乐器声调。隋文帝采纳了他的意见。万宝常得到皇帝杨坚的命令后便制造各种乐器，乐器的声调都比郑译等人所定的调值降了两个调。
同时，他还撰写了《乐谱》六十四卷，全面论述八种音高可以递相为基调的规律，以及音调调整的变化。总括起来，共有八十四调，一百四十四律，能变化出一千八百声调。
当时的人认为，《周礼》一书记载了八种音高可以递相为基调的说法，但是从汉、魏以来，历代音乐家都弄不懂，见到万宝常对此记载的创解，都嗤之以鼻。到这时，皇帝让他试奏，简直是应手成曲，在场的人，莫不惊异赞叹。于是经他淘汰、创制、改进的乐器数不胜数；但这些乐器的音色淡雅，当时人不喜欢，音乐官署太常寺里的音乐家多数人持排挤、诋毁的态度。
太子洗马苏夔以擅长音律自命不凡，尤其嫉妒万宝常。
苏夔的父奈苏威有权有势，因此凡是谈论乐律的人，都附合苏夔，而说万宝常的坏话。
万宝常多次到达官贵人们那里诉苦，苏夔因此责问万宝常，问他的音律理论从哪里学来的。
有一个和尚对万宝常说：“皇帝平素喜欢祥瑞征兆的音乐，有说到祥瑞征兆的，皇帝都很高兴。先生您应该说您的乐律理论是从外族僧人那里学来的，并说这是佛门菩萨亲身所传，那么皇帝心里会喜欢的。这样，你所作的乐律就可以推行了。”
万宝常认为这样说对，就按和尚教的那样来回答苏威。
苏威听了，勃然大怒，说道：“外族僧人所传授的，是四周蛮夷的音乐，不应该在中原地区推行。”
这事最后还是被搁置下来。
万宝常曾经听太常寺演奏的乐曲，听完之后，流泪哭泣。
人们问他为什么哭，万宝常说：”这乐声淫厉而悲哀，预示着天下不久将自相残杀，并且人也要差不多被杀光。”
万宝常家里很穷，没有儿子，他的妻子乘他卧病在床，