597年，大理寺掌固来旷向隋文帝举报说，大理寺执法官吏对囚犯量刑定罪太宽。这个举报并没有多少实质性的内容，无非是说现在对犯罪分子还不够严厉。此时的隋文帝正热衷于严刑峻法，所以来旷立刻得到赏识。来旷一招投石问路见到了成效，当官的欲望迅速膨胀，又一封举报信递了上去，这次直指他的顶头上司赵绰，说他违法释放囚徒。
执法犯法这还得了？隋文帝马上派出了多部门组成的调查组进行彻查，结果纯属子虚乌有。举报不实，而且以下犯上，隋文帝非常愤怒，下令将来旷斩首。
按理说这时最高兴的莫过于赵绰了，可这个时候，第一个站出来反对隋文帝决定的，正是身为受害人的赵绰。他劝谏说，按照法律，来旷构不成死罪。君臣争执起来，隋文帝一怒之下，站起身，一甩袍袖，进后宫去了。
搁一般人身上，看到皇帝动怒，早吓得汗流浃背，回家写检查去了，可赵绰没有一点害怕的样子，让人禀报隋文帝说：“我不再谈来旷的事情，我还有别的事没有来得及奏闻。”隋文帝一听赵绰有服软的迹象，面色也柔和了不少，就让他前来进见。谁知见面后，赵绰禀告说：“我犯了三项死罪：身为大理寺少卿，没能管制约束住属下来旷，使他触犯了朝廷刑律，这是第一；犯罪嫌疑人不当死，而我不能以死相争，没有维护法律权威，这是第二；我本来没有别的事，而以妄言诓骗，求见陛下，这是第三。”
这哪里是服软，简直是不依不饶啊。隋文帝很无奈，好在独孤皇后恰好在座，忙打圆场。
这件事平息不久，君臣二人就发生了第二次交锋，这次交锋的火药味儿更浓。
时任刑部侍郎的辛亶是个官迷。有一天他府上来了个算命先生，说穿红裤子能升官，其实是想蒙俩钱花，可辛亶却深信不疑，第二天他真就穿上一条红裤子上朝了。在肃穆的朝堂之上，辛亶的红裤子分外扎眼，隋文帝很奇怪，问他怎么回事。得知事情原委后，隋文帝的火暴脾气又爆发了，怒斥他说：“官职是天子对臣子的恩赐，做臣子的应该兢兢业业，恪尽职守，才能获得升迁。你想升官想得居然玩起了巫蛊之术，真是天理难容！”随即下令将辛亶推出去斩首。
在大臣吓得都在擦汗时，赵绰上奏道：“依据法律，辛亶不应该定为死罪，我不敢遵旨。”
隋文帝愈加愤怒，盯着赵绰说：“你敢抗旨不遵，我看你是活糊涂了，只知道怜惜辛亶，就不知道怜惜你自己吗？”于是命令左仆射高颖将赵绰拉出去处斩。
赵绰面不改色心不跳，平静地回答说：“陛下可以杀了我，但不能杀辛亶。”说完，自行走到朝堂上，脱下官服等候处斩。过了一会儿，隋文帝派人问赵绰说：“怎么样？你现在改变还来得及。”赵绰回答道：“我一心一意执法，不敢顾惜自己的生命。法律制定后，必须要严格执行，否则就会失去它的威信。我这是为陛下的江山社稷而坚守法令，希望我死后陛下不要忘记我说的话。”
这可真是死不改悔，隋文帝气得再次拂袖而去。过了好久，隋文帝才渐渐平静下来，下令释放了赵绰，也没有杀辛亶。第二天，又向赵绰道了歉，并赏赐给他300匹绸缎以示嘉奖。
不知是皇帝的鼓励起了作用，还是与皇帝斗其乐无穷，赵绰不仅不懂得以皇帝的颜面为重，管的事还越来越多了。
隋文帝曾经颁布命令，严禁使用劣质铜钱，相当于现在禁止使用假币。有一天，有两个人在集市上用劣质铜钱兑换由官府铸造的好钱，被巡逻的武侯逮了个正着。隋文帝得到报告，下令将他们全部处以斩刑。赵绰不知从哪儿得到消息，赶紧跑来进谏说：“这两个人只该判处杖刑，处死他们不合乎法律。”
隋文帝知道他难缠，干脆来个一剑封喉，说：“这不关你的事。”赵绰反驳说：“陛下不认为我愚昧糊涂，任命我为法官，皇上想要胡乱杀人，怎么能不关我的事呢？”
隋文帝料想说理肯定够呛，就来了个侧面迂回，以让赵绰知难而退。他打了个比方，说：“一个人想撼动大树却撼动不了，就应该退下。”赵绰说：“我希望自己能感动苍天，动摇圣意，何况是摇动树木呢？”
隋文帝一看，蚍蜉撼大树，这么经典的一个比喻赵绰没听懂，只好又举了个通俗些的例子：“喝汤的人，如果汤太热就会放下不喝。天子的权威，你也想要触犯吗？”
赵绰一听，马上跪拜后又向前靠近，准备再进言。隋文帝厉声呵斥他，他还是不肯退避，弄得隋文帝很无奈，只好故伎重演，你不走我走，起身回后宫了。不过生气归生气，事后还得按赵绰的意见办。
隋文帝是个开明之君，这些事虽然都让他一时不痛快，但却让他了解了赵绰的诚实正直之心，对他给予了越来越多的信任，常常请他到宫中议事，评议朝政的得失。这种待遇远非给点钱物的赏赐可比，令当时的朝臣羡慕不已。
赵绰的正直，最为可贵之处在于，一把尺子量到底，对权贵尺寸不减，对百姓标准不增，不因面对的是自己的仇人而严厉，也不因面对的是皇帝的威严而软弱。尺度的正直，源自人格的正直，赵绰的强硬，实际是一种做人的风骨。