据说，米芾喜欢收藏古代名贵字画，收藏的办法却常常采取欺骗手段。他只要打听到谁家有古代字画，就千方百计把它借来，说是观赏，其实是临摹。他可以临摹得和原作一模一样，然后把摹本“归还”给人家，而自己留下真迹。有时把别人的古代书画珍本借来，经过精心临摹之后，故意把真迹和摹本混在一起，让别人选择。因为他临摹得十分逼真，别人常把摹本当真迹收下来。
米芾除了骗取别人的书画珍品外，还采取蛮横的手段去占有。有一次，米芾乘船时遇见了书画收藏者蔡攸（ｙōｕ）。蔡攸把自己收藏的晋代书法家王羲之的真迹给他看。他一看就不肯放手了，一定要用一幅画同蔡攸交换。蔡攸不同意，他就苦苦哀求，纠缠不休，最后竟以投河自尽相威胁。蔡攸无奈，只得同意交换。
对于米芾采取的这种骗取占有别人字画的不正当手段，当时的人就斥之为“巧偷豪夺”。苏轼在《次韵米芾二王书跋尾》中也说：“巧偷豪夺古来有，一笑谁似痴虎头。”（晋朝画家顾恺之，小名虎头。）
“巧取豪夺”这一成语就是从“巧偷豪夺”演变来的。人们常用它来表示以巧妙的手段去骗取，用蛮横的手段去夺取。