未有板刺，无容拜谒
虞世南之父虞荔，生于梁武帝天监三年。姚思廉《陈书•虞荔传》云：虞荔，字山披，会稽馀姚人也。祖权，梁廷尉卿、永嘉太守。父检，平北始兴王谘议参军。荔幼聪敏，有志操。年九岁，随从伯阐候太常陆倕，倕问《五经》凡有十事，荔随问辄应，无有遗失，倕甚异之。又尝诣徵士何胤，时太守衡阳王亦造焉，胤言之于王，王欲见荔，荔辞曰：“未有板刺，无容拜谒。”王以荔有高尚之志，雅相钦重，还郡，即辟为主簿，荔又辞以年小不就。
据本传，可知以下几点信息：1、虞荔祖父虞权，并非只有虞检一子，虞荔从伯虞阐，应为虞检之兄。 2、萧梁时，衡阳王元简任会稽太守，在梁天监三年至天监六年间，即公元504至506年，萧元简造访何胤当在此时，此时虞荔差不多十二三岁，何胤已年过六十。
虞荔出生后（公元504年）的四十多年间，他的仕途和家居生活一直是一帆风顺的，他甚至把他的母亲接到了首都建康居住，以便早晚奉侍。至公元548年底，侯景围建康，虞荔携家眷逃入台城（内城皇宫），被围一百三十多天，直至公元549年3月，侯景攻破台城。此时，建康城内的幸存者只存二三千人。在被围的三个多月时间里，建康城内粮食断绝，出现了人肉相食的惨况，虞荔母亲也在期间卒亡。
台城陷后，虞荔携家眷逃归乡里。公元550年，张彪据会稽，反侯景；公元552年侯景平，梁元帝征虞荔为中书侍郎、贞阳侯，授扬州别驾，不就；公元556年，张彪拒陈武帝霸先，败；陈武帝及文帝致书虞荔（应在公元556年以后，会稽郡已平定）——因陈朝皇帝之迫切，更因为时局似乎在朝着好的方向发展，虞荔乃应命至首都。后高祖崩，文帝嗣位（公元560年），虞荔除太子中庶子，仍侍太子读书，后寻领大著作、东扬扬州二州大中正，庶子如故。
长时间的战乱和奔波，除去母亲的死亡，带给虞荔的伤害其实有限。至少，虞荔能够保证自己和家人最起码的安全和生活条件，在家族内部尽力减少灾难所带来的消极影响。
但是，随后发生的一件大事，最终摧毁了虞荔对于家族的苦心维持。——虞荔之弟虞寄，被张彪部将郑玮劫往福建，后又陷于宝应，滞闽时间长达五六年。兄弟骨肉之情，让虞荔陷于无尽的自责和痛苦之中，他屡次托陈文帝致信宝应，求他放还虞寄，但终不遣。
荔因以感疾，帝数往临视。令荔将家口人省，荔以禁中非私居之所，乞停城外，文帝不许，乃令住于兰台，乘舆再三临问，手敕中使，相望于道。又以荔蔬食积久，非羸疾所堪，乃敕曰：‘能敦布素，乃当为高，卿年事已多，气力稍减，方欲仗委，良须克壮，今给卿鱼肉，不得固从所执也。’荔终不从。天嘉二年卒，时年五十九。”（《陈书•虞荔传》）
究虞荔一生，他的快乐和痛苦，都建筑至性至情的性格上，甚至他早年的名声也是。他因母卒（时困于台城，似为饿死），终身蔬菜布衣不听音乐，至病甚，也不食鱼肉以补充体力；他因弟被困险境，不知生死，因以感疾，直至病亡；他拒绝衡阳王元简，婉约有礼，仅八字而已：未有板刺，无容拜谒。（意谓“尚无资历，不敢拜谒”。板刺者，名刺也，今称名片，指代资历）——虞荔十二三岁之时，就这样内敛又不失高雅，颇有其族祖虞喜的风格。