倪氏出于曹姓，春秋时封为 国，地在今山东膝县东。历六世，为楚所灭。子孙以国为姓。为避仇，遂改为倪、儿两姓。
上海有倪姓始在唐代，唐咸通二年（861）的亭林宝云寺经幢上，刻有倪弼。宋元时代，江南倪氏聚居于无锡一带。元末，张士诚起兵，欲裹胁无锡名士倪瓒（云林）入其部下，倪瑜先迁松江，继逃人舟中，飘泊于九峰三泖之间。其时，倪瓒家族有迁于今上海陆家浜的，亦有一支由句容移居崇明。明万历间，倪叙由绍兴迁青浦淀山湖边的西岑。清雍正、乾隆间，有倪姓渔民自鄞县出海捕鱼，在今浦东白龙港外海面遇险，脱险上岸后，定居于今浦东新区蔡路乡华星村务农，这是中华人民***和国名誉主席宋庆龄之母倪桂珍一支的来历。这支倪氏原籍安徽桐城，清康熙五十年（1711）因戴名世《南山集》案株连，被迫迁鄞县。今倪氏遍布上海，多集中市区，以及浦东，南汇，崇明，宝山的长兴、横沙，青浦的西岭。据统计，1994年底，全市约有倪姓11.25万人。名列第23位。
上海倪氏有两支颇见特殊，一是陆家浜支，元末明初迁人，到明万历年间，倪爱泉将两个儿子托付给当地王家，遂为王姓，民国时子孙辑有《倪王家乘》；另一是青浦西岑倪家，因科举屡试不第，因其始祖倪允源第4子倪世英为葛家领养，遂用葛姓入试得中，于是倪、葛混姓，民国间修有《倪葛一家谱》。
倪姓名人首推著名书画家倪瓒，其画法画技于后世颇有影响，1992年在无锡曾召开倪瓒研究的国际学术讨论会。大约是家族渊源，倪姓多以书画诗文著世。倪以琮著有《剪烛窗吟稿》、《榆荫丛话》；倪为炳有《盘山图诗话》；倪朱有《虚白书屋诗集》；倪钰有《二如轩诗稿》；倪文德曾集唐人诗句15卷；倪来琛以山水花卉画闻于时，所画莲花，有出污泥而不染的神韵；南汇倪承瓒遍治群经，有《诗经长篇》、《尔雅义指》等10多种，是晚清经学大师；崇明倪康寿是古语音学者，著《古音集成》，影响很大；松江薛山倪蜕，是云南第一部编年史《滇云历年传》的作者。近人中有早期留美学生倪锡纯，他对汉冶萍煤铁矿公司多有建树；宋氏兄弟姐妹的外祖父倪蕴山是上海基督教早期牧师，在浦东很有影响；还有个旧锡业公司总工程师倪桐材。今人中有全国总工会主席、多头钻创始人、全国劳动模范、浦东洋泾倪志福；曾任上海市检察长、浦东张桥倪鸿福；嘉定植棉能手、建国初江苏省劳动模范倪文甫。台湾世华银行总经理倪德明，也是上海倪姓子弟。
与倪姓有关的地名，金山有倪家，南汇有倪桥、倪家仓，浦东有倪家宅等。