Fernão Eanes de Lima, pertencente à linhagem ou grupo parental dos Limas, originário da Galiza, fixou-se no reino português, no final do século XIV, tendo sido compensado pelo apoio prestado a D. João I com um conjunto de bens e jurisdições na região minhota. Contraiu matrimónio com uma senhora linhagem dos Silva, D. Teresa da Silva, e assegurou a transmissão dos bens que recebeu de juro e herdade a seu filho Álvaro Rodrigues de Lima, que faleceu antes de 1429, sem descendência. Sucedeu-lhe o irmão, Leonel de Lima, que recebeu o título de visconde de Vila Nova de Cerveira, em 1476. A continuidade desta família/Casa foi assegurada pela transmissão do título e de mais bens da Coroa nos quais foram sucedendo os primogénitos varões até à morte do visconde D. Francisco de Lima, em 1578.

A família/Casa dos Limas é iniciada com o fidalgo de origem galega Fernão Eanes de Lima, que contraiu matrimónio com uma senhora linhagem dos Silva, D. Teresa da Silva. Esta foi continuada por Leonel de Lima, que, em 1429, sucedeu a seu irmão mais velho, falecido sem descendência, nos bens da Coroa de que este e o seu pai haviam sido donatários na região minhota. Leonel de Lima contraiu matrimónio com uma senhora descendente das linhagens dos Cunhas e dos Melos, D. Filipa da Cunha. Recebeu o título de visconde de Vila Nova de Cerveira em 1476. Assegurou a transmissão do título e de um conjunto de bens e direitos da Coroa que já haviam sido de seu pai e de outros que recebeu de juro e herdade, nomeadamente a alcaidaria-mor de Ponte de Lima. Estes bens foram sendo transmitidos e acrescentados pelos seus sucessores até à morte do 5.º visconde de Vila Nova de Cerveira, D. Francisco de Lima, em 1578.
Depois da quebra de varonia, a sucessão na Casa veio a ser assegurada, em 1579, por um neto, Lourenço de Lima Brito Nogueira, filho de Luís de Brito Nogueira e de Inês de Lima, filha do falecido visconde.

A família Lima Brito Nogueira dá continuidade às famílias/Casas Brito Nogueira e Lima na pessoa de D. Lourenço Brito Nogueira. Este sucedeu a seu avô no título de visconde de Vila Nova de Cerveira e nos bens da Coroa de que este fora donatário, em 1579, assim como sucedeu a seu pai, Luís de Brito Nogueira, na sua Casa e na administração dos morgadios de S. Lourenço de Lisboa e de Santo Estêvão de Beja, em 1586. A D. Lourenço sucedeu o seu filho D. Diogo de Brito Nogueira no título, em 1646, e nos bens da Coroa e em alguns vínculos da Casa, em 1649.
Esta família/Casa teve continuidade até ao século XIX, embora tenha recebido ao longo do tempo mais apelidos, como o de Vasconcelos e o de Teles da Silva, por meio das alianças matrimoniais estabelecidas. Do mesmo modo, o seu chefe foi elevado,em 1790, ao título de marquês de Ponte de Lima.
Considera-se que a família com os apelidos Lima Brito Nogueira até ao falecimento de D. Diogo de Lima Brito Nogueira em 1686. Na geração seguinte, o sucessor passa a usar igualmente o apelido Vasconcelos, associado aos vínculos que herdou por via materna.