Rät man mir davon ab?
Das würde zwar die vorhandenen Treiberkomponenten gegen neuere austauschen, aber dich nicht von alten Konfigurationsresten befreien - modifizierte Konfigurationsdateien werden von der Paketverwaltung beibehalten, so sie denn überhaupt der Paketverwaltung bekannt sind.
Sei dir aber der LTS Enablement Stacks bewusst, dies wird vom Oibaf PPA nicht mitgetragen, es stellt nur Pakete für das Grundsystem zur Verfügung. Dies kann bei einem LTS System eventuell zu Problemen mit den Abhängigkeiten führen - und es sorgt vor allem dafür, dass du die Pakete über ein einfaches Update gar nicht bekommst, wenn du nicht ein Ur-LTS System ohne jegliche nachgelieferten Pakete aus den Stacks hast.
Vielleicht solltest du mal eine saubere Neuinstallation in Betracht ziehen (oder zumindest mal zu schauen, wie ein Live System mit der Hardware läuft), du hast ganz schön viel Zeit damit verbracht am System rumzubasteln - irgendwann ist man schlicht an dem Punkt, wo es schwierig wird das ganze wieder rückgängig zu machen.