Dans cette thèse, plusieurs axes d'études dont le dénominateur commun est l'algèbre différentielle ont été suivis pour mettre en lumière certaines propriétés algébriques des systèmes d'équations différentielles. Dans une partie nous nous sommes interessée à la surdétermination des systèmes d'équations différentielles linéaires ordinaires et avons produit un algorithme permettant de trouver les générateurs d'un tel système. Une autre partie se penche sur la compréhension du support de solutions d'équations différentielles partielles à l'aide d'outils issus de la géométrie tropicale. Dans une troisième partie, nous nous intéressons à l'objet géométrique décrit par l'ensemble des solutions d'une équation différentielle ordinaire et mettons en relation l'existence de composantes singulières essentielles pour l'équation différentielle considérée et la décroissance de la dimension de l'espace tangent de cet objet calculé au voisinage de solutions non dégénérées. En particulier, cette étude implique de se pencher sur la complétion d'anneaux non noethériens ; cette situation et les pathologies afférentes sont par ailleurs au coeur de deux autres parties de cette thèse.