Es venenoso si te refieres a alguna utilidad. Por lo demás si se trata de eliminarlo tu lo debes decidir.
Pues si quieres eliminarlo te va a costar, entre otras cosas porque supongo que no habrás ido eliminando la piña de semillas cada año por lo que entiendo el terreno lo tienes entero de semillas latentes que te irán saliendo, no de este año sino de muchos años atrás. Trata de eliminar las piñas con las semillas, por lo demás la planta la eliminarás bien con un herbicidad sistémico, creo que el roundup funciona con este vegetal. Otra forma es mecánicamente pero como ya debes saber tiene una raiz muy bien clavada y profunda. Dado que está en un huerto quizás podrías intentar esta última opción (más ecológico) depende del tiempo y esfuerzo que decidas emplear. Animo.
También puedes realizar podas drásticas, dejarlos a un máximo de 50 cm. y si tienes unos troncos majos ponerte en contaco con gente que esté interesada en adquirir prebonsais de Estramonio... yo por ejemplo