var cnt = $('#container'), // получаем элемент из DON
    newElement = $("<div><h4>New element's content</h4></div>");

cnt.append(newElement);

newElement.empty().remove();

newElement.replaceWith($('<p></p>'));