因为她当时没有能力抚养孩子，且不知道孩子生父是谁，我们只有口头协议，需要负法律责任吗

我领养了一个男孩，一个小女孩的孩子，因为她当时无法抚养孩子，也不知道孩子的生父是谁，所以她同意我在孩子出生前送我抚养孩子，孩子出生时我就把孩子带走了。我们只有口头协议。如果有人到公安机关起诉我，我需要承担法律责任吗？