Взято от сюда. Если вы хотите в virtualenv, через pip install установить Numpy и Matplotlib, то необходимо вначале поставить в систему:
pip install
Читать ...