PHP 5.1.x 시스템에서는 phpMyAdmin 2.11.11.3 버전이 동작합니다.
http://sourceforge.net/projects/phpmyadmin/files/phpMyAdmin/
위에 사이트에서 해당 버전을 다운받아 설치해보세요.