Cargas muy grandes con PHP

Question

Quiero permitir cargas de archivos muy grandes en nuestra aplicación PHP (cientos de megas - 8 gigas). Sin embargo, hay un par de problemas con esto.

Navegador:

• archivos HTML tienen retroalimentación de basura, tenemos que cualquiera sondeo para el progreso (que es un poco tonto) o mostrar ninguna reacción en absoluto
• Flash Uploader pone archivo en la memoria antes de comenzar la carga

servidor:

• PHP nos obliga a establecer post_max_size, w que podría resultar en un ataque de DOS fácilmente explotable. Me gustaría no establecer esta configuración globalmente.
• El servidor también requiere que haya otras variables en los valores POST, como una clave secreta. Nos gustaría poder rechazar la solicitud de inmediato, en lugar de después de cargar todo el archivo.

Requisitos:

• HTTP es una necesidad.
• Soy flexible con la tecnología del lado del cliente, siempre que funcione en un navegador.
• PHP no es un requisito, si hay alguna otra tecnología que funcione bien en un entorno Linux, eso está perfectamente bien.

Answer 1

¿Qué tal un applet de Java? Así es como tuvimos que hacerlo en una empresa para la que trabajé anteriormente. Sé que los applets apestan, especialmente en este día y edad, con todas nuestras opciones disponibles, pero en realidad son la solución más versátil para los problemas de escritorio que se encuentran en el desarrollo web. Solo algo a considerar.

Answer 2

¿Ha considerado utilizar APC para verificar el progreso y el tamaño total del archivo? Aquí hay un good blog post al respecto. Podría ayudar.

Answer 3

Tal vez usted podría utilizar Webdav y Javascript en su navegador

AJAX Archivo grande de carga, con el progreso, a WebDAV

http://www.webdavsystem.com/ajax/programming/upload_progress

Una biblioteca simple

http://debris.demon.nl/projects/davclient.js/doc/README.html

A continuación, puede obtener el JS para redirigir al usuario a una página de éxito. Las claves secretas y lo que no se pueden manejar en un preludio de PHP antes de entregar el cliente JS-> WebDAV

Answer 4

Puede establecer el tamaño de la pos_max para sólo las secuencias de comandos en 1 directorio. Coloque allí su script de carga y permita que solo ese script maneje tamaños grandes. Todavía es posible que ese script sea atacado con archivos grandes/inútiles, pero evita establecerlo globalmente.

uso que con APC y que podría ser capaz de averiguar algo bueno: IBM Developer works article on APC

Answer 5

Me gustaría ver en FTP, SSH or SCP esto le permite cargar un archivo grande y aún así tener control de acceso sobre el archivo también. Esto podría demorar un poco más en implementarse, pero es probablemente la manera más segura en la que podría pensar.

Answer 6

sé que aspira a añadir otra dependencia, pero en mi experiencia, la mayoría de los sitios web que están haciendo algo como esto están utilizando flash en el lado del cliente, y la posibilidad de subir el archivo grande como trozos

de adobe como howto on flash file uploads

también encontré este tutorial sobre CodeProject:

Multiple File Upload With Progress Bar Using Flash and ASP.NET

PS - sé que estás usando PHP y no NET, pensé que la parte importante era el flash;)

Answer 7

Python Handler?

Uso de un controlador POST de Python en lugar de PHP. Genere un identificador único de su aplicación PHP que el cliente pueda colocar en los encabezados HTTP. Con mod_python para rechazar o aceptar la carga grande antes de que se transmita todo el cuerpo POST.

creo http://www.modpython.org/live/current/doc-html/dir-handlers-hph.html

Permite comprobar cabeceras y rechaza el resto de la entrada de la POST. No lo he intentado pero ¿podría ser el camino correcto?

Al observar el origen de mod_python, el almacenamiento en búfer de la entrada a través de read() parece permitir la evaluación bit a la vez de la entrada HTTP. Los encabezados son lo primero.

https://svn.apache.org/repos/asf/quetzalcoatl/mod_python/trunk/src/filterobject.c

Answer 8

upload_max_filesize se puede ajustar on a per-directory basis; lo mismo vale para post_max_size

ej .:

<Directory /uploadpath/> 
    php_value upload_max_filesize 10G 
    php_value post_max_size 10G 
</IfModule> 

Answer 9

que he tenido éxito con uploadify, y lo recomendaría. Es una secuencia de comandos jQuery/Flash que maneja grandes cargas, y puede pasarle parámetros adicionales (como la clave secreta). Para resolver los problemas del lado del servidor, simplemente use el siguiente código. Los cambios surtan efecto sólo para la secuencia de comandos que se llaman en:

//Check to see if the key is there 
if(!isset($_POST['secret_key']) || !isValid($_POST['secret_key'])) 
{ 
    exit("Invalid request"); 
} 
function isValid($key) 
{ 
    //Put your validation code here. 
} 

//This line changes the timeout. 
//Give it a value in seconds (3600 = 1 hour) 
set_time_limit(3600); 

//Set these amounts to whatever you need. 
ini_set("post_max_size","8192M"); 
ini_set("upload_max_filesize","8192M"); 

//Generally speaking, the memory_limit should be higher 
//than your post size. So make sure that's right too. 
ini_set("memory_limit","8200M"); 

EDITAR En respuesta a tu comentario:

Teniendo en cuenta lo que has dicho, me temo que no puede ser capaz para cumplir con sus requisitos a través de http. Todas las soluciones disponibles son códigos que agregan funciones a http para las que nunca se diseñaron.

Como dijo usted mismo, es un protocolo simple. Además de escribir su propio software de cliente que se ejecuta fuera del navegador, un applet de Java o usar un protocolo diferente (como FTP, que fue diseñado para esto), es posible que no obtenga lo que desea.

He hecho lo mejor que pude dentro de las limitaciones dadas. Lo siento, no pude hacerlo mejor.

Answer 10

Probamos todo esto ... esto es, con mucho, el mejor que he utilizado todavía ...

http://www.uploadify.com/

Answer 11

Tome un vistazo a jumploader.com

Un buen java-applet para subir.

Lo he usado para subir imágenes y funciona bien. No he intentado con archivos más grandes que 10MB, pero también debería trabajar para archivos realmente grandes.

Answer 12

Es viejo, lo sé, pero tal vez alguien también tenga este problema hoy en día. Ahora puede hacer esto solo con Javascript y, por ejemplo, PHP. No se requiere Flash o Java en el lado del cliente.

demo: http://dnduploader.filkor.org/

La idea es cortar los archivos con una rodaja de Blob Javascript método() ...

Answer 13

Prueba esto: http://www.simple2ftp.com utiliza un applet de Java FTP basado desde dentro de una envoltura de aplicación PHP inteligente.