¿Qué tan rápido es Google App Engine?

Question

Estoy experimentando con GAE durante los últimos 2 meses.

Estoy guardando registros en la tabla grande cargando el archivo CSV.

El tamaño de mi archivo de prueba es de 300 KB.

aquí lo que encontré

sistema local

• Subir tomar menos de 1 segundo
• Proceso 2500 registros en 3 segundos

En Google Sandbox

• La carga tarda de 5 a 7 segundos.

• El archivo de procesamiento da tiempo de espera.

• Solo guarda 60-180 registros.

Mis preguntas son

1. Por qué se tarda demasiado tiempo?
2. ¿Hay alguna manera de reducir este tiempo?
3. Google cuenta este procesamiento para usos de CPU. No revelan h/w, ¿qué CPU usan internamente? Quiero decir, ¿obtengo una CPU euquivalente o superior a PIII?

---

Editado por @Drew Sears 's respuesta.

lo que estoy haciendo en la actualidad

1. cargar el archivo en GAE
2. bytes de datos que se subidos. Por flujo, cuente líneas, guárdelo en una tabla grande.
3. Hay un campo único, identificación, mi registro.
4. Ahora, i Crear cola

int x = linesCount/50;

for(int i<0;i=x;i++) 
{ 
     x = i * 50; 
     Queue queue = QueueFactory.getQueue("test-queue"); 
     queue.add(TaskOptions.Builder.url("/TestQueue") 
       .param("id", id.toString()) 
       .param("startIdx",String.valueOf(x)) 
       .param("totRec",String.valueOf(50)) 
     ); 
    } 

int y = linesCount % 50; 
if(y > 0) 
{ 
    x = (linesCount/50) * 50; 
    Queue queue = QueueFactory.getQueue("test-queue"); 
    queue.add(TaskOptions.Builder.url("/TestQueue") 
      .param("id", id.toString()) 
      .param("startIdx",String.valueOf(x)) 
      .param("totRec",String.valueOf(y)) 
    );      
} 

servlet El procesamiento de tareas de almacenamiento y archivo utilizando el proceso totRec y startIdx el archivo y cerrarlo leer ..

Answer 1

Esto no es realmente una gran manera de probar la escalabilidad de App Engine.

1. Si usted está tomando 7 segundos para publicar 300KB, el cuello de botella es casi seguro que su ancho de banda aguas arriba, aguas abajo, no el ancho de banda de Google, ni nada que ver con App Engine.De forma rutinaria obtengo velocidades de carga mucho más rápidas.
2. Si desea que las solicitudes terminen más rápido, minimice sus llamadas RPC. Cada datastore get, put o query es un viaje de ida y vuelta a un servidor externo. Si está recorriendo cientos de filas y haciendo una puesta dentro de cada iteración de ciclo, estará incurriendo en una cantidad masiva de sobrecarga innecesaria. Guarde todas sus entidades utilizando una ubicación de almacenamiento de datos y obtendrá resultados mucho más rápidos. La AppStats framework de Guido es una gran herramienta para encontrar oportunidades de optimización de RPC.