Anfügen großer Abfrageergebnisse an vorhandene Tabelle in Java Appengine

Question

Grundsätzlich möchte ich Abfrageergebnisse aus BigQuery an eine vorhandene große Abfragetabelle anhängen, ohne über die Ergebnisse zu iterieren.
Bigquery Ergebnisse sind in List<TableRow>.
BigQuery insertAll() erfordert eine TableDataInsertAllRequest die .setRows() Methode hat aber diese Methode dauert nur List<TableDataInsertAllRequest.Rows> so muss ich die List<TableRow> iterieren aber da ich Ergebnisse mit vielen Zeilen ist dies ineffizient abfragt.

Also, wie konfiguriere ich eine Zieltabelle in der Abfrage?

Answer 1

Google-Unterstützung gab mir die Antwort. Durch die Verwendung einer asynchronen Abfrage kann die Zieltabelle wie folgt eingestellt werden.

JobConfigurationQuery queryConfig = new JobConfigurationQuery().setQuery(<querySql>); 
queryConfig.setDestinationTable(<destination_table>); 
queryConfig.setWriteDisposition("WRITE_APPEND"); 
Job job = new Job().setConfiguration(new JobConfiguration().setQuery(queryConfig)); 

bigquery.jobs().insert(projectId, job).execute(); 

Google-Unterstützung ist genial!

Answer 2

Werfen Sie einen Blick auf configuration.query Eigenschaft Jobs: insert API

Insbesondere - configuration.query.writeDisposition - gibt die Aktion an, die, wenn die Zieltabelle existiert bereits auftritt. In Ihrem Fall sollten Sie verwenden - WRITE_APPEND