Mysql
 sql >> Datenbank >  >> RDS >> Mysql

Spring Batch - JdbcCursorItemReader wirft OutOfMemoryError mit großer MySQL-Tabelle

Es gibt ein Problem im MySql-JDBC-Treiber, das dazu führt, dass das gesamte Dataset unabhängig von den Parametern, die Sie an die Anweisungserstellungsmethode übergeben haben, in den Speicher geladen wird. Siehe http://dev. mysql.com/doc/refman/5.0/en/connector-j-reference-implementation-notes.html wie richtig ein Cursor geöffnet wird.

So mache ich es:

<bean class="org.springframework.batch.item.database.JdbcCursorItemReader">
  <property name="verifyCursorPosition" value="false" />
   <property name="dataSource" ref="remoteDataSource" />
   <property name="rowMapper">
     <bean class="org.springframework.jdbc.core.SingleColumnRowMapper" />
   </property>
   <property name="fetchSize">
     <util:constant static-field="java.lang.Integer.MIN_VALUE" />
   </property>
   <property name="sql">
     <value>SELECT foo, bar FROM baz</value>
  </property>
</bean>