使用Savon和Nokogiri在Rails中解析XML SOAP响应的内存不足

Question

我有一个使用SOAP Web服务端点的rails 4 webapp。对于每个公司，发送一个获取资源列表的请求（不管是什么类型，只是信息）。

该方法使用Savon 2发送请求，获取响应并使用Nokogiri解析它以使用xpath处理XML资源。

循环工作很好，直到它试图获得具有大量资源的特定公司，远远超过其他公司。然后，问题来了。我在ubuntu中使用'top'进行监控，当进程开始处理响应时，进程占用RAM内存，直到它杀死rails应用程序。然后内存被释放但webapp下降了。

请在方法中找到示例代码：

# Initializing Savon client
client = Savon.client(wsdl: endpoint, 
                      log_level: :info,
                      log: true,
                      pretty_print_xml: true,
                      open_timeout: 300, 
                      read_timeout: 300)
for company in companies do
  message = {'in0' => USER_ID, 
             'in1' => USERNAME, 
             'in2' => MMK_PASSWORD,
             'in3' => company.id}
  @logger.debug "getResources=1"
  response = client.call(:get_resources, message: message) 
  @logger.debug "getResources=2"               
  resourcesXML = response.to_hash[:get_resources_response][:out]
  @logger.debug "getResources=3"              
  resourcesParsed = Nokogiri::XML(resourcesXML)
  @logger.info "getResources=4"
  resources = resourcesParsed.xpath("//resource")
  @logger.info "getResources=5"

日志显示为“getResources = 3”。然后webapp粉碎了。

您认为最好的方法是什么？ 1.有没有更好的方法来处理这些信息，避免杀死应用程序。 2.也许有办法部分处理答案吗？ 3.这种情况是否有更好的性能工具？ 4.以上都不可能，我只能增加系统的RAM？我有一个4GB的亚马逊AWS实例。