hadoop - Map Reduce 的 Map 函数可以调用 Amazon Map Reduce 中的(外部)Web 服务吗？

Question

我必须用 Java 编写一个 Map Reduce 作业，在其中我获得了位置(城市、州、国家/地区)，我需要将它们转换为纬度/经度坐标，其详细信息由外部 Web 服务提供: Google Geocoding API - 我的问题是是否允许从 Map Reduce 作业的 Map 函数调用 HTTP 请求，即:

公共(public)类 GeoLocator {

  private static String genderCheck = "female";

  public static class Map extends MapReduceBase implements Mapper {

  // CALL EXTERNAL WEB SERVICE HERE


  }
  ..
}

Answer 1

是的，你可以。映射器在普通 JVM 中运行，并且允许进行远程调用。对访问外部资源的唯一限制将由运行该进程的 EC2 实例的任何安全组强制执行。