|
||||||||||
| 上一个 下一个 | 框架 无框架 | |||||||||
| 使用 GuaguaFileSplit 的软件包 | |
|---|---|
| ml.shifu.guagua | This package contains some common classes for both master and worker. |
| ml.shifu.guagua.io | This package contains guagua own io settings. |
| ml.shifu.guagua.master | This package contains guagua master implementation. |
| ml.shifu.guagua.worker | This package contains guagua worker implementation. |
| ml.shifu.guagua 中 GuaguaFileSplit 的使用 |
|---|
| 类型变量类型为 GuaguaFileSplit 的 ml.shifu.guagua 中的方法参数 | |
|---|---|
void |
GuaguaService.setSplits(List<GuaguaFileSplit> splits)
Assign splits to each worker to make them load that data. |
| ml.shifu.guagua.io 中 GuaguaFileSplit 的使用 |
|---|
| 参数类型为 GuaguaFileSplit 的 ml.shifu.guagua.io 中的方法 | |
|---|---|
void |
GuaguaRecordReader.initialize(GuaguaFileSplit split)
Initialize file split for user to create relative reader instance. |
| ml.shifu.guagua.master 中 GuaguaFileSplit 的使用 |
|---|
| 类型变量类型为 GuaguaFileSplit 的 ml.shifu.guagua.master 中的方法参数 | |
|---|---|
void |
GuaguaMasterService.setSplits(List<GuaguaFileSplit> splits)
|
| ml.shifu.guagua.worker 中 GuaguaFileSplit 的使用 |
|---|
| 返回变量类型为 GuaguaFileSplit 的类型的 ml.shifu.guagua.worker 中的方法 | |
|---|---|
List<GuaguaFileSplit> |
WorkerContext.getFileSplits()
|
List<GuaguaFileSplit> |
GuaguaWorkerService.getSplits()
|
| 参数类型为 GuaguaFileSplit 的 ml.shifu.guagua.worker 中的方法 | |
|---|---|
abstract void |
AbstractWorkerComputable.initRecordReader(GuaguaFileSplit fileSplit)
Each GuaguaFileSplit must be initialized before loading data. |
abstract void |
AbstractCombineWorkerComputable.initRecordReader(GuaguaFileSplit fileSplit)
Each GuaguaFileSplit must be initialized before loading data. |
| 类型变量类型为 GuaguaFileSplit 的 ml.shifu.guagua.worker 中的方法参数 | |
|---|---|
void |
GuaguaWorkerService.setSplits(List<GuaguaFileSplit> splits)
|
| 类型变量类型为 GuaguaFileSplit 的 ml.shifu.guagua.worker 中的构造方法参数 | |
|---|---|
WorkerContext(int totalIteration,
String appId,
Properties props,
String containerId,
List<GuaguaFileSplit> fileSplits,
String masterResultClassName,
String workerResultClassName)
|
|
|
||||||||||
| 上一个 下一个 | 框架 无框架 | |||||||||