Página donde publicaré enlaces al código programado para el desarrollo de este blog.
- JavaHDFSFileSystem.rar: Ejemplo de la utilización del FileSystem para interactuar con HDFS desde aplicaciones Java.
Contiene:
- LocalToHdfs.java
- CreateFileHdfs.java
- ReadFile.java
- DeleteFileHdfs.java
Visto en:
- WordCount.rar: Aplicación simple de demostración del funcionamiento de un programa MapReduce. Contiene dos desarrollos con el código fuente de la new API y de la old API.
Contiene:
- wordcount/WordCountDriver.java
- wordcount/WordCountMapper.java
- wordcount/WordCountReducer.java
- wordcountoldapi/WordCountOldDriver.java
- wordcountoldapi/WordCountOldMapper.java
- wordcountoldapi/WordCountOldReducer.java
Visto en:
- CustomWritableComparable.rar: Ejemplo de la utilización del FileSystem para interactuar con HDFS desde aplicaciones Java.
Contiene:
- PersonaScoreDriver.java
- PersonaScoreMapper.java
- PersonaScoreReducer.java
- PersonaWritableComparable.java
- PersonaWritable.java
- score.txt
Visto en:
-
InputFormats: Ejemplos de distintos tipos de Input Formats que podemos encontrarnos en los programas MapReduce de Hadoop
Contiene:
- keyvalueinputformat:
- TestKeyValueDriver.java
- TestKeyValueMapper.java
- TestKeyValueReducer.java
- multipleinputformat:
- TestKeyValueMapper.java
- TestMultipleDriver.java
- TestMultipleReducer.java
- TestSeqFileMapper.java
- nlineinputformat
- TestNLineDriver.java
- TestNLineMapper.java
- TestNLineReducer.java
- sequencefileasbinaryinputformat
- TestSeqFileAsBinaryDriver.java
- TestSeqFileAsBinaryMapper.java
- sequencefileastextinputformat
- TestSeqFileAsTextDriver.java
- TestSeqFileAsTextReducer.java
- sequencefileinputformat
- TestSeqFileDriver.java
- TestSeqFileMapper.java
Visto en:
- OutputFormats: Los OutputFormats son prácticamente iguales que los InputFormats, así que en este caso sólo he realizado un ejemplo de la utilización del MultipleOutput
Contiene:
- TestMultipleOutputDriver.java
- TestMultipleOutputMapper.java
- TestMultipleOutputReducer.java
Visto en:
-
Partitioner: Aplicación donde muestro un ejemplo del funcionamiento del partitioner
Contiene:
- PersonaScoreDriver.java
- PersonaScoreMapper.java
- PersonaScoreReducer.java
- PersonaScorePartitioner.ajva
- scorePartMezcla.txt
Visto en:
No hay comentarios:
Publicar un comentario
Gracias por dejar vuestras sugerencias, dudas, críticas o comentarios en general