meniluca / introducing-hadoop Goto Github PK

Ho definito una classe custom che deve essere la key dell'output di un Mapper.
Mi aspetto che la fase di Shuffle&Sort successiva mi sappia comparare gli oggetti di questo tipo e determinare se sono uguali.
Per fare ciò, ho implementato i vari metodi compareTo, equals e hashCode, sulla falsa riga dell'esempio BigramCount mostrato a lezione.
Ho anche testato in ambiente Java la correttezza di questi metodi.
Una volta eseguito il jar su hadoop, quello che ottengo è semplicemente un sort per chiave (ovvero la mia classe custom) ma nessun raggruppamento.
Qualcuno sa a cosa potrebbe essere dovuto?

Ciao,
ho un piccolo problema dopo aver configurato tutto su VirtualBox (almeno credo di aver seguito tutto alla lettera).

Quando avvio il comando start-all.sh come root, ho come risposta quello che si vede in screenshot, mi viene richiesta la password di root@localhost.
Adesso non capisco (e scusate la noobbagine), se è un problema di chiave ssl oppure c'è qualcosa che non va nella mia configurazione.

Qualche dritta?

Gio

Quanti di voi ci sono riusciti? io sono circa 3 giorni che ci sto provando, ho cambiato anche versione di Eclipse ma continuo ad avere problemi a livello di build path.

Ciao, volevo fare una domanda riguarda una possibile concatenazione di due task Map.
Innanzitutto, è possibile farlo? Se non ho capito male è possibile farlo usando la classe ChainMapper.
Qualora fosse effettivamente possibile, volevo chiederti se dopo ogni Map task viene chiamata in automatico la funzione di Shuffle&Sort implementata da Hadoop
(ES: Map-->S&S-->Map-->S&S-->R)
oppure se questa funzione viene chiamata soltanto una volta, ovvero solo prima di passare i risultati al Reducer.
(ES: Map-->Map-->S&S-->R)

Grazie!