Загрузка данных
 
Логин:   Пароль:      
Регистрация   Забыли пароль?

15 горячих:

Публикации с меткой «Hadoop»

SychВыращиваем слоненка - Hadoop

Вырастили один кластер в Белорусии на 5 машин общим объемом 12 ТБ полет нормальный.

  1. Cluster Summary
  2. 101934 files and directories, 122057 blocks = 223991 total. Heap Size is 69.38 MB / 963 MB (7%)
  3. Configured Capacity     :       11.29 TB
  4. DFS Used        :       5.49 TB
  5. Non DFS Used    :       951.92 GB
  6. DFS Remaining   :       4.87 TB
  7. DFS Used%       :       48.62 %
  8. DFS Remaining%  :       43.14 %
  9. Live Nodes      :       5
  10. Dead Nodes      :       0


Продолжаем вскармливать Киевский ;-)

  1. Cluster Summary
  2. 231847 files and directories, 237951 blocks = 469798 total. Heap Size is 174.31 MB / 963 MB (18%)
  3. Configured Capacity     :       7.93 TB
  4. DFS Used        :       5.8 TB
  5. Non DFS Used    :       1.52 TB
  6. DFS Remaining   :       617.96 GB
  7. DFS Used%       :       73.19 %
  8. DFS Remaining%  :       7.61 %
  9. Live Nodes      :       3
Метки: Hadoop, HDFS
Sych 24 августа 2009 20:34 комментариев: 8
:) 1 :(

Hi-loadСоздаем Hadoop MapReduce приложение на PHP

Hadoop + PHP = Love Сегодня посчастливилось ознакомиться со статьей Майкла Нолла (Michael Noll) о том, как написать распределённое Hadoop приложение на питоне (Python).

Я всегда был большим поклонником распределённой обработки (MapReduce), но, так как в своей работе использую PHP, я подумал, что неплохо бы было портировать этот пример и показать, как можно создавать распределенные приложения на PHP.
Sych 4 ноября 2008 11:09 комментариев: 7
:) 0 :(

Hi-loadЗнакомьтесь - Hadoop

Hadoop Hadoop - распределенная вычислительная платформа, написанная на Java, которая включает в себя компоненты аналогичные Google File System и MapReduse которые позволяют хранить и обрабатывать петабайты данных.
Sych 16 октября 2008 12:54 комментариев: 6
:) 0 :(
© 2008 | О сайте | Инструкции | Обратная связь
© Powered by BigStreet

Работа с БД:
 Время - 0.708
 Запросов - 6
Работа с кэшем:
 Время - 0.0029
 Записей - 1
 Прочтений - 5
Общее время:
 0.7469