The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Spark получил статус первичного проекта Apache "
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Spark получил статус первичного проекта Apache "  +/
Сообщение от opennews (??) on 27-Фев-14, 21:58 
Фонд Apache утвердил (https://blogs.apache.org/foundation/entry/the_apache_softwar...) придание движку для обработки больших объёмов данных Spark (http://spark.apache.org/) статуса первичного проекта Apache. Перевод в разряд первичных проектов произведён после проверки в инкубаторе Apache способности следования принципам разработки и управления, принятым в сообществе Apache и основанным на идеях меритократии. Отныне Apache Spark признан готовым для самостоятельного существования, не требующего дополнительного надзора.


Apache Spark является высокопроизводительным движком для обработки данных, хранящихся в кластере  Hadoop. По сравнению с предоставляемым в Hadoop механизмом MapReduce, Spark обеспечивает в 100 раз более высокую производительность при обработке данных в памяти и 10 раз при размещении данных на дисках. Движок может выполняться на узлах кластера Hadoop как при помощи Hadoop YARN, так и в обособленном режиме. Поддерживается обработка данных в хранилищах HDFS, HBase, Cassandra, Hive и любом формате ввода Hadoop (InputFormat).

Spark может использоваться как в типичных сценариях обработки данных, похожих на MapReduce, так и для реализации специфичных методов, таких как потоковая обработка, SQL, интерактивные и аналитические запросы, решение задач машинного обучения и работа с графами. Приложения для обработки данных могут создаваться на языках Scala, Java и Python. Из компаний использующих Spark отмечаются Alibaba, Cloudera, Databricks, IBM, Intel и Yahoo.

URL: https://blogs.apache.org/foundation/entry/the_apache_softwar...
Новость: https://www.opennet.ru/opennews/art.shtml?num=39208

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по ответам | RSS]

1. "Spark получил статус первичного проекта Apache "  –5 +/
Сообщение от Аноним (??) on 27-Фев-14, 21:58 
насколько ж они там помешаны на яве
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Spark получил статус первичного проекта Apache "  –1 +/
Сообщение от Аноним (??) on 27-Фев-14, 22:14 
Ну не всё же можно на Ruby написать.
Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

3. "Spark получил статус первичного проекта Apache "  –5 +/
Сообщение от бедный буратино (ok) on 27-Фев-14, 22:17 
на ruby можно написать всё. даже небо. даже github.
Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

4. "Spark получил статус первичного проекта Apache "  +13 +/
Сообщение от Аноним (??) on 27-Фев-14, 22:28 
>на ruby можно написать всё. даже небо. даже github.

Даже бедного буратино и бот-генератор случайных фраз. Благо отличий-то...

Ответить | Правка | ^ к родителю #3 | Наверх | Cообщить модератору

5. "Spark получил статус первичного проекта Apache "  +/
Сообщение от facha email on 27-Фев-14, 23:05 
Сколько же их появилось за последнее время. Spark, Presto, Impala, Tez... Глаза разбегаются


Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

6. "Spark получил статус первичного проекта Apache "  –3 +/
Сообщение от бедный буратино (ok) on 27-Фев-14, 23:09 
нее, это вотчина python
Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

7. "Spark получил статус первичного проекта Apache "  +2 +/
Сообщение от asavah (ok) on 27-Фев-14, 23:18 
папакарло буратину кодил на vb
делаем выводы )
Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

8. "Spark получил статус первичного проекта Apache "  +8 +/
Сообщение от Aceler email(ok) on 27-Фев-14, 23:26 
Генератором случайных фраз всю жизнь был perl.

Его таким родили.

Ответить | Правка | ^ к родителю #6 | Наверх | Cообщить модератору

9. "Spark получил статус первичного проекта Apache "  +1 +/
Сообщение от Аноним (??) on 28-Фев-14, 02:04 
> после проверки в инкубаторе Apache способности следования принципам разработки и управления, принятым в сообществе Apache

Прохожих не пугать, лежать смирно, шабаш только в полнолуние в пятницу?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

11. "Spark получил статус первичного проекта Apache "  +1 +/
Сообщение от Аноним (??) on 28-Фев-14, 09:09 
Потом по быстрому модернизировал, перегнав автоматическим конвертором на питон.
Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

12. "Spark получил статус первичного проекта Apache "  +/
Сообщение от бедный буратино (ok) on 28-Фев-14, 09:33 
самты виндузятник! исключительно бейсик спектрумовского разлива

10 LET b="word"

Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

13. "Spark получил статус первичного проекта Apache "  +/
Сообщение от бедный буратино (ok) on 28-Фев-14, 09:34 
> Потом по быстрому модернизировал, перегнав автоматическим конвертором на питон.

не гвидохульствуй!

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

14. "Spark получил статус первичного проекта Apache "  +/
Сообщение от hummermania (ok) on 28-Фев-14, 10:17 
И это только в достаточно узкой нише, а что творится в широко используемом ПО....
Может эта.... как её - информационная сингулярность? Частота смены событий доходит до такой величины, что уже чуть отстал в знании технологий, языков, библиотек или проектов - бесконечно опоздал.
Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

15. "Spark получил статус первичного проекта Apache "  +/
Сообщение от Аноним (??) on 28-Фев-14, 10:19 
20 PRINT b
30 GO TO 10
Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

16. "Spark получил статус первичного проекта Apache "  +/
Сообщение от upyx (??) on 28-Фев-14, 11:24 
Заменил одну ногу на колесо...  и пошло-поехало.
Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

17. "Spark получил статус первичного проекта Apache "  +/
Сообщение от arisu (ok) on 28-Фев-14, 13:56 
> самты виндузятник! исключительно бейсик спектрумовского разлива
> 10 LET b="word"

эта фигня интерпретатором не прожуётся. твоё счастье, что бидон не проверяет синтаксис перед принятием строк, как zx basic: ты бы ни одной программы написать тогда не смог.

Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

18. "Spark получил статус первичного проекта Apache "  +/
Сообщение от arisu (ok) on 28-Фев-14, 13:58 
> уже чуть отстал в знании технологий, языков, библиотек
> или проектов — бесконечно опоздал.

это у быдлокодеров, у них вообще жизнь очень печальная.

Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

19. "Spark получил статус первичного проекта Apache "  –1 +/
Сообщение от Аноним (??) on 28-Фев-14, 22:01 
Ждём наездов от Oracle за использование (TM).
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

20. "Spark получил статус первичного проекта Apache "  +/
Сообщение от бедный буратино (ok) on 02-Мрт-14, 10:57 
Да, помню, как какой-то редкий-редкий кейворд из двух букв найти не мог, перепечатывая программу из книжки. Заменил двумя большими буквами - не прошло. Пришлось искать в красненьких-зелёненьких. Еле нашёл (знатоки сейчас даже скажут, что это был за кейворд) :)
Ответить | Правка | ^ к родителю #17 | Наверх | Cообщить модератору

21. "Spark получил статус первичного проекта Apache "  +/
Сообщение от бедный буратино (ok) on 02-Мрт-14, 11:00 
>> самты виндузятник! исключительно бейсик спектрумовского разлива
>> 10 LET b="word"
> эта фигня интерпретатором не прожуётся. твоё счастье, что бидон не проверяет синтаксис
> перед принятием строк, как zx basic: ты бы ни одной программы
> написать тогда не смог.

да, конечно же b$ :) или, как говорили у нас в стране социализма, b(символ пуза и четырёх ноожек)

Ответить | Правка | ^ к родителю #17 | Наверх | Cообщить модератору

22. "Spark получил статус первичного проекта Apache "  +/
Сообщение от arisu (ok) on 02-Мрт-14, 19:17 
я начинал на msx, там была «черепаха».
Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

23. "Spark получил статус первичного проекта Apache "  +/
Сообщение от Аноним (??) on 05-Мрт-14, 10:34 
Как будто по MS рассказал. В этой области они переплюнули весь остальной мир, вместе взятый.
Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

24. "Spark получил статус первичного проекта Apache "  +/
Сообщение от Аноним (??) on 05-Мрт-14, 10:50 
> не гвидохульствуй!

Найти 10 отличий между кодом на vb и питоне не сможет даже папа карло.

Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору


Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру