distributed-computing
Я пытаюсь смоделировать топологию сети с помощью Titan Graph DB.Я хочу указать топологию из приложения python. У меня есть файл интерфейса java, который использует фреймы tinkertop annotation.An пример структуры приведен ниже. public interface IDeviceObject extends IBaseObject { @JsonProperty("ma...
У меня есть два графических процессора, установленных на двух разных машинах. Я хочу построить кластер, который позволит мне изучить модель Keras, используя два графических процессора вместе. Keras blog показывает два фрагмента кода в разделе распределенного обучения и связывает официальную документацию T...
В классе распределенных систем мы обсуждали алгоритм для создания алгоритма для выполнения многоадресной рассылки, который допускает сбои процесса и все еще гарантирует, что если кто-то получит многоадресную рассылку, все будут точно один раз. Однако этот алгоритм зависит от надежной одноадресной передачи. Е...
Я генерирую следы моих казней с помощью COMPSs 1.4. Я заметил, что некоторые задачи с зависимостями данных среди них перекрываются в файле трассировки. Это не должно быть невозможно. Я также проверил график зависимостей, и они, кажется, правильны. Я установил COMPSs, следуя этой инструкции: Https://stackov...
При проектировании распределенной архитектуры хранения и аналитики используется ли общий шаблон для запуска механизма аналитики на той же машине, что и узлы данных? в частности, имеет ли смысл запускать Spark / Storm непосредственно на узлах Cassandra / HDFS? Я знаю, что MapReduce на HDFS имеет такой шаблон...
Я хочу создать распределенное приложение на JVM, которое имеет несколько узлов, и мне нужна библиотека, которая позволит мне: Управление членством в кластере / сетке, т. е. я хочу получать уведомления об отпуске / присоединении управление сообщениями между членами кластера Я нашел два решения: JGroups...
Всякий раз, когда я запускаю крупномасштабные симуляции Монте-Карло в S-Plus, я всегда заканчиваю тем, что отращиваю бороду, пока жду его завершения. Каковы лучшие приемы для запуска моделирования Монте-Карло в R? Есть ли хорошие примеры выполнения процессов распределенным способом?...
Я начинаю свой выпускной проект по информатике и пытаюсь сделать первые шаги. Для получения более подробной информации вы можете перейти на страницу проекта . Фон: Поскольку у меня очень мало опыта в распределенных системах, я в основном думаю, как я должен решать такую задачу. Я пришел к выводу, что систем...
по данным Learning Spark имейте в виду, что перераспределение данных является довольно дорогостоящей операцией. Spark также имеет оптимизированную версию repartition() под названием coalesce (), которая позволяет избежать перемещения данных, но только если вы уменьшаете количество разделов RDD. одно о...
Я относительно новичок в Кафке. Я немного поэкспериментировал с ним, но несколько вещей мне непонятны в отношении потребительского смещения. Из того, что я понял, когда потребитель запускается, смещение, с которого он начнет чтение, определяется настройкой конфигурации auto.offset.reset (поправьте меня, если ...