You are viewing an old version of this page. View the current version.

Compare with Current View Page History

« Previous Version 146 Next »

장애처리에 유연하고 고성능 분산처리 개발 개념을 익히기위해 AKKA를 선택하여 학습중에 있으며

샘플코드는(C#) 특정 플래폼에 한정적이지만, 분산개발환경을 위한 개발 패턴은 개발언어/플래폼등에 종속적이지 않는것으로

분산처리 개발환경에 필요한 지식들을 배우는것을 우선으로 자료정리중에있습니다.


*ACTOR 장점 : JAVA와 C#에서 모델과 개발패턴을 공유하여 비슷한수준의  개발이 가능해진다.  그림:순수 이기종 통신 지원 Jnbridge.com 에서 발췌


Akka

Akka는 오픈 소스 툴킷으로 동시성과 분산 애플리케이션을 단순화하는 런타임이다.  

동시성을 위한 여러 프로그래밍 모델을 지원하며, Erlang으로부터 영향을 받아 actor기반의 동시성이 두드러진다.

Akka는 Java환경및 .net Framework에서 이용가능하다. 


분산처리관련 동일한 목표를 가진 녀석들


지원 범위및 컨셉이 비슷하여, 한가지만 잘 배워두면 접근하기 용이한 툴킷

Akka : http://akka.io/ -Akka 원조(Scala언어에 특화,JAVA언어에서도 동일하게 사용가능)

Vert.x : http://vertx.io/ -유사한 Actor모델

Erlang : https://www.erlang.org/ - Actor의 원조

Kafka : https://kafka.apache.org/ -Apache 지원

Orleans : https://dotnet.github.io/orleans/ - Actor MS지원 (microsoft 네임스페이스에포함,차기 닷넷프레임워크에 포함가능성)

그외 기타 정보

외국블로그 : http://blog.takipi.com/async-goes-mainstream-7-reactive-programming-tools-you-must-know/

파이썬 : https://github.com/jodal/pykka/tree/master ( 파이선에서도 AKKA 액터모델 사용가능 하며 동시처리를 위한 로컬 액터만 지원 )

파이 아카 테스트 
import pykka
import time


class Greeter(pykka.ThreadingActor):
    def __init__(self, greeting='Hi there!'):
        super(Greeter, self).__init__()
        self.greeting = greeting
    def on_receive(self, message):
        print(self.greeting)

# 미국인 액터와, 한국인 액터를 만든다.
actor_ref = Greeter.start(greeting='Hi you!')
actor_korref = Greeter.start(greeting='안녕하세요')


# 각각에게 인사를 한다.  -결과를 기다리는 순차처리
answer = actor_ref.ask({'msg': 'Hi?'}, timeout=3)
answer = actor_korref.ask({'msg': '안녕?'}, timeout=3)

# 동시에 인사를한다. -동시성처리
actor_ref.tell({'msg': 'Hi?'} )
actor_korref.tell({'msg': '안녕?'} )


#수행 결과 : AKKA 액터컨셉을 잘 수행하는지, 필자가 직접 파이썬에서 수행해봄~ 
Hi you!
안녕하세요
============= wait for test ==================
안녕하세요
Hi you!
Lalala~



이것을 모두다 익히는것은 불가할듯하고, 시간이되면 이 문서 레이아웃과 똑같은 AKKA for JAVA 메뉴얼도 작성예정입니다.


공통점:

  • Reactive 단어를 강조하며 스케일아웃이 용이한 동시성 프로그래밍 개발지원
  • 동시성 달성 을 위해 복잡한 멀티스레딩 프로그래밍을 지양함
  • 메시지 처리 를 어떠한 패턴으로(Actor) 추상화
  • 도메인명(네임스페이스) 에 .io 룰 붙이는 경향이 있으며 라이브러리가 아닌 툴또는 툴킷이라고 소개됨
  • 함수형프로그래밍 을 강조하기도함


차이점: 각각 장단점 존재

  • 순수하게 개발언어가 동시성문제를 풀기위해 Actor를 지원함 ( 언랭)
  • 기존 개발언어 유지및 프레임워크 유지차원에서, 라이브러리(툴킷)을 통해 이문제를 풀려고함 ( AKKA, Orleans )
  • 전체 개발 프레임워크를 통해 , 풀 패키지 제공으로 이문제를 풀려고함 ( Kafka )


AKKA에서 내세우는 강점


시스템

액터와 스트림을 사용하면 여러 서버에서 효율적으로 리소스를 사용하여

확장하고 확장하는 시스템을 구축 할 수 있는 개발 모델지원

디자인에 의한 탄력성

장애가 발생할 경우,자가 치유되고 응답 성을 유지하는 시스템을 작성할 수 있는

개발 모델을 제시해줍니다.

고성능

단일 기계에서 최대 초당 5 천만 메시지 처리 가능하며

메모리 힙 GB 당 250 만명의 액터생성가능합니다.

탄성및 분산

단일 실패 지점이없는 분산 시스템. 로드 밸런싱 및 라우팅 노드. 클러스터 소싱을 사용한 이벤트 소싱 및

CQRS CRDT를 사용한 최종 일관성을위한 분산 데이터 프로그래밍 모델지원


이벤트소싱 (EventSourcing)

이벤트 소싱(및 샤딩) 은 커다란 웹사이트를 수십억명의 사용자 규모로 확장하는 아이디어이며

이아이디어는 매우 간답합니다. 액터가 처리가 될때 명령의 이벤트 목록을 생성하고 저장을 합니다.

이 계획은 이벤트만이 저장소에 추가되고 아무것도 변이되지 않는 점이며 

이를 통해 이벤트 스트림의 소비자를 완벽하게 복제하고 확장할수 있습니다. 

구성요소의 컴퓨터가 고장이나거나 푸시로기능중 손실되는경우 , 이벤트 스트림을 재생하여 쉽게 재구성합니다.

이벤트 소싱은 Akka.net 지속성(Persistence)에서 지원됩니다.  (  참고 소스 : http://getakka.net/articles/persistence/event-sourcing.html )



CQRS (Command Query Responsiblity Segregation)

대부부의 대용량 트래픽은 Read에서 발생하며

이름에서 알 수 있다시피 코맨드, 즉 C (Create – INSERT), U(Update – UPDATE), D (Delete – DELETE) 쿼리와

R (Read – SELECT) 쿼리를 분리하자는 것이다.


CRDT(Conflict-free replicated data types)

충돌없는 데이터 복제란 : 분산환경에서 데이터복제를 통한 분산처리가 필요하며

이전략을 세우기위해 복제에따른 데이터 불일치 문제를 해결하고자 하는 방법




반응형 스트리밍 데이터

성능에 있어서 역배압장치(backpressure) 사용으로, 비동기 비 차단 스트림을 모두 처리하려고함.

완전 비동기 및 스트리밍 HTTP 서버 및 클라이언트에서

마이크로 서비스를 구축하기위한 훌륭한 플랫폼을 제공합니다.


AKKA-Training에서 샘플코드 기능검증과 활용안을 준비중에있습니다.

키워드로 살펴본 AKKA가 가진 스택범위


  • ReceiveActor
  • UntypedActor
  • Routers
  • Dispachers
  • Mailboxes
  • Inbox
  • FiniteStateMachines
  • FalutTolerance
  • DependencyInjection
  • TesitingActorSystems
  • CorrdinatedShotdown
  • EventSourcing
  • SnapShots
  • AtLeast OnceDelivery
  • Event Adapters
  • PersitentFSM
  • Storage Plugins
  • Custom Serialization
  • Persitence Query
  • Basics and working with Flows
  • Working with Graphs
  • Modularity,Composition and Hierarchy
  • Buffers and working with rate
  • Custom Stream processing
  • Working with stream IO
  • Pipelining and Paralleism
  • Cluster Routing
  • Cluster Configuration
  • Accesing the Cluster Actor
  • Distibuted Publish Subscribe in Cluster
  • Cluster Client
  • Cluster Sharding
  • Distibuted Data
  • Event Bus
  • Logging
  • Scheduler
  • Circuit Breaker


참고링크: 주요참고 문서

 이문서는 원본문서+추가정보 조합을하고개인적 취향에따라 이해가 쉽고 잘정리된 문서위주로 재해석의 과정을 거쳤으며,

샘플코드 작동검증을 하면서 새롭게 구성하였습니다.  영문메뉴얼이 익숙하면 원문을 권장합니다. 

샘플코드저장소: http://git.webnori.com/projects/AKKA/repos/akkastudy/browse

문서화 활동 : http://jira.webnori.com/projects/AKKADOCU/summary

진행사항

문서화도 어떠한 개발 프로세스임으로 JIRA의 기능을 1퍼 활용

AKKA의 문서화는 다음과 같이 절차로 요란하게 진행중입니다.

  • 카테고리화 범위를 위키로 작성
  • 문서 카테고리별 지라 Task 작성
  • 문서작성중 예제코드 작성 필요시 지라 Task 작성
  • 예제 코드는 Git(Bitbucket)을 이용하여 작성
  • 예제 코드에대한 설명 위키에 카테고리내에 문서화
  • 예제 코드 리뷰기능
  • 스크럼보드를 통한 문서화 스프린터 계획

JIRA 1퍼 활용 Atlassian PreView 참고


문서화계획

28-Aug201704-Sep11-Sep18-Sep25-Sep02-Oct09-Oct16-Oct23-Oct30-Oct스프린트1-초안작성스프린트2-예제보강스프린트-응용보강
문서화
응용코드

기본문서작성

다이어그램및 샘플코드추가

기본응용코드

고급응용코드

Unable to locate Jira server for this macro. It may be due to Application Link configuration.






  • No labels