Page History
...
복잡한 기능을 단순화하고,유닛테스트를 통해 검증하는것이 웹노리 Akak.net이 추구하는 방향입니다.(웹노리 깨알 광고)
Code Block | ||||
---|---|---|---|---|
| ||||
// 빗물을 처리하는 액터(지정된 초마다,빗물을 모아서 전달)
var throttleActor = Sys.ActorOf(Props.Create(() => new ThrottleActor(timeSec)));
// 물을 생산하는 액터(물생산은 전달받는대로, 초당 5개씩만 처리,느리다 싶으면 Work를 더 늘려준다.)
var throttleWork = Sys.ActorOf(Props.Create(() => new ThrottleWork(elemntPerSec, timeSec)));
// 생산자와 소비자를 연결합니다
// DI가 사용이되지 않았으며,참조객체 디펀던시가 없습니다. 이것은 네트워크로 작업자가 분리될수 있음을 의미합니다.
throttleActor.Tell(new SetTarget(throttleWork));
throttleWork.Tell(new SetTarget(probe));
// 빗물을, 빗물 처리자에게 불규칙적으로 계속 보낼수 있습니다.
throttleActor.Tell(new Queue("빗물"));
//생산자는 그냥 물을 받게됩니다.
probe.ExpectMsg<DelayMsg>(); |
Code Block | ||||||
---|---|---|---|---|---|---|
| ||||||
using System; using Akka.Actor; using Akka.TestKit; using Akka.TestKit.NUnit3; using AkkaNetCore.Actors.Utils; using AkkaNetCore.Models.Message; using NUnit.Framework; namespace AkkaNetCoreTest.Actors { class ThrottleActorTest : TestKit { protected TestProbe probe; [SetUp] public void Setup() { //스트림을 제공받는 최종 소비자 ( 물을 제공 받는 고객 ) probe = this.CreateTestProbe(); } [TestCase(15)] public void ThrottleActorAreOK(int cutoffSec) { // 초당 5개 처리한정 ( 더 처리하고 싶으면 이값을 늘린다.) int timeSec = 1; int elemntPerSec = 5; var throttleActor = Sys.ActorOf(Props.Create(() => new ThrottleActor(timeSec))); var throttleWork = Sys.ActorOf(Props.Create(() => new ThrottleWork(elemntPerSec, timeSec))); // 밸브에게 작업자 지정 ( 밸브는 초당 스트림을 모아서 방출한다 ) // 작업자는 방류된 스트림을 기본적으로 쌓아두고, 초당 지정된 개수만 처리한다. throttleActor.Tell(new SetTarget(throttleWork)); // 소비자지정 : 소비자는 몇개가 초당 처리되던 상관없이, 완료된 작업만 제공받는다. throttleWork.Tell(new SetTarget(probe)); Within(TimeSpan.FromSeconds(cutoffSec), () => { // 50개 처리완료는 10초이내에 끝나야함... for(int i=0; i<50; i++) { string seq = (i + 1).ToString(); throttleActor.Tell(new Queue(new DelayMsg() { Delay = 0, Seq = seq, Message = $"초당:{elemntPerSec} 테스트-{seq}", State = DelayMsgState.Reserved })); } DelayMsg lastMessage = null; //물이라고 가정하자..(빗물->정제->포장 과정 생략) for (int i = 0; i < 50; i++) { lastMessage =probe.ExpectMsg<DelayMsg>(); } //마지막 메시지의 Seq는 50이여야함 Assert.AreEqual("50", lastMessage.Seq); }); } /* 위 테스트의 결과로그,블락킹없이 실시간으로 초당 5개씩 처리함 [49:09] - 초당:5 테스트-1 [49:09] - 초당:5 테스트-2 [49:09] - 초당:5 테스트-3 [49:09] - 초당:5 테스트-4 [49:10] - 초당:5 테스트-5 [49:10] - 초당:5 테스트-6 [49:10] - 초당:5 테스트-7 [49:10] - 초당:5 테스트-8 [49:10] - 초당:5 테스트-9 [49:11] - 초당:5 테스트-10 */ } } } } |
액터구현
ThrottleActor 는 이 장의 설명을 위해, 작성하였으나 데이터 처리 대상의 제약을 두지 않았기때문에 다양하게 활용가능합니다.
Code Block | ||||
---|---|---|---|---|
| ||||
//AkkaStream을 빗물을Actor내에 처리하는사용하기 액터(지정된 초마다,빗물을 모아서 전달) var throttleActor위해 준비되는코드입니다.var materializer = Sys.ActorOf(Props.Create(() => new ThrottleActor(timeSec))); // 물을 생산하는 액터(물생산은 전달받는대로, 초당 5개씩만 처리,느리다 싶으면 Work를 더 늘려준다.) var throttleWork = Sys.ActorOf(Props.Create(() => new ThrottleWork(elemntPerSec, timeSec)Context.Materializer(); // FSM이 사용되었으며, 특정초마다 수집한 데이터를 처리합니다. (스트림 출발점) When(State.Active, state => { ....... }, TimeSpan.FromSeconds(CollectSec)); /// 빗물담당자는 생산자와빗물을 소비자를한꺼번에 연결합니다흘려보냈지만 // DI가작업자는 사용이되지안정적으로 않았으며,참조객체초당 디펀던시가5개 없습니다.처리 이것은제약을두며 네트워크로흘러들어온 작업자가버퍼를 분리될수꾸준하게 있음을작업한만큼 의미합니다비웁니다. throttleActor.Tell(new SetTarget(throttleWork)); throttleWork.Tell(new SetTarget(probe));// 처리대상 소스 :한꺼번에 몰려욤 Source<object, NotUsed> source = Source.From(batchMessage.Obj); // 조절기를 빗물을,달아서 빗물천천히 처리자에게처리,가속 불규칙적으로기울기를 계속선택할수 보낼수있는것은 있습니다보너스입니다. throttleActorsource.TellThrottle(new Queue("빗물")); //생산자는 그냥 물을 받게됩니다. probe.ExpectMsg<DelayMsg>(); |
액터구현
...
element, TimeSpan.FromSeconds(1), maxBust, ThrottleMode.Shaping) |
Code Block | ||||||||
---|---|---|---|---|---|---|---|---|
| ||||||||
using System; using System.Collections.Immutable; using Akka; using Akka.Actor; using Akka.Event; using Akka.Monitoring; using Akka.Streams; using Akka.Streams.Dsl; using AkkaNetCore.Models.Message; namespace AkkaNetCore.Actors.Utils { // 일괄 처리(데이터 인입) public class ThrottleWork : ReceiveActor { private readonly ILoggingAdapter logger = Context.GetLogger(); private IActorRef consumer; public ThrottleWork(int element,int maxBust) { ReceiveAsync<SetTarget>(async target => { consumer = target.Ref; }); ReceiveAsync<object>(async message => { if (message is Batch batchMessage) { int Count = batchMessage.Obj.Count; Context.IncrementMessagesReceived(); Source<object, NotUsed> source = Source.From(batchMessage.Obj); using (var materializer = Context.Materializer()) { var factorials = source; factorials //.ZipWith(Source.From(Enumerable.Range(0, 100)), (num, idx) => $"{idx}! = {num}") .Throttle(element, TimeSpan.FromSeconds(1), maxBust, ThrottleMode.Shaping) .RunForeach(obj => { var nowstr = DateTime.Now.ToString("mm:ss"); if(obj is DelayMsg delayMsg) { Console.WriteLine($"[{nowstr}] - {delayMsg.Message}"); if (consumer != null) consumer.Tell(delayMsg); } }, materializer) .Wait(); } } }); } } public class ThrottleActor : FSM<State, IData> { private readonly ILoggingAdapter logger = Context.GetLogger(); private int CollectSec; public ThrottleActor(int _CollectSec) { CollectSec = _CollectSec; StartWith(State.Idle, Uninitialized.Instance); When(State.Idle, state => { if (state.FsmEvent is SetTarget target && state.StateData is Uninitialized) { return Stay().Using(new Todo(target.Ref, ImmutableList<object>.Empty)); } return null; }); When(State.Active, state => { if ((state.FsmEvent is Flush || state.FsmEvent is StateTimeout) && state.StateData is Todo t) { return GoTo(State.Idle).Using(t.Copy(ImmutableList<object>.Empty)); } return null; }, TimeSpan.FromSeconds(CollectSec)); WhenUnhandled(state => { if (state.FsmEvent is Queue q && state.StateData is Todo t) { return GoTo(State.Active).Using(t.Copy(t.Queue.Add(q.Obj))); } else { logger.Warning($"Received unhandled request {state.FsmEvent} in state {StateName}/{state.StateData}"); return Stay(); } }); OnTransition((initialState, nextState) => { if (initialState == State.Active && nextState == State.Idle) { if (StateData is Todo todo) { todo.Target.Tell(new Batch(todo.Queue)); } else { } // nothing to doelse }{ } // nothing to });do Initialize(); } } } | ||||||||
Code Block | ||||||||
| ||||||||
// AkkaStream을 Actor내에 사용하기 위해 준비되는코드입니다.var materializer = Context.Materializer(); // FSM이 사용되었으며, 특정초마다 수집한 데이터를 처리합니다. (스트림 출발점) When(State.Active, state => { ....... }, TimeSpan.FromSeconds(CollectSec)); // 빗물담당자는 빗물을 한꺼번에 흘려보냈지만 // 작업자는 안정적으로 초당 5개 처리 제약을두며 흘러들어온 버퍼를 꾸준하게 작업한만큼 비웁니다. // 처리대상 소스 :한꺼번에 몰려욤 Source<object, NotUsed> source = Source.From(batchMessage.Obj); // 조절기를 달아서 천천히 처리,가속 기울기를 선택할수 있는것은 보너스입니다. source.Throttle(element, TimeSpan.FromSeconds(1), maxBust, ThrottleMode.Shaping) } }); Initialize(); } } } |
클러스터와 함께 Stream은 Akka 에서 어려운 부분중 하나입니다. Stream처리에 대하 더 자세한것은 아래 내용을 참고하세요
...