aws-kinesis-firehose

0열

1답변

나는이 키네 시스 파이어 호스 전달 스트림을 s3 및 적색 변이로 가지고 있습니다. 데이터를 s3에 계속 넣고 싶지만 일시적으로 데이터를 redshift로 보내는 것을 중지하고 싶습니다. 한 가지 트릭은 데이터베이스 테이블 이름을 변경하는 것입니다. 그러나 요청이 아직 이루어지지 않았기 때문에 그렇게 정교하지는 않습니다. 레드 쉬프트로 데이터를 보내는 것을

0열

1답변

구름 형성 원형 의존성 파이어 호스

다음 CloudFormation 템플릿이 있습니다. 이전 변경 세트는 키네 시스 스트림과 나열된 모든 역할을 성공적으로 만들었습니다. 이제 소방용 배송 스트림을 추가하고 싶습니다. 하지만 내 변경 집합은 FAILED - Circular dependency between resources: [EventDeliveryStream] 메시지로 실패합니다. 누구든지

0열

1답변

하나의 Kinesis 스트림에서 Redshift의 여러 테이블로 데이터 스트리밍

다른 제작자의 Kinesis 스트림으로 들어오는 데이터가 있습니다. 데이터 유형에 따라 데이터를 여러 테이블로 변환해야합니다. 나는 Kinesis Streams에서 Lambda를 읽으려고하고 데이터를 다른 테이블로 변환 한 다음 Kinesis Firehose를 사용하여 Redshift로 배치하고 COPY합니다. 그러나 Firehose는 한 번에 하나의 Re

1열

1답변

AWS RDS - AWS ES

요구 사항 : 특정 테이블을 삽입/업데이트 할 때 데이터 스트림을 생성하고이를 탄성 검색으로 푸시합니다. 생각 AWS의 RDS (MariaDb) ----- 삽입/업데이트 말할 사용자 테이블 ---> AWS 운동성 스트림 - AWS 람다를 사용하여 -> AWS ES 질문 특정 테이블에 대한 삽입/업데이트시 키네시 스 스트림을 만들려면 어떻게해야합니까? AWS

0열

1답변

기존 aws kinesis Firehose 배달 스트림의 대상을 변경하는 방법

대상으로 Amazon S3로 구성된 aws kinesis Firehose 배달 스트림이 있습니다. Amazon Elasticsearch Service로 대상을 변경하려고하지만 편집 페이지에서 대상을 찾는 방법을 찾을 수 없습니다. 이를 수행 할 수 있습니까? 아니면 새 전달 스트림을 삭제하고 생성해야합니까?

0열

1답변

Dynamo Db에서 Elastic Search 및 적색 변이로의 호화 로움

수백만 개의 애플리케이션 데이터를 저장하기 위해 Dynamo Db를 사용할 계획 인 프로젝트에서 실시간 데이터 및 분석을 검색해야합니다 (실시간 30 분 지연이 아닌 괜찮아요.) 그래서 키네시스 파이어 호스를 사용하여 kinesis firehose의 데이터를 AWS 탄성 검색 및 적색 변이로 푸시 할 계획입니다. 최선의 접근 방식을 제안하지 않으면 올바른

0열

1답변

AWS Lambda Nodejs 함수에서 HTTP DELETE 요청을 실행하는 방법

레코드를 직접 Elasticsearch 클러스터로 보내는 Firehose 스트림에 대해 AWS Lambda 변환 함수를 만들려고합니다. 현재 Firehose 스트림 레코드에 ES 문서 ID를 지정하는 방법이 없으므로 모든 레코드 (심지어 중복 레코드)가 삽입됩니다. 그러나 Firehose는 Lambda에서 호스팅되는 변환 함수를 지원합니다. 내 솔루션은 변

0열

2답변

계산 장치 초

나는 운동성 분석 실험을하고있어 그것으로 많은 문제를 해결하지만, 실제로 붙어 한 다음 을 실제로 장치가 켜져있을 때 반영 레코드 스트림을 reading 분야에서 오프에 대한에 대한 I 1 사용하고 device_id | timestamp | reading 1 | 2011/09/01 22:30 | 1 1 | 2011/09/01 23:00 | 0 1 | 201

0열

1답변

Kinesis Firehose를 CloudWatch 이벤트 대상으로 설정합니다.

CloudWatch 이벤트가 Kinesis Firehose Delivery Stream으로 전송되는 프로세스의 구성 요소를 캡처하도록 CloudFormation 템플릿을 만들고 있습니다. 콘솔을 통해 수동으로 구성된 AWS fine에서 작동합니다. AWS::Events::Rule을 정의 할 때 올바른 대상의 ARN을 예상하는 Targets 속성이 있습니다.

1열

1답변

CloudFormation의 AWS Kinesis에서 선 구분 기호를 추가하는 방법은 무엇입니까?

Kinesis Firehose로가는 Kinesis Stream을 통해 데이터 (레코드)를 처리하고 S3 버킷의 파일로 데이터를 출력합니다. 그러나 현재 모든 레코드는 출력 파일에서 같은 행에 있지만 각 레코드가 분리되어 각 행이 고유하게 나타나기를 원합니다. 그것은 현재처럼 보이는 Store1, 100, Broccoli Store1, 101, Avocad