amazon-redshift

0열

1답변

s3에서 Redshift로 데이터 복사 : 매니페스트가 다운로드해야하는 파일과 다른 버킷에 있음

s3의 많은 파일에서 Redshift로 데이터를 복사하려고합니다. 이 파일이 들어있는 s3 버킷에 대한 읽기 전용 액세스 권한이 있습니다. 효율적으로 복사하기 위해 필자는 복사해야하는 각 파일에 대한 링크가 포함 된 매니페스트 파일을 만들었습니다. 이 명령을 실행할 때 -- Load data from s3 copy data_feed_eval from 's

5열

1답변

mysql에서 redshift 복제까지 느린 삽입 및 업데이트 명령

MySQL에서 redshift로 복제 서버를 만들려고합니다.이를 위해 MySQL binlog를 구문 분석하고 있습니다. 초기 복제의 경우, mysql 테이블의 덤프를 CSV 파일로 변환하고 S3에 업로드 한 다음 redshift copy 명령을 사용합니다. 이를 위해 성능이 효율적입니다. 초기 복제 후, binlog를 읽을 때 연속 동기화를 위해 삽입 및

0열

1답변

AWS Redshift에서 md5 암호를 해싱 할 때 비밀번호 인증에 실패하는 이유는 무엇입니까?

AWS Redshift 클러스터에서 새 사용자를 만들려고합니다. 나는 사용자를 만들고 암호를 해싱 할 때 the documentation을 따라 갔지만 실제 암호를 사용하여 로그인 할 때 인증 실패를 계속합니다. 내가 무슨 짓을했는지의 몇 가지 예를 들어 세부 정보 : Mac에서 bash 쉘에서 해시 만들려면 : echo -n "my_userMyPasswo

3열

1답변

MySQL에서 Redshift에 가까운 실시간 ETL

MySQL에서 데이터를 추출하고 변환하여 거의 실시간으로 Redshift에로드하는 가장 효율적인 방법을 찾아 내려고합니다. 현재 우리는 하룻밤 ETL 프로세스 (Pentaho 사용)를 가지고 있으며 ~ 40 분이 남았고 거의 실시간 (미니 배치 1-5 분)으로 교체하려고합니다. 나는 AWS Kineses에 커넥터 MySQL의 바이너리 로그 (예 : http

1열

2답변

Redshift 쿼리를 병렬로 실행하는 방법

Redshift 클러스터에 대한 기본 부하 테스트를 시뮬레이트해야하며 약 20 개의 SELECT 쿼리를 병렬로 실행해야합니다. 저장 프로 시저가 Redshift에서 지원되지 않기 때문에이 작업을 수행하는 방법에 대한 아이디어를 얻고 싶습니다.

1열

1답변

빨간 시프트 상관 하위 쿼리 패턴이 지원되지 않음

이 코드는 특히 효율적이거나 우아한 코드가 아닙니다. 그래서 같은 INSIDE라는 만든 임시 테이블에서 쿼리 오전 : 그때 내가 작업하고 한 모델을 테스트하기위한 시도로 안쪽에 다음 쿼리를 실행하려고 해요 CREATE TEMP TABLE INSIDE (CONNECT_DATE DATE, DAILY_CONNECTIONS INT);` . SELECT * ,

0열

1답변

향후 유효 날짜 설정하기

리터럴 날짜를 입력하지 않고도 앞으로 3 개월 후에 사용자의 유효 기간 (VALID UNTIL) 값을 자동으로 설정하는 방법이 있는지 확인하려고했습니다. 다음을 시도 : alter user rchung set valuntil = dateadd(day,90,GETDATE()); alter user rchung set valuntil = select date

0열

1답변

Dynamo Db에서 Elastic Search 및 적색 변이로의 호화 로움

수백만 개의 애플리케이션 데이터를 저장하기 위해 Dynamo Db를 사용할 계획 인 프로젝트에서 실시간 데이터 및 분석을 검색해야합니다 (실시간 30 분 지연이 아닌 괜찮아요.) 그래서 키네시스 파이어 호스를 사용하여 kinesis firehose의 데이터를 AWS 탄성 검색 및 적색 변이로 푸시 할 계획입니다. 최선의 접근 방식을 제안하지 않으면 올바른

0열

1답변

tableau 및 redshift에 대해 adfs를 사용하여 단일 사인을 구현합니다.

aws redshift 클러스터에 연결된 tableau 서버가 있습니다. 현재는 tableau 및 redshift에 대한 자격 증명을 매번 입력해야합니다. 단일 사인을 구현하는 방법이 있습니까 Microsoft adfs를 사용하고 계십니까? 내가 tableau에 대한 단일 사인온을 구현할 수 있지만 어떻게 데이터베이스 자격 증명을 제공 할 수 있습니다.

0열

1답변

MySQL에서 Redshift로 쿼리 내보내기

Redshift에 대한 특정 쿼리의 결과를 매일로드해야합니다. 나는 이미이 쿼리의 결과를 지원하는 redshift에 대한 테이블을 만들었지 만, 이제는이 문제를 해결할 좋은 방법을 찾을 수 없기 때문에 조금만 붙어 있습니다. 지금까지 파이썬을 사용했지만 문자와 줄 문자를 기본적으로 저장하는 필드의 줄 종결 자에 관한 두통을 많이 겪었습니다. 나는 db에 연