amazon-athena

0열

1답변

AWS athena가 중첩 된 객체 배열 대신 문자열로 내 테이블을 만드는 이유

중첩 테이블 대신 sql 명령이 포함 된 하나의 매우 긴 제목이 있지만 오류는 발생하지 않습니다. 왜 실제로 작동하지만 실제로 json 데이터를 올바르게 입력하지 않습니까? CREATE external TABLE ranked ( airlineRankings array<struct< overall_rating:TINYINT, seat

0열

1답변

HIVE PyAthenaJDBC의 인수 (AWS athena)

제공된 JDBC 드라이버를 사용하여 Athena를 쿼리하기 위해 PyAthenaJDBC라는 Python 모듈을 사용하고 있습니다. 여기 링크입니다 : https://pypi.python.org/pypi/PyAthenaJDBC/ 연결이 쿼리뿐만 아니라 (쇼 데이터베이스, 쇼 테이블 선택을 ...) 작업, 성공적으로 설립 그러나, 나는 하이브 인수 등을 사용하

3열

1답변

AWS Athena : 'msck repair table'에 비용이 발생합니까?

I는 다음과 같습니다 S3에서 ORC 데이터가 있습니다 s3://bucket/orc/clientId=client-1/year=2017/month=3/day=16/hour=20/ s3://bucket/orc/clientId=client-2/year=2017/month=3/day=16/hour=21/ s3://bucket/orc/clientId=client

2열

1답변

java.sql.SQLExceptionPyRaisable 두 번째 시도에서 장고를 사용하여 Athena에 연결

제공된 JDBC 드라이버를 사용하여 Athena를 쿼리하기 위해 PyAthenaJDBC라는 Python 모듈을 사용하고 있습니다. 여기에 링크가 있습니다 : https://pypi.python.org/pypi/PyAthenaJDBC/ 나는 몇 가지 지속적인 문제에 직면 해 있습니다. Athena 연결을 두 번 연속 사용할 때마다이 Java 오류가 계속 발생

1열

1답변

는 하이브 내가 보안 그룹이 <em>요소 열</em>에서 아래 문자열을 반환 <strong>인바운드 규칙 이벤트</strong>을 추가 선택하면 그것에 대해, 아테나의 AWS 클라우드 추적 로그를 분석하려고 JSON 행

임에서 특정 문자열을 선택합니다. {"groupId":"sg-XXXX","ipPermissions":{"items":[{"ipProtocol":"tcp","fromPort":22,"toPort":22,"groups":{},"ipRanges":{"items":[{"cidrIp":"0.0.0.0/0"}]},"prefixListIds":{}}]}} 는하지만

0열

1답변

여러 테이블에서 SQL 데이터 반환, Athena/Presto를 사용하여 1 테이블의 날짜 범위 제한

AWS Athena를 활용하여 다양한 로그 파일을 처리하는 프로젝트를 곧 시작할 예정입니다. 내 목표는 이벤트 상관 관계 분석을 위해 로그 파일을 사용하는 것이므로 단일 SQL 문에서 주어진 시간 범위 내에서 여러 테이블의 데이터를 선택하고 표시 할 수있는 방법을 찾아야합니다. 여기 scada.timestamp process.eventid

1열

2답변

Python 및 pyathenajdbc를 사용하여 Athena로 연결

python을 사용하여 AWS Athena에 연결하려고합니다. 이 작업을 수행하기 위해 pyathenajdbc를 사용하려고합니다. 내가 겪고있는 문제는 연결을 얻는 것입니다. 아래 코드를 실행하면 AthenaDriver를 찾을 수 없다는 오류 메시지가 나타납니다. (java.lang.RuntimeException : 클래스 com.amazonaws.athe

1열

2답변

S3로 올바르게 형식화 된 JSON을 작성하여 Athena/Redshift에로드하십시오.

Kinesis에서받은 각 트랜잭션에 대해 람다 함수를 실행하는 트리거가 있습니다. 생산자가 PutRecordsRequest() 메소드를 통해 여러 트랜잭션을 전송 중입니다. 람다 함수는 다음과 같습니다. var AWS = require('aws-sdk'); var firehose = new AWS.Firehose(); var fhStreamName =

1열

1답변

하이브 - 관련 값의 합계

AWS Athena에서 작업하여로드 밸런서 로그를 필터링합니다. 나는 아래 테이블을 만들고 테이블에 로그를 가져 왔습니다. CREATE EXTERNAL TABLE IF NOT EXISTS elb_logs ( request_timestamp string, elb_response_code string, url string,

0열

1답변

아테나에서 s3 데이터로 쿼리 성능을 향상시키는 방법

S3와 같이 하이브 형식으로 데이터를 분할했습니다. bucket/year=2017/month=3/date=1/filename.json bucket/year=2017/month=3/date=2/filename1.json bucket/year=2017/month=3/date=3/filename2.json 모든 파티션에는 약 1,000,000 개의 레코드