programing

maria db의 데이터 변경 시 maria db에서 sms로 대용량 데이터 전송

lovejava 2023. 9. 6. 21:40

maria db의 데이터 변경 시 maria db에서 sms로 대용량 데이터 전송

Databricks 노트북에 스케쥴러를 사용해 보았지만 불필요한 데이터 로딩이 발생하고 있습니다.mariadb의 데이터는 무작위로 변경됩니다. 파이프라인을 시도하면 데이터의 변경 및 데이터를 한 데이터베이스에서 다른 데이터베이스로 전송하기 위한 트리거를 호출할 수 없습니다.

어떤 파이프라인 아이디어나 azure datafactory 아이디어나 python code도 도와주세요. 그래서 제가 Mariadb에서 테이블이 변경될 때 테이블을 전송할 수 있게요.

파이프라인을 트리거하는 한 가지 방법은 이벤트 기반 트리거를 사용하는 것입니다.

Azure Data Factory에서 이벤트 기반 트리거 만들기.트리거를 만들고 Type as Custom 이벤트를 선택합니다.

참조 - https://www.mssqltips.com/sqlservertip/6063/create-event-based-trigger-in-azure-data-factory/

두 번째 방법은 로직 앱을 사용하는 것입니다.이것이 질의에 가장 적합한 방법입니다.

트렌트 타무라의 이 답변 참조

언급URL : https://stackoverflow.com/questions/70214782/transfer-huge-data-from-maria-db-to-ssms-when-their-is-data-change-in-mariadb