Solana ETL源碼:python
68747470733a2f2f6769746875622e636f6d/blockchain-etl/solana-etl-airflow
原邏輯:airflow做調度
導出:本地調用solana api,請求區塊,下載后使用gcloud api上傳到google buckets
導入:本地解析csv后,把數據上傳到google bigtable.
現在需要本地化修改,導入導出都在本地,數據落地postgres數據庫(不使用云服務,價格偏貴,網絡延遲高)
1、保持原導出、導入邏輯不變
2、測試充分,未遺漏數據
3、如果原邏輯中有需要更改的地方,需要提前協商
4、如果有更好的方案,也請指出
途傲科技為中小企業提供網站制作、網站建設、微信H5、微信小程序,多商戶平臺,多級分銷系統,APP開發,手機網站,HTML5多端自適應網站,營銷型企業站建設,及對技術人才的培養等都積累與沉淀了豐富的心得和實戰經驗。
如果您想定制同款軟件,可以將需求提交給我們【免費提交需求,獲取解決方案】
免責聲明:文章部分內容收集于互聯網,不代表本站的觀點和立場,如有侵權請聯系刪除。