Skip to content

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 
 
 

Repository files navigation

ETL-E-commerce-And-Competitor-Analysis

Proyek ini merupakan implementasi proses ETL (Extract, Transform, Load) yang dirancang untuk mengambil data dari API e-commerce, melakukan transformasi, dan menyimpannya ke dalam database. Tujuan dari proyek ini adalah untuk memudahkan analisis dan pengolahan data e-commerce dengan menyediakan data yang terstruktur dan siap pakai.

Fitur utama :

  • Extract: Mengambil data dari API e-commerce menggunakan metode web scraping.
  • Transform: Memproses dan merapikan data yang diperoleh untuk memastikan kualitas dan konsistensi.
  • Load: Menyimpan data yang telah diproses ke dalam database (PostgreSQL) untuk analisis lebih lanjut

Teknologi yang Digunakan

  • Bahasa : Python
  • Library : Pandas, SQLAlchemy, Requests, numpy , psycopg2
  • Database : PostgreSQL

Architecture of ETL

image

Schemas Database

image

Kompetitor Analysis

Proyek ini merupakan analisis kompetitor yang menggunakan data yang diperoleh melalui proses ETL (Extract, Transform, Load). Data yang diambil dari API e-commerce diolah dan dimanfaatkan untuk mengevaluasi performa dan strategi kompetitor di pasar. Analisis ini bertujuan untuk memberikan wawasan mendalam tentang posisi kompetitor, tren harga, serta kekuatan dan kelemahan produk yang mereka tawarkan.

About

A smart application that automatically scrapes ecommerce data, performs ETL processes to extract, transform, and load data into a database, and conducts competitor analysis. Leveraging advanced scraping techniques and data analytics, it provides actionable insights to monitor market trends and optimize business strategies.

Topics

Resources

Stars

0 stars

Watchers

1 watching

Forks

Releases

Packages

Contributors