Update app.py

app.py

@@ -219,15 +219,18 @@ def scrape_tokped_with_selenium(nama_barang, num_items):
     while len(products) < num_items :
         try :
             url = f'https://www.tokopedia.com/search?navsource=&page={page}&q={query}&srp_component_id=02.01.00.00&srp_page_id=&srp_page_title=&st='
-            headers = {
-            'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36',
-            'Accept-Language': 'en-US,en;q=0.5',
-            'Accept-Encoding': 'gzip, deflate, br',
-            'Connection': 'keep-alive'
-            }
-            driver.get(url, headers = headers)
-            # Tunggu hingga elemen tertentu muncul (gunakan sesuai kebutuhan)
-            WebDriverWait(driver, 10).until(EC.presence_of_element_located((By.CLASS_NAME, "pcv3__info-content css-gwkf0u")))
+            
+            driver.get(url)
+            # Eksekusi JavaScript untuk mengatur header
+            driver.execute_script(
+                """
+                var xhr = new XMLHttpRequest();
+                xhr.open('GET', arguments[0], false);
+                xhr.setRequestHeader('User-Agent', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36');
+                xhr.send(null);
+                """
+                , url
+            )
 
             # Dapatkan sumber halaman setelah eksekusi JavaScript
             html = driver.page_source
@@ -238,7 +241,6 @@ def scrape_tokped_with_selenium(nama_barang, num_items):
             # Cari semua elemen yang sesuai
             product_container_list = soup.find_all('a', class_="pcv3__info-content css-gwkf0u", href=True)
 
-            
             for product_info in product_container_list:
                 link = product_info['href']
                 st.write(link)
@@ -333,7 +335,7 @@ if selected_site == "shopee.co.id":
             scraping_done = True  # Set scraping_done menjadi True
             
 if selected_site in ["tokopedia.com", "tokopedia.com(selenium)"]:
-    st.error("Sedang dalam pengembangan. Silahkan pilih situs yang lain")
+    st.error("Jika mengalami error karena sedang dalam pengembangan. Silahkan pilih situs yang lain")
     if st.button("Mulai Scraping"):
         if not nama_barang:
             st.error("Mohon isi Nama Barang.")