.4UVmK5aw_1uGpNi.svg){kind=small}
.AzQB9McO_PVSYK.svg){kind=small}
.DjhlE8MO_Z1DYVxU.svg){kind=small}
.DM2pllEO_1cxFXE.svg){kind=small}
.CvN5042A_Z10D5qc.svg){kind=small}
.Dcqs_gC__NRL3p.svg){kind=small}
ওয়েব আনলকার: বড় পরিসরে পাবলিক ডেটা সংগ্রহের ওয়েব ডেটা API
একটি API রিকোয়েস্টে পেজের URL পাঠান এবং রেন্ডার হওয়া HTML ফেরত পান। শুরুতে ৫টি সফল স্ক্র্যাপ বিনামূল্যে করুন; ব্যর্থ রিকোয়েস্টে কোনো চার্জ নেই।
- পেজ লোড হয় আসল ব্রাউজারে, JavaScript সহ
- পেজ লোড হওয়ার সময়ই CAPTCHA স্বয়ংক্রিয়ভাবে সমাধান হয়
- প্রতিটি রিকোয়েস্টের জন্য ২০৭টি এক্সিট দেশ ও সিটি টার্গেটিং
যেকোনো পাবলিক URL-এর সঙ্গে কাজ করে
- Amazon
নিজে ব্যবহার করে দেখুন
Floppydata ওয়েব আনলকার বেছে নেওয়ার সব কারণ
রেন্ডার করা পেজ, লোকেশন নিয়ন্ত্রণ এবং সহজ বিলিং — একটি API রিকোয়েস্টেই।
- প্রকৃত ব্রাউজার রেন্ডারিং HTML ফেরত আসার আগে পেজ রেন্ডার করা হয়, তাই স্ক্রিপ্টের মাধ্যমে লোড হওয়া কনটেন্টও এতে থাকে।
- স্বয়ংক্রিয় CAPTCHA সমাধান পেজ লোড হওয়ার সময় ধরা পড়া CAPTCHA স্বয়ংক্রিয়ভাবে সমাধান হয়।
- স্বয়ংক্রিয় রিট্রাই, চার্জ একবারই difficulty-কে auto করুন। কোনো প্রচেষ্টা ব্যর্থ হলে আরও শক্তিশালী পুলের মাধ্যমে আবার চেষ্টা করা হয় — সব মিলিয়ে সর্বোচ্চ ৩টি প্রচেষ্টা, বিল হয় একবারই।
- জিও-টার্গেটিং ২০৭টি এক্সিট দেশ থেকে বেছে নিন এবং প্রতিটি রিকোয়েস্টের জন্য শহর ঠিক করুন।
- শুধু সফল স্ক্র্যাপের জন্য মূল্য দিন ভ্যালিডেশন, অথেন্টিকেশন এবং আপস্ট্রিম ব্যর্থতায় আপনার ব্যালেন্স খরচ হয় না।
- সহজ API ইন্টিগ্রেশন আপনার API কী দিয়ে একটি HTTP রিকোয়েস্ট, যেকোনো ভাষা থেকে: URL পাঠান, রেন্ডার হওয়া HTML ফেরত পান।
Floppydata ওয়েব আনলকার কীভাবে কাজ করে
- স্ক্র্যাপার
- Floppydata ওয়েব আনলকার
- টার্গেট ওয়েবসাইট
- প্রকৃত ব্রাউজার রেন্ডারিং
- স্বয়ংক্রিয় CAPTCHA সমাধান
- স্বয়ংক্রিয় রিট্রাই, চার্জ একবারই
- জিও-টার্গেটিং
- শুধু সফল স্ক্র্যাপের জন্য মূল্য দিন
- সহজ API ইন্টিগ্রেশন
প্ল্যান ও মূল্য
ব্যর্থ রিকোয়েস্টে চার্জ নেই — অপ্রত্যাশিত খরচ নেই, লুকানো ফি নেই।
শুরু করা সহজ, স্কেল করা আরও সহজ
- 1
একটি API কী নিন. আপনার Floppydata অ্যাকাউন্টের API কী পেজে একটি তৈরি করুন এবং X-Api-Key হেডারে পাঠান।
- 2
URL পাঠান. যেকোনো HTTP ক্লায়েন্ট থেকে এটি /v2/web-data/fetch-এ POST করুন; পেজের প্রয়োজন হলে countryCode, city বা difficulty যোগ করুন।
- 3
HTML পান. রেসপন্সে থাকে রেন্ডার হওয়া HTML, সোর্স URL এবং ফেচের সময়; নিজের টুল দিয়ে এটি পার্স করুন।
const response = await fetch('https://api.floppydata.net/v2/web-data/fetch', {
method: 'POST',
headers: {
'X-Api-Key': 'YOUR_API_KEY',
'Content-Type': 'application/json'
},
body: JSON.stringify({
url: 'https://example.com',
countryCode: 'US',
difficulty: 'auto'
})
});
const { html } = await response.json();import requests
response = requests.post(
'https://api.floppydata.net/v2/web-data/fetch',
headers={'X-Api-Key': 'YOUR_API_KEY'},
json={
'url': 'https://example.com',
'countryCode': 'US',
'difficulty': 'auto',
},
)
html = response.json()['html']curl --request POST https://api.floppydata.net/v2/web-data/fetch \
--header "X-Api-Key: YOUR_API_KEY" \
--header "Content-Type: application/json" \
--data '{"url": "https://example.com", "countryCode": "US", "difficulty": "auto"}'ওয়েব আনলকার বনাম নিজে ম্যানেজ করা প্রক্সি
| Floppydata | নিজে ম্যানেজ করা প্রক্সি | |
|---|---|---|
| আসল ব্রাউজারে রেন্ডার হওয়া পেজ, JavaScript সহ | ||
| পেজ লোড হওয়ার সময়ই CAPTCHA সমাধান | ||
| আরও শক্তিশালী পুলের মাধ্যমে স্বয়ংক্রিয় রিট্রাই, বিল একবারই | ||
| ব্যর্থ রিকোয়েস্টে চার্জ নেই | ||
| ব্রাউজার, Puppeteer বা Playwright চালানোর দরকার নেই | ||
| মূল্য | প্রতি 1,000টি সফল স্ক্র্যাপে $0.89 থেকে | ট্রাফিকের প্রতি GB হিসেবে বিল |
সচরাচর জিজ্ঞাসা
ওয়েব আনলকার কী?
ওয়েব আনলকার হলো পাবলিক ওয়েব পেজ আনার জন্য Floppydata-র API। আপনার API কী দিয়ে একটি POST রিকোয়েস্টে URL পাঠান; পেজটি আসল ব্রাউজারে লোড হয়, লোড হওয়ার সময় আসা CAPTCHA স্বয়ংক্রিয়ভাবে সমাধান হয়, আর রেসপন্সে থাকে রেন্ডার হওয়া HTML, সোর্স URL এবং পেজটি আনার সময়। এটি শুধু HTML ফেরত দেয়, তাই পার্স করতে হয় আপনার নিজের টুল দিয়ে।
ওয়েব আনলকার কি ওয়েব স্ক্র্যাপিং API-এর মতোই?
হ্যাঁ। ওয়েব আনলকার হলো v1 এন্ডপয়েন্টের নাম, POST /v1/webUnlocker। Client API v2-এ একই কাজ করে Web Data fetch এন্ডপয়েন্ট, POST /v2/web-data/fetch, যাকে এই সাইটে বলা হয় ওয়েব স্ক্র্যাপিং API। বিদ্যমান ইন্টিগ্রেশনের জন্য v1 রাখা হয়েছে; নতুন ইন্টিগ্রেশনে v2 ব্যবহার করা উচিত।
এর খরচ কত?
প্রথম ৫টি সফল স্ক্র্যাপ বিনামূল্যে। এরপর 10,000টি সফল স্ক্র্যাপের খরচ $9 এবং 100,000টির খরচ $89; আরও বড় ভলিউম বা কাস্টম শর্তাবলির জন্য টিমের সাথে কথা বলুন। চার্জ হয় শুধু সফল স্ক্র্যাপের জন্য: ভ্যালিডেশন, অথেন্টিকেশন এবং আপস্ট্রিম ব্যর্থতায় আপনার ব্যালেন্স খরচ হয় না।
প্রথমবারে পেজ লোড না হলে কী হবে?
difficulty-কে auto করুন। তখন কোনো প্রচেষ্টা ব্যর্থ হলে আরও শক্তিশালী পুলের মাধ্যমে আবার চেষ্টা করা হয় — প্রথমে low, তারপর medium, তারপর high — সব মিলিয়ে সর্বোচ্চ ৩টি প্রচেষ্টা, আর বিল হয় একবারই। এটি ছাড়া প্রতিটি রিকোয়েস্টে একবারই চেষ্টা করা হয়। সব প্রচেষ্টা ব্যর্থ হলে API “Failed to scrape the URL” বার্তাসহ একটি এরর ফেরত দেয় এবং কোনো চার্জ হয় না।
আমার কি ব্রাউজার, Puppeteer বা Playwright লাগবে?
না। HTTP রিকোয়েস্ট পাঠাতে পারে এমন যেকোনো ভাষাই চলবে; ওপরের উদাহরণগুলোতে JavaScript, Python ও cURL ব্যবহার করা হয়েছে। আপনি যদি Playwright বা Puppeteer দিয়ে একাধিক ধাপের সেশনে নিজে ব্রাউজার চালাতে চান, তাহলে এর বদলে ক্লাউড ব্রাউজার ব্যবহার করুন।
এটি কী কাজে ব্যবহার হয়?
পাবলিক পেজের HTML দরকার এমন যেকোনো কাজে: মূল্য ও পণ্যতালিকা মনিটরিং, প্রতিযোগী গবেষণা, সার্চ রেজাল্ট, লিস্টিং এবং কনটেন্ট সংগ্রহ। এক্সিট দেশ ও শহর আপনি নিজে বেছে নেন বলে নির্দিষ্ট কোনো লোকেশন থেকে পেজটি কেমন দেখায় তাও যাচাই করতে পারবেন।