hamed-dashboards/dashboards/ecommerce/v2/export_csv_and_reports.py

95 lines
5.3 KiB
Python
Executable file

import json, csv, sqlite3
JSON_PATH = '/workspace/ecommerce_intel_v2/ecommerce_intel_master_v2.json'
DB_PATH = '/workspace/ecommerce_intel_v2/ecommerce_intel_sources.db'
DIR_PATH = '/workspace/ecommerce_intel_v2'
with open(JSON_PATH, 'r', encoding='utf-8') as f:
master = json.load(f)
# 1. Export Executives CSV
with open(f'{DIR_PATH}/executives_intelligence_dossier.csv', 'w', newline='', encoding='utf-8-sig') as f:
writer = csv.writer(f)
writer.writerow(['شناسه', 'نام مدیر / فعال اقتصادی', 'سمت فعلی', 'سوابق مدیریتی پیشین', 'سابقه در ایکامرس', 'دیدگاه کلیدی پیرامون فروش برندها', 'اقدامات تعاملی با برندها', 'لینک مصاحبه اول', 'لینک مصاحبه دوم'])
for e in master.get('executives_intelligence_dossier', []):
inv1 = e['direct_interviews'][0]['url'] if len(e.get('direct_interviews', [])) > 0 else ''
inv2 = e['direct_interviews'][1]['url'] if len(e.get('direct_interviews', [])) > 1 else ''
writer.writerow([
e.get('id', ''),
e.get('name', ''),
e.get('current_role', ''),
e.get('past_roles', ''),
e.get('tenure_in_ecom', ''),
e.get('stance_on_brands', ''),
e.get('brand_cooperation_initiatives', ''),
inv1,
inv2
])
# 2. Export Brands Matrix CSV
with open(f'{DIR_PATH}/brands_reporting_matrix.csv', 'w', newline='', encoding='utf-8-sig') as f:
writer = csv.writer(f)
writer.writerow(['نام برند / هلدینگ', 'خاستگاه', 'صنعت', 'برنداستور رسمی دارد؟', 'گزارش رسمی فروش داده؟', 'مدل همکاری با دیجی‌کالا', 'لینک مصاحبه یا سند', 'موضع رسمی برند', 'چالش‌ها و راهکار تعارض'])
for b in master.get('brands_cooperation_and_reporting_matrix', []):
writer.writerow([
b.get('brand_name', ''),
b.get('origin', ''),
b.get('sector', ''),
'بله' if b.get('has_official_brandstore') else 'خیر',
'بله' if b.get('reports_sales_officially') else 'خیر',
b.get('cooperation_model', ''),
b.get('brand_executive_interview_link', ''),
b.get('official_stance', ''),
b.get('conflicts_and_resolutions', '')
])
# 3. Export Industry Breakdown CSV
with open(f'{DIR_PATH}/industry_market_breakdown.csv', 'w', newline='', encoding='utf-8-sig') as f:
writer = csv.writer(f)
writer.writerow(['صنعت / رده کالایی', 'ارزش کل بازار (همت)', 'سهم ایکامرس رسمی (٪)', 'سهم اینستاگرام / سوشال (٪)', 'سهم بازار سنتی حضوری (٪)', 'نرخ تخمینی قاچاق (٪)', 'نسبت فروش ایرانی به خارجی', 'پرفروش‌ترین برندهای ایرانی', 'پرفروش‌ترین برندهای خارجی', 'گلوگاه‌های رگولاتوری', 'کانال‌های قاچاق'])
for ind in master.get('industry_deep_breakdown', []):
writer.writerow([
ind.get('sector', ''),
ind.get('total_market_size_irr', ''),
ind.get('ecommerce_share_percent', ''),
ind.get('social_commerce_share_percent', ''),
ind.get('traditional_offline_share_percent', ''),
ind.get('smuggling_rate_percent', ''),
ind.get('ratio_domestic_to_foreign', ''),
' - '.join(ind.get('top_searched_brands_domestic', [])),
' - '.join(ind.get('top_searched_brands_foreign', [])),
ind.get('regulatory_bottlenecks', ''),
ind.get('smuggling_channels', '')
])
# 4. Export Failures and Pivots CSV
with open(f'{DIR_PATH}/failures_and_pivots_deep.csv', 'w', newline='', encoding='utf-8-sig') as f:
writer = csv.writer(f)
writer.writerow(['شناسه', 'سال وقوع', 'عنوان واقعه / پیوت', 'دسته‌بندی', 'علت ریشه‌ای', 'نحوه اجرا', 'تبعات و خسارات اولیه', 'راهکار نهایی تثبیت‌شده', 'لینک سند موثق'])
for p in master.get('failures_and_pivots_deep_dossier', []):
writer.writerow([
p.get('id', ''),
p.get('year', ''),
p.get('title', ''),
p.get('category', ''),
p.get('root_cause', ''),
p.get('execution', ''),
p.get('consequences', ''),
p.get('resolution', ''),
p.get('verified_url', '')
])
# 5. Export Sources Catalog CSV (2,600+ sources)
conn = sqlite3.connect(DB_PATH)
c = conn.cursor()
c.execute('SELECT id, title, url, platform, publication_year, category, brand_or_person, summary FROM intel_sources ORDER BY id ASC')
sources_rows = c.fetchall()
conn.close()
with open(f'{DIR_PATH}/intel_sources_catalog.csv', 'w', newline='', encoding='utf-8-sig') as f:
writer = csv.writer(f)
writer.writerow(['شناسه', 'عنوان منبع / ویدیو', 'آدرس اینترنتی (URL)', 'پلتفرم', 'بازه انتشار', 'دسته‌بندی', 'برند یا شخصیت مرتبط', 'خلاصه محتوا'])
for s in sources_rows:
writer.writerow(s)
print("All 5 CSV catalogs exported successfully!")