개발 일기92

  • 홈
  • 태그
  • 방명록

2025/02/23 2

Python - 크롤링

파이썬을 이용한 request , beautifulSoup 예제 # 웹 사이트의 제목을 크롤링하고 추출import requestsfrom bs4 import BeautifulSoup# Define the target URLurl = "https://example.com"# Send an HTTP request to the websiteresponse = requests.get(url)# Check if the request was successfulif response.status_code == 200: # Parse the HTML content using BeautifulSoup soup = BeautifulSoup(response.text, "html.parser") # Extrac..

ETC 2025.02.23

Postgresql - Sharding

Postgresql의 샤드Sharding은 성능, 확장성 및 가용성을 향상시키기 위해 여러 서버 (또는 노드)에 데이터를 배포하는 데이터베이스 파티셔닝 기술모든 데이터를 단일 데이터베이스 인스턴스에 저장하는 대신 Sharding은 이를 더 작고 관리하기 쉬운 청크로 나s눈다.샤드의 주요 구성 요소샤드 key샤드 (예 : 사용자 ID, 지역 등)에 데이터를 배포하는 데 사용되는 열 (또는 열 세트).코디네이터 (라우터)샤드 키를 기반으로 쿼리를 올바른 샤드로 구동. (수동 / pgbouncer / citus 와 같은 관리 툴)샤드 노드각 노드 (데이터베이스 서버)는 데이터의 일부를 저장노드는 쿼리를 처리하기 위해 독립적으로 작동샤드 전략해시 기반 샤딩샤드 키 값은 해시되어 샤드 위치를 결정데이터 배포를 보..

DB/Postgresql 2025.02.23
이전
1
다음
더보기
프로필사진

개발 일기92

공부기록

  • 분류 전체보기 (131)
    • Redis (14)
    • 공지 (1)
    • Kafka (23)
    • 정보처리기사 (0)
    • Linux (8)
    • BI (3)
    • Kubernetes (2)
    • EMR (1)
    • Kinesis (2)
    • AWS S3 (2)
    • ETC (9)
    • Doker (3)
    • Airflow (4)
    • Hadoop (9)
    • ELK (2)
    • Spark (6)
    • DB (10)
      • Postgresql (9)
    • NIFI (2)
    • CS (4)
      • 운영체제 (9)
      • 네트워크 (4)
      • 데이터베이스 (2)
      • 자료구조 (2)
    • 코테 (0)

Tag

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

  • Kafka 관련 비밀글
  • 정보처리기사
  • 네이버블로그 -> 티스토리로 블로그 변경

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/02   »
일 월 화 수 목 금 토
1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바