Toy

快讯

• 2013/11/03 中国IP传输的类型 [GPT3.5翻译]

  中国有三家主要的IP传输运营商：中国电信（CT，市场份额最大），中国联通（CU）和中国移动国际（CMI）。它们为中国的居民客户、企业客户以及移动客户提供服务。

  这些公司中的每一家都提供多个层次的IP传输，从廉价到非常昂贵不等。每个层次都有特定的用途，并伴随着自己的一系列问题。

  除此之外，这三个网络之间的互联安排并不简单。例如，对于中国到美国的方向，中国电信在2019年停止了与中国联通和中国移动的互联，这给网络运营商提供了最佳性能和服务稳定性增加了复杂性。

  除了上述问题外，供应商在与中国的运营商合作时还必须面对其他一系列与IP传输相关的问题。

  CN2 GIA/CTGNet 网络

  中国电信的CN2 GIA网络解决了一个非常具体的问题：中国与其他地区之间的服务质量。

  如果你的目标受众是中国，你可能已经知道向中国访客提供网络内容可能会面临一些挑战。例如，在高峰时段，常规的IP传输通道会出现拥堵（过载）现象，丢包率可能会达到30%甚至更高。

  由于这么高的数据包丢失率，几乎不可能可靠地向中国观众提供网络内容，进行网络会议，托管在线游戏，或者连接到中国大陆的办公室或分支机构。换句话说，数据包丢失可能对您的业务产生严重影响。

  中国电信提供4种IP传输选项，不详细展开。

  选项1. AS4134（中国电信/网通）。

  ChinaNet是大多数云运营商使用的传输数据到/从中国的最常见方式。这个网络有两个优点：它非常便宜，而且它的容量可以承受相当大的DDoS攻击，如果您需要持续的DDoS保护，这可能是一个更好的选择。

  缺点是，它非常拥挤，尤其是在高峰时段。

  选项2. AS4809 CN2 GT（全球过境）

  最初引入这个网络是为了解决拥堵问题。它比AS4134/Chinanet要贵得多，但它本应保证一个体面的服务水平。

  很不幸的是，自2019年以来，它已经变得非常拥挤，甚至尽管成本要高得多。

  公平地说，在2021年，我们看到了中国网和CN2 GT网络都有显著的改进。

  选项3. AS4809 CN2 GIA（全球互联网接入）

  CN2 GIA是将数据传输到/从中国的最昂贵的方式。尽管多年来，我们观察到这个网络出现的问题最少，非常稳定。

  这是你想要用于网络会议、网络电话、提供网页内容、在线游戏等的网络，因为它能提供最佳的稳定性。

  这个网络有两个显著的缺点。

  正如我们之前提到的，首先的缺点就是它的高昂成本。CN2 GIA IP传输的价格可以高达每兆比特120美元。因此，在实际情况中，你可以预计在某些市场上，一个1 Gbps的连接在这个网络上一个月的账单大约会达到10万美元。

  第二个缺点：容量非常有限。CN2 GIA IP传输非常非常难以获得，即使以高昂的成本。由于容量有限，CN2 GIA网络对DDoS攻击不具有容忍性，我们不得不在遭受攻击时采取IP空路由的方式。

  选项4. AS23764 CTGNet

  CTGNet是中国电信连接选项清单中的最新成员。根据我们的经验，从实际角度来看，它在定价和性能方面与Option 3（AS4809 CN2 GIA）相当。

  1个月前 (11-03)

• 提升GPT Prompt效果最佳实践 - 拆解复杂任务

  复杂任务往往比简单任务出错率更高

  来源： 提升GPT Prompt效果最佳实践 - 拆解复杂任务
  3个月前 (08-23)

• 230817 拍立享 图片批量下载/谷歌上传代码

  大儿子参加了今年的暑假军事夏令营，照片直播服务使用的是拍立享。但拍立享本身对于图片的识别不足，无法精确的识别大儿子的照片。

  我希望能通过谷歌相册的识别来精准的判断哪些是我大儿子的照片，于是有了下面的相关代码

  

  一、获取相册所有的照片数据

  curl -o a.log 'https://www.pailixiang.com/Portal/Services/AlbumDetail.ashx?t=2&rid=req33mip594yecb' \
    -H 'authority: www.pailixiang.com' \
    -H 'accept: application/json, text/javascript, */*; q=0.01' \
    -H 'accept-language: zh-CN,zh;q=0.9' \
    -H 'content-type: application/x-www-form-urlencoded; charset=UTF-8' \
    -H 'cookie: COOKIE_012=1787ba89-d4a1-4400-a22b-7c5bb89a2d8d; Plx_OA6K05m8=m0zk4q2p1hyjb1qczvs2xtye; SERVERID=3cb4a6b6e759b320e9e7834796a8c5b0|1691152725|1691151948' \
    -H 'origin: https://www.pailixiang.com' \
    -H 'referer: https://www.pailixiang.com/album_ia4423717371.html' \
    -H 'sec-ch-ua: "Not/A)Brand";v="99", "Google Chrome";v="115", "Chromium";v="115"' \
    -H 'sec-ch-ua-mobile: ?0' \
    -H 'sec-ch-ua-platform: "macOS"' \
    -H 'sec-fetch-dest: empty' \
    -H 'sec-fetch-mode: cors' \
    -H 'sec-fetch-site: same-origin' \
    -H 'user-agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/115.0.0.0 Safari/537.36' \
    -H 'x-requested-with: XMLHttpRequest' \
    --data-raw 'albumId=adf4416e-3147-476e-9b23-c4671caf5247&groupId=&len=11000&from=&order=0&accessType=1&nw=' \
    --compressed
  
  
  

  二、基于Json数据获取对应的图片数据

  cat a.log| grep pbig | awk -F '"' '{print $4}' > file.log
  
  

  三、多线程Python下载照片

  import requests
  import hashlib
  import os
  from concurrent.futures import ThreadPoolExecutor
  
  url = "https://img.pailixiang.com/album/a343717371/133517343.jpg@!pbig"
  
  # 下载并保存图片
  def download_image(url):
      response = requests.get(url)
      image_data = response.content
  
      hash_value = hashlib.sha256(url.encode('utf-8')).hexdigest()
      prefix = hash_value[:2]
  
      directory_num = int(prefix, 16) % 10
      directory = os.path.join(os.getcwd(), str(directory_num))
      os.makedirs(directory, exist_ok=True)
  
      filename = hash_value + ".jpg"
      filepath = os.path.join(directory, filename)
      with open(filepath, "wb") as f:
          f.write(image_data)
  
      print(f"Image downloaded successfully: {url}")
  
  def pool_down_images(image_urls):
      with ThreadPoolExecutor(max_workers=32) as executor:
          executor.map(download_image, image_urls)
  
  def read_file(filename):
      with open(filename, 'r') as file:
          data = file.readlines()
          data = [line.strip() for line in data]
  
      return data
  
  # 指定文件名并读取数据
  filename = "file.log"  # 替换为你的文件名
  data = read_file(filename)
  
  # 调用函数上传图片
  pool_down_images(data)%

  四、Python服务上传谷歌相册

  import requests
  from google_auth_oauthlib.flow import InstalledAppFlow
  
  
  
  def get_access_token():
      # 客户端凭证信息
      client_id = ""
      client_secret = ""
  
      # 定义 OAuth 2.0 授权范围（API 的访问权限）
      scopes = ["https://www.googleapis.com/auth/photoslibrary"]
  
      # 创建授权流程对象
      flow = InstalledAppFlow.from_client_secrets_file(
          "credentials.json",  # 替换为你的客户端凭证文件路径
          scopes=scopes
      )
  
      # 进行授权
      credentials = flow.run_local_server()
  
      # 返回访问令牌
      return credentials.token
  
  
  
  
  # 下载并上传图片到谷歌相册
  def upload_images(image_urls):
      access_token = get_access_token()
  
      headers = {
          "Authorization": f"Bearer {access_token}"
      }
  
      for url in image_urls:
          # 下载图片
          response = requests.get(url)
          if response.status_code == 200:
              image_data = response.content
  
              # 上传图片
              upload_url = "https://photoslibrary.googleapis.com/v1/uploads"
              upload_response = requests.post(upload_url, data=image_data, headers=headers)
  
              if upload_response.status_code == 200:
                  upload_token = upload_response.text.rstrip("\n")
                  create_media_item(upload_token, headers)
                  print(f"Image uploaded successfully: {url}")
              else:
                  print(f"Image upload failed: {url} ({upload_response.text})")
          else:
              print(f"Image download failed: {url} ({response.status_code})")
  
  # 创建相册项
  def create_media_item(upload_token, headers):
      create_url = "https://photoslibrary.googleapis.com/v1/mediaItems:batchCreate"
      body = {
          "newMediaItems": [{
              "description": "Uploaded from Python",
              "simpleMediaItem": {
                  "uploadToken": upload_token
              }
          }]
      }
      response = requests.post(create_url, json=body, headers=headers)
  
      if response.status_code != 200:
          print(f"Failed to create media item: {response.text}")
  
  
  def read_file(filename):
      with open(filename, 'r') as file:
          data = file.readlines()
          data = [line.strip() for line in data]
  
      return data
  
  # 指定文件名并读取数据
  filename = "file.log"  # 替换为你的文件名
  data = read_file(filename)
  
  
  # 调用函数上传图片
  upload_images(data)

  4个月前 (08-17)

• 230816 演讲的力量 - 脑图

  

  4个月前 (08-16)

• 230715 阿里云/AWS 产品对标

  

  5个月前 (07-15)

• 230701 增长黑客 - 脑图

  

  5个月前 (07-01)